路况大数据分析平台的设计与实现
作者机构:山西大同大学计算机与网络工程学院山西省大同市037009 山西大同大学教育科学与技术学院山西省大同市037009 山西大同大学网络信息中心山西省大同市037009
出 版 物:《电子技术与软件工程》 (ELECTRONIC TECHNOLOGY & SOFTWARE ENGINEERING)
年 卷 期:2020年第6期
页 面:200-201页
学科分类:12[管理学] 1201[管理学-管理科学与工程(可授管理学、工学学位)] 08[工学] 0838[工学-公安技术]
基 金:大同市工业和信息化局专项基金项目(项目编号:JXW2017001) 山西大同大学教学改革创新项目(项目编号:XJG2019202) 山西省教育科学“十三五”规划课题(项目编号:GH-18044) 山西大同大学科学研究项目(项目编号:2017K11)
主 题:大数据分析平台 路况分析 Apache Spark
摘 要:本文基于当下路况信息的预测问题,设计了一种路况大数据分析平台系统,本系统主要分为四个模块,可以对道路车流量、卡口状态、车辆行驶轨迹进行分析。系统主要技术是采用开源的Apache Spark计算引擎,底层使用HDFS存储数据,在Spark集群中计算,运用Spark算子对Hive中数据进行分析,最后的分析结果录入MySQL数据库中。