•   

    一种交通大数据洗刷整顿的设施和体例与流程

    一种交通大数据洗刷整顿的设施和体例与流程

    一种交通大数据洗刷整顿的设施和体例与流程

      本发明采用地名作为路径的节点,方便以后对于路径的计算,从而为智慧交通提供可靠、便捷的数据基础。 地名数据的采集和整理。主要采集交通信息中的地名,作为路径的基本单元。主要数据包括:名称、地理位置等。 一种交通大数据清洗整理的方法和系统主要实现从众多的交通数据中,整理出关于人、车辆和物品的交通活动路径,从而为智慧交通提供可行、可信的数据基础。 用户消费信息数据的清洗,数据中主要包括:消费标识ID、金额、车辆信息、时间等。从不同的数据源中,提取相关的信息。例如:公交卡信息、电子支付交通费信息等,从中提取路径的信息,起点、经过的地点和终止节点,乘车时间信息。 本发明路径的定义:依次相联系的地点的文字串,地点之间有分隔符号;多路径之间有分隔符号。以地名或者站点名称构建的路线;地名或者站点名称为路径的节点。 根据车辆信息和消费时间,结合公共交通实时信息的清洗得出乘车的地点,记录到人活动路径数据集中。车辆信息的数据整理后结果单元C为{Car_id,time,r},依次为车辆信息、时间和地名。假定集合为N={cii=0.1,...,k-1},ci为数据单元C,假定车辆的行驶路径为Lc。 交通监控信息的采集和整理,主要采集和整理的信息包括:监控地点关联的路名,被监控的车辆信息等。通过车牌识别,作为车辆路径的中间节点。 有终点记录的消费信息的终点整理主要计算描述如下:以M中Car_id和time在N集合中查找得到地名r,结合路径Lc,得到乘车人路径的起止点,结合线路的设置得到路径。 清洗的消费数据经过再次清洗,每次消费对应为一段路径,主要标志为:车辆信息和消费时间。每次消费数据清洗后,数据单元P格式如下:{Person_id,Car_id,time},依次为乘车人信息,车辆信息,乘车时间。假定集合为M={pii=0.1,...,k-1},pi为数据单元P。 假定路径集合L为{rii=0,...,n-1},其中ri表示s路径经过r0,...,rn-1,ri包含地名信息、时间信息、位置信息。 公共交通实时信息的清洗,数据中主要包括:车辆信息、到达各站点的时间、各站点经停时间等。主要为人的出行路径的计算提供关联的信息,包括:公交、轨道交通信息。 车辆活动路径的整理。主要分为:全程监控的路径算法和没有全程监控的综合路径算法两种。 在交通领域,应用大数据有助于了解城市交通拥堵问题中人的出行规律和原因,实现交通和生活的和谐,提高城市的宜居性,为政府精准管理提供基于数据证据的综合决策。 本发明实现交通数据中路径的清洗和整理,主要包括车辆、人和物品的路径。通过对交通大数据的清洗和整理,得到车辆、人和物品的活动路径。 物品活动路径的整理,主要和承运的车辆信息、物品运送的目的地相关,综合计算得出物品的活动路径。 随着经济的快速发展,城市化程度日益提高,它也导致城市车辆不断增多,人口密度不断增大,道路环境不断恶化,它表现为交通拥堵,交通事故多发和环境污染日益严重。政府虽然加大了市政道路、公共交通等基础建设,但是仍不能很好地解决这一问题。智慧交通是改善城市交通的关键所在,而及时准确获取交通数据并构建交通数据处理模型是建设智慧交通的前提,而这一难题可以通过大数据技术得到解决。 本发明提供了一种交通大数据清洗和整理的方法,以地名为基础,路径为线索,从海量的交通数据中提炼出人、车辆和物品的活动路径,并保存供后续的计算分析使用。 人的活动路径的整理。音讯经管是学什么的音讯经管硕士专职安详员筑...,根据消费的地点和时间,整理出完整的路径,并填写到人的活动路径中。主要包括:无终点记录的消费信息的终点整理,可以以下一次活动路径的起点作为上一次的终点;中间节点的整理,依据路线的设置整理,或者依据活动路径的地理信息位置的记录结合地点位置信息进行整理。无终点记录的消费信息的终点整理主要计算描述如下:以M中Car_id和time在N集合中查找得到地名r,结合路径Lc,得到乘车人的活动路径Pc(路径的起点为r),判断下一次的路径的起点是否在线路上,在则作为Pc路径的终点;不在则线路的终点为路径终点。 全程监控的路径算法。仅仅需要将清洗的数据按时间间隔分割,按车辆信息的识别,换算成路径的标准形式即可。如果已知路径的分割方法,例如订单的结束等;若没有,则给定时间间隔作为路径分割的方法。之后通过车辆地理位置信息,匹配地点,把实时信息换成路径的标准表示形式。车辆活动路径单元格式{Car_id,LC},车辆的ID和车辆的活动路径。 公交路线的采集和整理。按路径的定义设置公交的路线。主要数据包括:线路名称、行驶路径、运营时间、运营商信息等。 停车信息的采集和整理。主要采集的数据包括:停车场位置关联的地名,地理位置,停车容量,车位和停车的车辆信息等信息。停车场位置关联的地名作为停车车辆路径的起始地名。 停车信息的清洗,数据中主要包括:车辆信息、取车时间、停车时间、对应地点名称。取车时间作为车辆活动的起始点路径的时间,停车时间作为路径终点的时间,相应地点作为车辆活动路径的起点和终点。 本发明涉及大数据和智慧交通领域,主要提供一种交通大数据清洗整理的方法和系统。给出路径的定义,设定路径集合节点包含信息:地名信息、时间信息、位置信息。交通大数据清洗包括:用户消费数据清洗,公共交通实时信息清洗,交通监控数据清洗,停车信息清洗等。数据清洗后,进过多次整理和关联计算,实现人、车辆和物品活动路径的规范表述和记载,得到结果,整理的结果单元中包括:主体识别ID(人、车辆和物品的识别)、路径集合。系统主要从活动路径的角度,来整理交通数据,从而为交通数据的分析提供了数据基础。 数据的采集技术已经日趋成熟,数据采集的渠道众多,如何从不同的数据源中获取所需的数据,整理好为智慧交通服务是个值得探讨的问题。 乘车人信息的采集和整理。主要通过交通消费信息获取,获取关联的时间和车辆信息,整理路径的起始点,从而整理整个路径。 至此,人的活动路径整理算法完成。人活动路径L单元格式{Person_id,Lp},人的识别ID,人的活动路径路径。 本发明数据包括但不限于:站点信息、公交实时信息、交通卡消费信息、地铁实时信息、停车场实时信息和交通监控采集的车辆信息等。 一种交通大数据清洗整理的方法和系统主要通过交通数据的多次清洗,整理计算,得到路径数据。为智慧交通提供了数据基础,结合相应的分析计算方法,可以更好的为交通服务。 虽然大数据挖掘技术在交通领域的发展前景一路看好,但大数据技术在实际使用中仍然面临一些问题,其中最主要的问题就是:面对多样、封闭的运行环境,交通数据如何收集管理?如何保证数据的质量?如何将其快速的应用?这是各地政府、交通企业、交通系统集成商共同面临的难题。 没有全程监控的综合路径算法。主要依靠停车场数据、监控信息等。从停车信息中获取车辆信息,得出车辆路径的起点或者终止点,辅助以交通监控的信息,计算出车辆对应的活动路径。 本发明采用的路径定义,主要为文字形式的表示,通过设定的分隔符号分割,为路径的检索提供便利。

    上一篇:

    下一篇:

    数据清洗
    2019-10-04 02:57
    阅读数 2881
    评论数 1
I'm loading
 家电维修|北京赛车pk10