大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。对于“大数据”(Big data)研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。
一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换而言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。
大数据技术(big data),或称巨量资料,指的是所涉及的资料量规模巨大到无法通过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。
1.Volume:数据量巨大
体量大是大数据区分于传统数据最显著的特征。一般关系型数据库处理的数据量在TB级,大数据所处理的数据量通常在PB级以上。
2.Variety:数据类型多
大数据所处理的计算机数据类型早已不是单一的文本形式或者结构化数据库中的表,它包括订单、日志、BLOG、微博、音频、视频等各种复杂结构的数据。
3.Velocity:数据流动快
速度是大数据区分于传统数据的重要特征。在海量数据面前,需要实时分析获取需要的信息,处理数据的效率就是组织的生命。
智能交通整体框架主要包括物理感知层、软件应用平台及分析预测及优化管理的应用。其中物理感知层主要是对交通状况和交通数据的感知采集;软件应用平台是将各感知终端的信息进行整合、转换处理,以支撑分析预警与优化管理的应用系统建设;分析预测及优化管理应用主要包括交通规划、交通监控、智能诱导、智能停车等应用系统。
系统利用先进的视频监控、智能识别和信息技术手段,增加可管理空间、时间和范围,不断提升管理广度、深度和精细度。整个系统由信息综合应用平台、信号控制系统、视频监控系统、智能卡口系统、电子警察系统、信息采集系统、信息发布系统等组成。以达到四方面的目标:提高通行能力、减少交通事故、打击违章事件、出行信息服务。
大数据采集与存储
交通数据采集的范围、广度和深度急剧增加,数据量随着智能交通系统建设规模不断扩大。以线圈、视频检测、微波、卡口、GPS、浮动车等产生交通流监测数据、视频监控数据、系统数据、服务数据等构筑了交通大数据。以上海市数据为例,全市接入6600多个卡口,每天近8000万的通行数据,产生大量的视频、图片和通行记录。利用二次识别技术,对车辆图片和视频进行分析,形成更准确的数据资源。
大数据分析与应用
高效的云计算能力,带来千亿数据的秒级返回的检索能力,为大数据分析应用,提供了快速的保障。基于深度学习的智能分析算法,为大数据分析应用提供有力的工具。交通大数据的分析,为交通管理、决策、规划、服务以及主动安全防范带来更加有效的支持。 利用大数据技术,结合高清监控视频、卡口数据、线圈微采集波数据等,再辅以智能研判,基本可以实现路口的自适应以及信号配时的优化。