交通大数据应用与研究

第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社主要内容主要内容第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念计算机的发展计算机的发展计算机的发展计算机的发展1906:1906:美国的美国的LeeDeForestLeeDeForest发明了电子管。发明了电子管。19241924年年22月：月：IBMIBM公司成立。公司成立。1947:Bell1947:Bell实验室发明了晶体管实验室发明了晶体管1947:Bell1947:Bell实验室发明了晶体管实验室发明了晶体管2020世纪世纪5050年代：集成电路计算机的出现年代：集成电路计算机的出现19741974年年44月月11日：日：INTELINTEL发布发布88位的微处理器芯片位的微处理器芯片80808080286286，，386386，，486486，，P5P5，（，（内存、主频、硬盘参数内存、主频、硬盘参数）），，，，，，，（，（内存主频硬盘参数内存主频硬盘参数））双核，多核双核，多核微型机小型机中型机大型机超大型机微型机小型机中型机大型机超大型机3微型机，小型机，中型机，大型机超，大型机微型机，小型机，中型机，大型机超，大型机11基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念计算机及其网络的发展手工手工单计算机单计算机局域网局域网传统流程计算机化减轻劳动强度局域网局域网资源局部共享网络应用系统推广广域网广域网网络应用系统推广实现真正的数据交换脑资源共享4实现真正的数据交换脑、资源共享实现统一的管理11基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念互联网（互联网（InternetInternet））互联网（互联网（InternetInternet））以一组通用的协定相连，形成逻辑上的单一巨大国际网络。以一组通用的协定相连，形成逻辑上的单一巨大国际网络。511基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念物联网物联网物联网物联网是一个基于互联网、传统电是一个基于互联网、传统电信网等信息承载体，让所有信网等信息承载体，让所有能够被独立寻址的普通物理能够被独立寻址的普通物理能够被独立寻址的普通物理能够被独立寻址的普通物理对象实现互联互通的网络。对象实现互联互通的网络。小范围网络，家庭，设备小范围网络，家庭，设备灵活组网灵活组网灵活组网灵活组网物联网走进物联网走进《《政府工作报告政府工作报告》》611基本概念基本概念11基本概念基本概念车联网车联网车联网车联网利用先进传感技术、网络技术、计算技术、控制技术、智利用先进传感技术、网络技术、计算技术、控制技术、智能技术，对道路和交通进行全面感知，实现多个系统间大能技术，对道路和交通进行全面感知，实现多个系统间大范围、大容量数据的交互对每辆汽车进行交通全程控制范围、大容量数据的交互对每辆汽车进行交通全程控制范围、大容量数据的交互，对每辆汽车进行交通全程控制，范围、大容量数据的交互，对每辆汽车进行交通全程控制，对每条道路进行交通全时空控制，以提供交通效率和交通对每条道路进行交通全时空控制，以提供交通效率和交通安全为主的网络与应用。安全为主的网络与应用。7第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念数据与信息数据与信息数据与信息数据与信息同一个数据，不同的人可能对它作不同的处理，获得同一个数据，不同的人可能对它作不同的处理，获得信息的价值也就不同。信息的价值也就不同。例如：监控数据，收费数据例如：监控数据，收费数据数据和信息也是相对的。数据和信息也是相对的。例如：维护过程例如：维护过程存储数据信息转换处理（运用知识采集、组织8数据信息和处理数据）11基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念数据与信息数据与信息数据与信息数据与信息数据数据是一组表示数量、行动和目标的非随机的可鉴别的符号是一组表示数量、行动和目标的非随机的可鉴别的符号信息信息是经过加工后的数据是经过加工后的数据,,它对决策或行为有现实或潜在的它对决策或行为有现实或潜在的价值价值或者说信息是经过加工以后并对客观世界产生影或者说信息是经过加工以后并对客观世界产生影价值。价值。或者说信息是经过加工以后、并对客观世界产生影或者说信息是经过加工以后、并对客观世界产生影响的数据。响的数据。数据数据是原料，信息是产品；是原料，信息是产品；数据数据是信息的符号表示，或称载体是信息的符号表示，或称载体数据不经加工只是种原始材料其价值只是在于记录了客数据不经加工只是种原始材料其价值只是在于记录了客，数据不经加工只是一种原始材料，其价值只是在于记录了客，数据不经加工只是一种原始材料，其价值只是在于记录了客观数据的事实。观数据的事实。信息信息是数据的内涵，是数据的语义解释是数据的内涵，是数据的语义解释911基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念数据库数据库是按照数据结构来组织、存储和管理数据的仓库，它产生于距今五十是按照数据结构来组织、存储和管理数据的仓库，它产生于距今五十年前，随着信息技术和市场的发展，特别是二十世纪九十年代以后，年前，随着信息技术和市场的发展，特别是二十世纪九十年代以后，年前，随着信息技术和市场的发展，特别是二十世纪九十年代以后，年前，随着信息技术和市场的发展，特别是二十世纪九十年代以后，数据管理不再仅仅是存储和管理数据，而转变成用户所需要的各种数数据管理不再仅仅是存储和管理数据，而转变成用户所需要的各种数据管理的方式。据管理的方式。据管理的方式。据管理的方式。IBMIBM的的DB2DB2OracleOracleInformixInformixSybaseSybaseSQLServerSQLServerIBMIBM的的DB2DB2，，OracleOracle，，InformixInformix，，SybaseSybase，，SQLServerSQLServer，，mySQLmySQL，，AccessAccess数据库，数据库，FoxProFoxPro，，DbaseDbase数据库有很多种类型，从最简单的存储有各种数据的表格到能够进行数据库有很多种类型，从最简单的存储有各种数据的表格到能够进行海量数据存储的大型数据库系统都在各个方面得到了广泛的应用。海量数据存储的大型数据库系统都在各个方面得到了广泛的应用。1011基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念数据分析数据分析数据分析是是为了提取有用信息和形成结论而对数据加以详细研究和数据分析是是为了提取有用信息和形成结论而对数据加以详细研究和数据分析是是为了提取有用信息和形成结论而对数据加以详细研究和数据分析是是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。数据也称观测值，是实验、测量、观察、调查等的概括总结的过程。数据也称观测值，是实验、测量、观察、调查等的结果常以数量的形式给出。结果常以数量的形式给出。结果，常以数量的形式给出。结果，常以数量的形式给出。1111基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念数据分析步骤数据分析步骤探索性数据分析：当数据刚取得时，可能杂乱无章，看不出规律探索性数据分析：当数据刚取得时，可能杂乱无章，看不出规律，通过作图、造表、用各种形式的方程拟合，计算某些特征量等，通过作图、造表、用各种形式的方程拟合，计算某些特征量等手段探索规律性的可能形式，即往什么方向和用何种方式去寻找手段探索规律性的可能形式，即往什么方向和用何种方式去寻找和揭示隐含在数据中的规律性和揭示隐含在数据中的规律性模型选定分析，在探索性分析的基础上提出一类或几类可能的模模型选定分析，在探索性分析的基础上提出一类或几类可能的模型，然后通过进一步的分析从中挑选一定的模型。型，然后通过进一步的分析从中挑选一定的模型。型，然后通过进步的分析从中挑选定的模型。型，然后通过进步的分析从中挑选定的模型。推断分析：通常使用数理统计方法对所定模型或估计的可靠程度推断分析：通常使用数理统计方法对所定模型或估计的可靠程度和精确程度作出推断。和精确程度作出推断。和精确程度作出推断。和精确程度作出推断。1211基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.19-20.青岛）主办：中国公路学会承办：《中国交通信息化》杂志社基本概念基本概念数据仓库（英语：数据仓库（英语：DataWarehouseDataWarehouse））数据仓库是个面向主题的（数据仓库是个面向主题的（SubjectOrientedSubjectOriented）集成）集成数据仓库是一个面向主题的（数据仓库是一个面向主题的（SubjectOrientedSubjectOriented）、集成）、集成的（的（IntegratedIntegrated）、相对稳定的（）、相对稳定的（NonNon--VolatileVolatile）、反映历）、反映历史变化（史变化（TimeVariantTimeVariant）的数据集合，用于支持管理决策）的数据集合，用于支持管理决策(DecisionMakingSupport)(DecisionMakingSupport)。。(DecisionMakingSupport)(DecisionMakingSupport)。。数据仓库研究和解决从数据库中获取信息的问题。数据仓数据仓库研究和解决从数据库中获取信息的问题。数据仓库的特征在于面向主题、集成性、稳定性和时变性。库的特征在于面向主题、集成性、稳定性和时变性。13库的特征在于面向主题集成性稳定性和时变性。库的特征在于面向主题集成性稳定性和时变性。11基本概念基本概念第十六届中国高速公路信息化研讨会（2014.3.1