原标题:大什么叫大数据分析给茭通行业带来的五大变革 | 交通什么叫大数据分析的深度应用
9月20日由广东省智能交通协会和赛文交通网联合主办的第三届(2017)华南智能交通论坛在广州召开,在“2017年智慧路网技术与应用发展”分论坛上广东利通科技投资有限公司副董事长戴连贵就交通什么叫大数据分析深喥应用探索为主题做了发言,从大什么叫大数据分析与交通、大什么叫大数据分析应用分析方法、高速公路大什么叫大数据分析应用、高速公路大什么叫大数据分析发展方向等四个方面做了分析
以下为戴连贵演讲实录,未经本人核实(内容有删减)
首先和大家一起回顾┅下大什么叫大数据分析和交通的关系,接下来谈一下大什么叫大数据分析分析的方法这也是我的学习体会,最后分享几个大什么叫大數据分析应用案例和应用方向探讨
大什么叫大数据分析的本质就是一大堆结构化的和非结构化的什么叫大数据分析。因为什么叫大数据汾析量太大你没办法使用,你需要从中抓取出有价值的内容或你想要的什么叫大数据分析这就是大什么叫大数据分析应用。
从技术层媔说大什么叫大数据分析和以前的什么叫大数据分析时代的最大差异在于: 以前是什么叫大数据分析找应用、算法的过程,偏重于用抽樣推测全局,从抽样什么叫大数据分析中分析没有采集到的样本所对应的相关规律。
而大什么叫大数据分析时代的重要技术特征之一是應用、算法去找什么叫大数据分析的过程,因为什么叫大数据分析规模变成了技术上最大的挑战我们更关注每一个个体的微观表现。
大什么叫大数据分析应用经历近十年的发展目前的状况怎么样呢?
第一很多国家(包括我国)已经上升到国策化,已成为国家战略
第②,国内与国外差距已经不大
第三,有赖于机器学习和人工智能的底层支撑大什么叫大数据分析和机器学习已经是一对孪生兄弟。AI为夶什么叫大数据分析应用提供高效的手段大什么叫大数据分析为AI提供了海量的学习素材。
第四大什么叫大数据分析应用的标准化问题巳经迫在眉睫,专业化势在必行工具化正在普及。
大什么叫大数据分析究竟能做什么事呢
你在京东买了奶瓶又搜索过奶粉,那京东的夶什么叫大数据分析就预测到你可能有小宝宝了接下来一大堆和婴儿有关的东西都推荐给你。你可能说这就是大什么叫大数据分析啊吔太简单了。其实如果京东仅服务你一个人那简单,但是京东对几亿用户都能做这个推广就不简单。
有人说预测从古代就做了,大什么叫大数据分析做预测的核心是全样本多个维度的全样本,交叉确认人会说谎,在社交场合会隐藏部分内心但这部分内心在日积朤累的互联网上总有丝竹马迹会留下来,所以越来越多的什么叫大数据分析模型和什么叫大数据分析会给出无限接近感知的结果。也就昰可以
大什么叫大数据分析可以让计算机具有学习能力机器学习就是设计一个一些让计算机可以自动学习的算法,人工智能的核心是什麼归根到底是“计算机用大什么叫大数据分析在代替人脑来思考;计算机可能比人脑思考的更全面和迅速。”
对企业经营来讲具体可鉯解决以下问题:
事实上大什么叫大数据分析在交通中的应用已经给行业带来巨大的变革,主要体现在五个方面
第一,为用户提供服务內容越来越精准有赖于基于大什么叫大数据分析的交通路网动态分析,为用户提供了出行的实时方案选择
第二,交通通行效率越来越高这也有赖于各种各样的互联网感知器,对复杂天气、事故、各种突发事件的实时分析使得交通管理部门掌握了更多的交通状况,及時做出反应
第三,现场人工执法越来越少有赖于基于大什么叫大数据分析的行为分析,交通执法的事情都变成一个事后的非现场的执法
第四,交通服务自动化程度越来越高移动支付和各种自动化设备的应用,自助服务和无感服务普遍应用
第五,交通主管部门的决筞越来越科学政府对重大政策的制定和推出越来越依赖于对交通行为的分析,最典型的就是广州限外地牌照这件事情专业机构通过什麼叫大数据分析分析发现广州道路拥堵的症结。
各行各业都讲大什么叫大数据分析各级政府和各个行业都推出大什么叫大数据分析战略。那么如何开展大什么叫大数据分析应用呢如果我们把大什么叫大数据分析比作含有金属的矿石。
大什么叫大数据分析应用有两个方向:一个是如何把金矿石找到集中,存储;另一个是如何从矿石中提取金属
我们通常也把第二件事情叫做大什么叫大数据分析分析(挖掘),事实上大什么叫大数据分析分析是一个很专业的事情他的专业性和计算机软件类似。
计算机是一个工具计算机很重要,各个行業都用计算机但是,不是各个行业都要自己开发计算机系统和软件
归根到底大什么叫大数据分析就是含有金属的矿石,矿石很重要各行各业都有大量矿石,但是不是各个行业都要自己造工具和设备来冶炼提取金属。我们公司有团队做大什么叫大数据分析分析服务所以今天在这里就大什么叫大数据分析分析发发进行交流。
大什么叫大数据分析分析是需要场景设定的由要解决的问题驱动,离开用户需求和应用场景谈大什么叫大数据分析分析是忽悠是空谈。
大什么叫大数据分析是因为对它的分析使用找到其中蕴藏的金子或其他金屬,才产生和体现它的价值而不是因为其有多少多少什么叫大数据分析和用到了NB的技术和算法才体现了它的价值。
所以大什么叫大数据汾析应用的本质就是从一大堆矿石中用各种设备和工艺不断地去实验,找到我们没有预料到的稀有金属也就是大什么叫大数据分析应鼡的核心是大什么叫大数据分析分析。我司是专门做大什么叫大数据分析分析服务的所以在这里和大家分享一下大什么叫大数据分析分析方面的体会。
大什么叫大数据分析分析就是一个选矿的过程有了大什么叫大数据分析就是有了一大堆矿石,矿石中除了含有金还有沒有银?用什么样的工具什么样的方法,去提炼金或其他未知金属就是一个大什么叫大数据分析分析项目要回答的这问题。
所以大什麼叫大数据分析分析项目具有探索性并不是每一个项目都是成功的,也并不是每一个项目都能找到新的稀有金属一个成功的大什么叫夶数据分析项目需要多个角色参与:
业务用户:该角色对业务领域非常了解,是分析结果的受益人
项目发起人:负责项目的发起工作,通常我们称的业主的角色提供项目资金。
项目经理:负责项目进度质量确保项目达到预期目标。
商业智能分析师:提供业务领域的专業知识和技能
什么叫大数据分析库管理员(DBA):负责提供和配置什么叫大数据分析库环境,支持团队的分析需求
什么叫大数据分析工程師:负责执行具体的什么叫大数据分析提取工作和什么叫大数据分析操作。确保以正确的方式生成用作分析的什么叫大数据分析
什么叫夶数据分析科学家:负责什么叫大数据分析建模,选择有效的分析工具设计和执行分析方案。确保整体分析目标实现
从方法论角度,┅个大什么叫大数据分析分析项目是可以遵循一些已有的模型的这些模型在过去统计分析时代就已经诞生了。下面我们以EMC公司的大什么叫大数据分析分析模型来了解一下大什么叫大数据分析分析项目的六个阶段:
EMC模型有以下六个阶段:
发现(目标定义):把业务问题转化为汾析目标制定初始假设。
什么叫大数据分析准备:准备好分析沙盘对分析沙盘中的什么叫大数据分析执行ETL或ELT,转化成使用和分析的格式逐步治理什么叫大数据分析
规划模型:了解什么叫大数据分析之间的关系,确定模型的关键变量和合适的分析模型
模型建立:创建測试什么叫大数据分析集,学习什么叫大数据分析集和生产什么叫大数据分析集。运行模型修正参数,测试模型的可用性和对运行環境的要求
沟通结果:评判是否达到第一阶段的目标,是否满足业主的要求是否可以上线运行。
实施:在生产环境部署和实施一个试点項目应用项目模型。
三、高速公路大什么叫大数据分析应用案例
第一个案例:广东省高速公路省监控大什么叫大数据分析综合分析展示项目目标是对政府和营运管理单位关心的主要指标什么叫大数据分析进行分析展示,让管理者及时、直观地了解高速公路的运营管理情況
这个项目利用了省级联网收费运营管理平台和省级监控平台上的全省的高速公路收费什么叫大数据分析和监控什么叫大数据分析。
这昰我们的部分分析成果:全省交通事件、交通事故的什么叫大数据分析展示包括最近30天交通事件类型组成、最近30天交通事件/交通事故情況、环比、最近90天发生交通事故的前十区间。
第二个案例:深汕西保畅通高峰车流预警预测系统
广东省深汕西高速公路做的大什么叫大數据分析分析项目,目标是:预测路上的关键断面预测30分钟后的车流量
利用的什么叫大数据分析:实时采集路面上和服务区进出口的高清卡口截面车流量采用的模型是时间序列ARIMA 模型,车流量超过设定阀值的进行预警。
通过这个预测可以让运营单位提前做好高峰车流的保畅通措施,提升交通服务质量
第三个案例: 广东省高速公路货运情况的大什么叫大数据分析分析项目。
业主是:广东省大什么叫大数據分析局;
目标是:预测广东省经济景气情况;
利用的什么叫大数据分析是:广东高速公路实现了全计重收费和全国ETC联网在高速公路出ロ可以较为准确采集到货车载重量什么叫大数据分析。
模型是:构建了高速公路运输景气指数(ETBI)
四、高速公路大什么叫大数据分析应鼡展望
收费业务什么叫大数据分析有DB44为标准,但是监控、路政、养护什么叫大数据分析是没有行业标准或地方标准的收费、监控、路政、养护等各个不同业务域的什么叫大数据分析和什么叫大数据分析之间要想对话,那必须有一个标准遵循了这个标准,不同主体共享出來的什么叫大数据分析才可以进行融合