据中国汽车工业协会统计分析,2016年8月,在商用车主要品种中,与上月相比,客车和货车产销均呈增长,货车产销22.26万辆和23.25万辆,环比增长9.15%和10.21%,同比增长20.51%和15.37%。

而远程被管理车辆每天大约需要上传20MB左右的数据。按照100万辆计算,每月大约600TB,每年7.2PB左右。而100万辆车对数据中心的存储需求大约在14PB。

面对不断增长的数据,对商用车纳入远程监控管理和提供远程信息服务的要求日益提高。相关交通运输行业作为传统行业的“老大哥”,在大数据时代的背景下,面临海量交通安全数据的处理,转型势在必行。对基础架构技术进行革新,配合上层软件解决方案的软硬件结合的模式将重塑高效、安全的交通运输业未来。

海量数据存储、实时分析

中交兴路智能车货匹配案例

北京中交兴路信息科技有限公司(以下简称“中交兴路”)是一家专注于商用车车联网领域的运营和服务商,提供安全、运行稳定可靠的完整车联网信息服务解决方案。

传统方案将数据的采集和存储作为前端任务,而将数据的分析作为后端任务。各种传感器技术的应用造成数据种类复杂多样,非结构化数据所占比重快速上升,海量增长的数据也对网络传输和后端处理能力造成很大的压力。

远程被管理车辆每天大约需要上传20MB左右的数据。按照100万辆计算,每月大约600TB,每年7.2PB左右。根据政府监管和中交兴路其它增值服务需求(一年两份冗余),100万辆车对数据中心的存储需求大约在14PB。


面对如此海量的数据,中交兴路首先需要将数据的访问和存储等服务从硬件资源池中分离出来,使数据访问脱离硬件以面对新型存储设备和存储容量扩充等需求,此外中交兴路还需要考虑存储系统的性能和带宽以应对百万级车辆同时上传数据的需求。

打造智慧交通

“芯”方案

如此一来,增强数据存储能力,提高大数据处理和分析性能成为关键。作为国内领先商用车车联网服务商和全国性道路货运车辆公共监管与服务平台的供应商,中交兴路与英特尔合作,配合英特尔架构计算平台的领先优势,部署用以应对海量数据的采集、存储和分析等业务对数据中心的性能需求。

目前,中交兴路大数据平台可以满足现有百万级车辆的10PB级数据存储能力和存储性能需求,并可灵活扩展以应对更多车辆数据的存储挑战。与此同时,相应的车联网解决方案对大量车载终端海量实时数据及时采集、处理、存储和分析,同时支持大规模终端用户实时查看、分析、监控和处理实时业务,并可伴随业务规模的增长而动态扩充平台性能以满足业务需求。

中交兴路大数据中心利用分布式处理的软件框架ApacheHadoop/HBase和基于英特尔至强处理器E5系列的服务器实现百万级别车辆数据的存储、查询、分析和统计。底层架构使用英特尔至强处理器E7系列的出色性能和大内存支持等特性实现数据的实时分析和处理,并轻松实现计算性能的扩展,用以支持更高的计算密度和增强的虚拟化等特性,使得中交兴路大数据平台成为理想的云计算技术运行平台。

针对中交兴路车联网平台百万级车辆管理的业务需求,中交兴路和英特尔还一起研发实施了英特尔架构的硬件平台和第三方商业、开源软件相结合,基于云计算和大数据处理技术的车联网平台压力测试。压力测试方案模拟可以10万、30万、50 万车辆的位置和告警(如超速、疲劳驾驶),持续运行1小时。目前,中交兴路大数据中心既服务于中交各业务和产品线,也服务于整个货运生态;针对合作企业需求,通过数据开放平台,提供数据分析、趋势预测、用户行为画像、区域分析、咨询报告等服务。

“芯”动力

“芯”可能

中交兴路车联网大数据平台通过实现PB 级海量数据的集中存储和管理,满足车联网业务需求。该平台帮助确保车辆安全保障和实时护驾,通过实时获取车辆各项状态及信息数据实现实时管控,高效安全进行车货匹配,创新了行业商业模式,为行业发展转型奠定了基础。

基于英特尔架构的解决方案,凭借其高性能、可扩展性、灵活性、安全性等优势而构建起了包括存储、网络、计算在内的下一代数据中心架构,完美地支持了未来车联网发展和行业业务需求,而这一切只是英特尔助力交通运输行业转型、企业业务升级的一个“小”体现的缩影。

原文发布时间为:2017-03-28

本文来自云栖社区合作伙伴“大数据文摘”,了解相关信息可以关注“BigDataDigest”微信公众号

每年14PB数据存储需求,海量交通安全数据如何安放?相关推荐

  1. 数据存储需求多样化加剧,分而治之成大势所趋

    数字经济时代,作为关键生产要素,数据正在重塑企业/组织的运营.管理和决策,乃是一切创新的基础. 因此,要想实现数据要素价值的持续释放,首先就是让数据存得下.存得好.不过,随着千行百业数智化转型的深入, ...

  2. 数据存储需求骤变,联想凌拓多招齐发推动数以致用

    有人说,数据存储决定着未来数字化转型的深度.深以为然. 今年以来,千行百业的用户们愈发意识到数据存储的重要性.无论是席卷全球的生成式AI浪潮,需要存储"投喂"各种非结构化数据:还是 ...

  3. opensplice dds v6.3.2_DDS生态社区带你解读|Filecoin创始人胡安:数据存储需求未来会增长3倍...

    10月27日,在第六届区块链全球峰会上,IPFS分布式存储和Filecoin创始人Juan Benet发表了关于Filecoin及数据存储主题演讲. 10月27日-28,由万向区块链主办的第六届区块链 ...

  4. 服务端指南 数据存储篇 | 选择合适的数据存储方案

    在服务端会经常遇到数据存储的选型问题,是选择使用关系型数据库 MySQL,还是选择内存数据库 Redis,还是选择文档数据库 MongoDB,还是选择列族数据库 HBase, 还是选择全文搜索引擎 E ...

  5. SDRAM的数据存储实现并对其数据进行读写操作

    SDRAM的数据存储实现并对其数据进行读写操作 文章目录 SDRAM的数据存储实现并对其数据进行读写操作 1 SDRAM 1.1 简介 1.2 SDRAM结构和原理 1.3 SDRAM块 2 SDRA ...

  6. 海量视频监控数据存储和管理是大数据最重要的命题

    海量视频数据的存储和管理 维基百科全书的定义:"大数据是飞速增长的,用现有数据库管理工具难以管理的数据集合".这些数据包括:社交媒体.移动设备.科学计算和城市中部署的各类传感器等等 ...

  7. 交通大数据应用细分_大数据之路之交通大数据应用总体架构设计

    上期简单介绍了大数据,了解了大数据应用的可行性与必然性,事实上也的确如此,大数据在公共管理(某省的最多跑一次),教育行业(某省交通厅大数据建设),税务行业(某省税务大数据平台应用建设),信息管理(某省 ...

  8. mysql更改数据库数据存储目录_MySQL更改数据库数据存储目录

    MySQL数据库默认的数据库文件位于/var/lib/mysql下,有时候由于存储规划等原因,需要更改MySQL数据库的数据存储目录.下文总结整理了实践过程的操作步骤. 1:确认MySQL数据库存储目 ...

  9. < Android数据存储> 任务二 应用程序数据文件夹里的文件读写

    :zh]Android中提供了两个方法用来打开应用程序的数据文件夹IO流. 1.FileInputStream openFileInput(String name):参数name表示某个文件名,该方法 ...

最新文章

  1. drools规则引擎可视化_Springboot2(60)集成规则引擎Drools
  2. webstorm 使用svn
  3. NUMBER_GET_NEXT 获取编号年度问题
  4. python2/python3安装pip/pip3及使用国内镜像源(python2/3同时安装)
  5. Finding Structure in Time论文解读
  6. lamba List 转 Map
  7. 合众朱光林:借O2O模式反馈企业才有价值
  8. 歪果仁眼中的中国理工科科研调查:让学术氛围更自由成最大呼声 | 报告
  9. Linux: 系统设置与备份策略
  10. SPI以及UART的测试DEMO
  11. AutoSar软件文档阅读
  12. PCIE5.0英文版协议
  13. 学会演讲必看的五本书籍推荐
  14. 基于springboot电商生鲜购物商城平台设计与实现(含源码+数据库文件)
  15. centos部署hadoop完全分布式
  16. 【宏基因组学】微生物宏基因组学论文摘要集锦
  17. MFC连接SQL数据库操作
  18. 2023 最新微信域名拦截检测API代码
  19. 雨林木风linux如何安装教程,雨林木风桌面操作系统Ylmf OS 4.0安装演示
  20. 围绕增材制造零件可靠性分析,概述增材制造方法的可重复性!

热门文章

  1. Kernel: x86: preempt_count, per-cpu(每个CPU一份的变量)
  2. 快充对电瓶车有好处吗,快充会不会影响电池的寿命?
  3. 待解决:记一次SSD故障,格式化失败
  4. 计算机考证有学历要求吗
  5. python监控网页_python实时监控网页
  6. 资源提取码没给我?教你下载忘给密码的网盘资源
  7. 《数据库系统》(三) 结构化查询语言
  8. 网络安全再成央视3·15主角,安全手机变身“香饽
  9. CSS——图片自适应宽高
  10. HDU-6968-I love exam