简介: 客户通过把日志数据迁移到SLS,替代原有的kafka、ES、ClickHouse,累积节省成本达到30%,同时满足了稳定性、扩展性需求,以及对日志查询分析的需求。

更多存储标杆案例
欢迎点击下方链接查看

阿里云存储标杆案例样板间

公司介绍
哈啰出行是国内领先的专业移动出行平台,致力于为用户提供便捷、高效、普惠、安全的出行工具和服务。公司于2016年9月在上海成立。成立四年多来,秉持着“科技推动出行进化”的使命,凭借卓越的创新能力、差异化的发展战略和技术驱动下的优异运营能力,哈啰从激烈的市场竞争中脱颖而出。目前公司已经进化为包括两轮出行(哈啰单车、哈啰助力车、哈啰电动车、小哈换电)、四轮出行(哈啰顺风车、全依托于智能锁,赋能了在线的实时调度。单车数据、APP数据无缝打通,因而催生了数据的实时采集、分析、存储需求。业务场景介绍2网叫车、哈啰打车)等的综合化移动出行平台,APP累计注册用户超4亿。
截至2020年10月底,哈啰出行旗下哈啰单车已经进驻全国超460城,用户累计骑行240亿公里,累计减少碳排放量近280万吨;哈啰助力车已进入全国超400城,用户累计骑行近80亿公里,节约碳排放28万吨;哈啰顺风车已覆盖全国超300城,认证车主逾1800万名。

业务场景介绍
依托于智能锁,赋能了在线的实时调度。单车数据、APP数据无缝打通,因而催生了数据的实时采集、分析、存储需求。

每天增量数据TB级别,影响系统稳定性
客户原有架构是数据采集到kafka,然后应用日志写入ELK做查询,同时写入ClickHouse做分析。由于每天增量数据在TB级别,对ES稳定性压力比较大。当查询数据操作,会影响ES的写入延时。由于写入量大,查询基本处于不可用状态。因此,当天数据采用单副本,隔天再生成多副本。这种方式对数据的可靠性时很大的挑战。同时,自建Kafka、ES、ClickHouse成本较高,急需降低成本。

日志服务提供TB级别日志的实时采集、弹性扩容、实时查询
阿里云日志服务为客户提供了TB级别日志的实时采集、弹性扩容、实时查询的能力。

在数据采集方面,原来把数据采集到kafka,在分发到下游ES、ClickHouse。SLS原生支持Kafka协议。各个客户端只需把kafka的地址设置成SLS的kafka协议地址即实现了无缝迁移。

在弹性扩容方面,SLS采用Shard模型,当流量发生上涨时,在控制台动动手指分裂Shard即可实现写入带宽的扩容。也可以设置成自动分裂,当流量打到上限时,自动扩容出新的Shard。

在查询和分析方面,客户原来采用ES做查询,ClickHouse做分析。而由于流量比较大,ES查询基本不可用。SLS同时提供了查询和分析能力。在查询方面,支持关键字检索、数值范围查询、json字段的递归查询、多条件组合查询。在数据分析方面,支持以SQL92语法分析日志,秒级别即可分析数百亿条日志。SQL语法支持200+函数,以及支持join计算,可与OSS、MySQL数据源做关联分析。同时一些特有的函数例如同比环比函数、IP地理位置函数等等。

在可视化方面,SLS控制台作为阿里云排名Top 5的控制台,为可以提供所见即所得的查询分析体验。同时控制台还可以供客户做二次开发,嵌入到自己的后台运维系统中。

达到的效果
客户通过把日志数据迁移到SLS,替代原有的kafka、ES、ClickHouse,累积节省成本达到30%,同时满足了稳定性、扩展性需求,以及对日志查询分析的需求。

原文链接
本文为阿里云原创内容,未经允许不得转载。

看阿里云如何用云上技术创新,帮助哈啰单车实现智能数据收治相关推荐

  1. 【观察】神州数码:向云转型再提速,技术创新再发力

    申耀的科技观察 读懂科技,赢取未来! 正所谓"不鸣则已一鸣惊人",这就是神州数码过去一段时间以来云上战略转型捷报频传的真实写照. 从今年11月初开始,神州数码先后与思科.IBM.中 ...

  2. 新数科技入驻华为云严选商城,以技术创新驱动企业云化升级

    近日,北京新数科技有限公司旗下核心软件产品ShinData DMP数据库云管理平台.ShinSight Pro监控和性能分析软件在华为云严选商城正式上架.两款产品完成和华为云GaussDB数据库的兼容 ...

  3. 高级算法专家储开颜:无端不视频 阿里视频云三大端上技术能力

    为什么80%的码农都做不了架构师?>>>    摘要: 阿里云拥有领先的云计算能力和丰富完善的基础设施,我们可以看到云上面的视频能力越来越强,我们可以在云端构建导播台.进行视频剪辑和 ...

  4. 中国数据库崛起,阿里云李飞飞:中国云数据库多种主流技术创新已领先国外

    "中国云数据库在很多主流技术创新上已经领先国外."李飞飞表示,"PolarDB未来还会不断基于新一代云计算架构进行创新突破,持续释放云计算的资源池化潜力,让客户享受到更多 ...

  5. SDN 网络技术创新探索 | 移动云 TeaTalk 线上直播 倒计时启动中

    在企业数字化转型.云服务和国家政策等多种因素驱动下,越来越多的企业.行业和政府机关将业务迁移到云上,随着移动云的快速发展,在"多系统.多场景.多业务"需求下,对网络提供差异化的服务 ...

  6. 阿里云引领云原生进化 | 云原生生态周报 Vol. 60

    作者 | 王思宇.汪萌海.李鹏 业界要闻 阿里云引领云原生进化,智能.互联.可信三位一体 阿里巴巴致力于为数字经济构建智能.互联.信任三位一体的创新基础设施,引领云原生进化新阶段.反观阿里云容器服务团 ...

  7. 【云计算服务平台调研】阿里云、腾讯云、华为云对比

    0. 阅前请看 本文是博主云计算课程结课作业,针对三个云计算服务平台调研,自己进行的资料整理. 价格部分对比是本人做的,价格随时间会有变动,以官网为准. 目录 0. 阅前请看 1. 云计算服务平台基本 ...

  8. 《云计算开放应用架构》标准发布,阿里云持续领航云原生

    简介:阿里云致力于为企业打造数字创新的最短路径,从实战中来,为价值而生. 5月26日,在 2021 云原生产业大会上,中国信通院联合 CNCF 发布 2021 年云原生优秀案例以及技术创新案例.阿里云 ...

  9. 2018深圳云栖拉开帷幕,飞天技术汇五大专场邀你参加~

    摘要: 感受万物互联的智能时代,洞察数字化转型的全新未来.云栖大会将情景化展示智能城市.智能生活.智能制造.智慧门店等阿里云IoT生态全景,20+专场,覆盖AI.新零售等全行业数字化转型解决方案. 飞 ...

最新文章

  1. 智领新时代 慧享新生活 —— CITE2018新闻发布会在北京召开
  2. 详解Ubuntu10.10下Qt连接Mysql数据库
  3. java基础面试题:java中实现多态的机制是什么?
  4. JZOJ 5639. 【NOI2018模拟4.8】秘密袭击
  5. 只有程序员才懂这些黑色幽默!
  6. c++ 对象数组_ArrayList实现分析(一)——对象创建
  7. latex python_怎么在 LaTeX 中排版 Python 代码?
  8. 华为辟谣将发布石墨烯电池手机;梁建章回应携程杀熟;GitLab 12.6 发布 | 极客头条...
  9. 解决俄罗斯大shen精简版Win10无法远程的问题及同类精简版系统无法远程问题,简单快捷方法。
  10. 大智慧705服务器文件夹,大智慧2文件目录结构.doc
  11. 信用卡诈骗检测(经过测试)
  12. 聊天程序设计实验报告——java
  13. 手写简易版Vue源码之数据响应化的实现
  14. alias别名设置及删除
  15. 【PPT】PPT设计丨1.实用功能丨
  16. DC NXT TOPO flow (1)SPG flow 基础
  17. 抖音全球购安心购服务规范|四川鹰迪
  18. Hive 导出数据的五种方式
  19. 如何将jpg,bmp等普通图片转成层次分明的二值图片(非仅用阈值分割)
  20. 三维导航,快速三维立体查看CAD图纸

热门文章

  1. java程序员面试技术_java程序员面试应该具备的一些基本技能
  2. 【LeetCode笔记】34. 在排序数组中查找元素的第一个和最后一个位置(Java、二分)
  3. linux rpm版本号,linux中RPM包命名规则
  4. C++中类和对象的一些注意事项
  5. python通讯录管理系统 tk_通讯录管理系统课程设计
  6. 节点name在graph中无法展示_图节点分类与消息传递
  7. 一会404一会500_没网络就是404?这锅可不能乱背!
  8. 耿美玉起诉饶毅名誉侵权,法院判了!驳回请求,但对饶毅方也应给予批评
  9. 篇幅达2840页、目录就有31页,这位华人小哥的博士论文堪比教材
  10. 颜宁的学生都已经副院长了!还发表了学校首篇Nature