基于云服务创建实时运营数据分析服务

实时运营数据分析
  • 使用数据计算服务、流数据总线、流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态。

使用京东云的流数据总线、流计算以及数据大屏,对于其他云平台可做参考。

流数据总线是面向大数据场景下可扩展、分布式、高吞吐量的消息服务,提供低延迟的消息发布及订阅功能,帮助用户快速构建流式数据的分析和应用。

流计算是大数据场景下的实时数据处理与分析平台,支持用户以 SQL 方式编写数据处理作业, 降低流式数据开发门槛,帮助用户快速构建流处理应用。

京东云数据大屏是一款基于实时多层渲染技术的数据可视化工具,它能够提供对海量数据进行实时场景化展示,同时还提供数据分层展示功能,用户可以通过钻取、缩放等交互方式全面的掌握数据。

创建“流数据总线”主题,配置数据归档

1.登录京东云,点击云服务,选择“流数据总线”进入流数据总线控制台。

2.进入控制台后,进入流数据总线的“主题管理”页面,点击“新建主题”。

3.输入主题名称为“lab_rtd01”,可选择输入备注,其他根据业务需求选择或者为默认。

4.点击确认“lab_rtd01”主题创建完成,这时“归档”状态显示红叉。


5.单击创建的“lab_rtd01”主题,进入数据监控页面,“监控”这里就不做介绍了。然后点击“归档”进入归档页面。


6.点击“开启归档数据”按钮为ON,进行归档设置。

7.根据项目需求自行设置“归档触发条件”,可以选择默认。“归档目标设置”目前可选“对象存储”或“数据计算服务”,这里选择之前已经配置好的数据计算服务中的库表。“消息识别模式”分为JSON和分隔符,这里演示选择默认JSON。


8.接下来配置JSON格式的“消息样例”,“{“province_id”:“1”,“province_name”:“北京”,“province_code”:“110000”,“province_sale”:“10003”}”,消息样例一般是自动解析。也可以根据项目需求进行手动调整字段对照。

9.根据项目需求选择是否保存异常处理,这里选择不保存。点击确认完成归档配置。


10.配置成功后,返回“流数据总线”主题页面,可以看到“归档”标题打了勾。还可以根据需求,点击编辑修改主题属性,如将生命周期改为7天。

基于云服务创建实时运营数据分析服务(一)相关推荐

  1. 基于云服务创建实时运营数据分析服务(二)

    基于云服务创建实时运营数据分析服务 实时运营数据分析 使用数据计算服务.流数据总线.流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态. 使用京东云的 ...

  2. 基于云服务创建实时运营数据分析服务(三)

    基于云服务创建实时运营数据分析服务 实时运营数据分析 使用数据计算服务.流数据总线.流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态. 使用京东云的 ...

  3. 基于云服务创建离线数据统计分析服务(一)

    基于云服务创建离线数据统计分析服务 离线数据统计分析 使用数据工厂.数据计算服务产品,可对多源数据(DB,FILE)整合分析,制定周期性的调度任务,提供任务监控及预警.数据统计分析等功能,可对接BI报 ...

  4. 基于Flink+ClickHouse构建实时游戏数据分析最佳实践

    简介:本实践介绍如何快速收集海量用户行为数据,实现秒级响应的实时用户行为分析,并通过实时流计算.云数据库ClickHouse等技术进行深入挖掘和分析,得到用户特征和画像,实现个性化系统推荐服务. 直达 ...

  5. 基于数据挖掘的智能停车场运营数据分析系统

    温馨提示:文末有 CSDN 平台官方提供的学长 Wechat / QQ 名片 :) 1. 项目简介 随着大数据分析技术的发展,智慧城市.智慧停车的领域正在发展,智慧停车场可以采集.记录以及存储停车场的 ...

  6. 基于云架构监控摄像头直播运营简介

    基于云架构监控摄像头直播运营简介 监控视频大数据基于云技术设计,在云端转码.解码.云转发.云智能等技术行业领先,通过宽带网的将前端图像远程监控.传输.存储.管理的增值业务.支持第三方模拟监控升级.数字 ...

  7. 三体云–高可用实时音视频服务演进之路

    三体云的前身是一家视频会议提供商,如今致力于为多领域提供实时音视频技术整体解决方案,为开发者提供简单易用.极度稳定.低延时.高保障的直播云服务,这其中的转变在架构升级.系统调度和质量监控三个方面都有不 ...

  8. 基于云开发创建(小程序云商城,基本页面的创建及动态代码的编写)

    CSDN话题挑战赛第2期 参赛话题:万家争鸣的云计算修罗场 在这个专属于"云"的时代,各位云端弄潮儿们,请分享出你的云计算学习历程吧! 你可以从以下几个方面着手(不强制),或者根据 ...

  9. 基于云平台的ATS系统微服务架构方案研究

    当前,城市轨道交通行业云平台化已经进入了大规模的应用阶段,云平台有着低成本.高可用.高扩展等优势,能够更好地助力城市轨道交通行业实现服务业务创新[1-2].列车自动监控系统(Automatic Tra ...

最新文章

  1. 将Pandas中的DataFrame类型转换成Numpy中array类型的三种方法
  2. layui tab选项卡外部html页面,layui的Tab选项卡知识
  3. 如何防御DDoS攻击
  4. 问题 D: 约数的个数
  5. Redash 9安装与配置(基于Docker方式)
  6. 第十三课时:递归组件的使用
  7. NoClassDefFoundError: org/apache/flink/metrics/MetricGroup
  8. Maven -- 在进行war打包时用正式环境的配置覆盖开发环境的配置
  9. 利用老毛头启动盘重装win7
  10. React后台管理系统-file-uploader组件
  11. 编译原理:文法及其二义性(判定及消除)
  12. 西门子的十一位CEO
  13. 使用VSCode创建Java项目
  14. vbox android wifi,virtualbox桥接无线网卡实现上网
  15. JNI HelloWorld 亲测可以。
  16. 测试人员面试需要掌握的内容
  17. 【注意】这款Python快递查询小系统超级好用:不信你自己试试?
  18. vue实现表格列位置的拖拽
  19. 对抗博弈搜索——吃豆人
  20. 浅说北仑有趣的地名之霞浦篇

热门文章

  1. Win10 Ubuntu16.04 时间同步问题
  2. python的自带数据集_机器学习基础 / 加载scikit-learn自带的数据集 - 汇智网
  3. [bzoj 4424]Cf19E Fairy
  4. 塞规公差带图_塞规公差计算表
  5. 计算机网络设计前三层实验,基于Packet Tracer的计算机网络实验设计
  6. lgv20刷twrp_LG V30+ 日版 L-01K 刷机解锁BL 刷入TWR 回复日版基带
  7. 联想y7000p怎么连接显示器_这一次,做中华良心想—联想Y7000P游戏本体验评测
  8. 404 Note Found队 Alpha7
  9. 【实现】Java实现的文件批量改名
  10. 详细讲解vue2组件通信(一)——父传子props