基于云服务创建实时运营数据分析服务(一)
基于云服务创建实时运营数据分析服务
实时运营数据分析
- 使用数据计算服务、流数据总线、流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态。
使用京东云的流数据总线、流计算以及数据大屏,对于其他云平台可做参考。
流数据总线是面向大数据场景下可扩展、分布式、高吞吐量的消息服务,提供低延迟的消息发布及订阅功能,帮助用户快速构建流式数据的分析和应用。
流计算是大数据场景下的实时数据处理与分析平台,支持用户以 SQL 方式编写数据处理作业, 降低流式数据开发门槛,帮助用户快速构建流处理应用。
京东云数据大屏是一款基于实时多层渲染技术的数据可视化工具,它能够提供对海量数据进行实时场景化展示,同时还提供数据分层展示功能,用户可以通过钻取、缩放等交互方式全面的掌握数据。
创建“流数据总线”主题,配置数据归档
1.登录京东云,点击云服务,选择“流数据总线”进入流数据总线控制台。
2.进入控制台后,进入流数据总线的“主题管理”页面,点击“新建主题”。
3.输入主题名称为“lab_rtd01”,可选择输入备注,其他根据业务需求选择或者为默认。
4.点击确认“lab_rtd01”主题创建完成,这时“归档”状态显示红叉。
5.单击创建的“lab_rtd01”主题,进入数据监控页面,“监控”这里就不做介绍了。然后点击“归档”进入归档页面。
6.点击“开启归档数据”按钮为ON,进行归档设置。
7.根据项目需求自行设置“归档触发条件”,可以选择默认。“归档目标设置”目前可选“对象存储”或“数据计算服务”,这里选择之前已经配置好的数据计算服务中的库表。“消息识别模式”分为JSON和分隔符,这里演示选择默认JSON。
8.接下来配置JSON格式的“消息样例”,“{“province_id”:“1”,“province_name”:“北京”,“province_code”:“110000”,“province_sale”:“10003”}”,消息样例一般是自动解析。也可以根据项目需求进行手动调整字段对照。
9.根据项目需求选择是否保存异常处理,这里选择不保存。点击确认完成归档配置。
10.配置成功后,返回“流数据总线”主题页面,可以看到“归档”标题打了勾。还可以根据需求,点击编辑修改主题属性,如将生命周期改为7天。
基于云服务创建实时运营数据分析服务(一)相关推荐
- 基于云服务创建实时运营数据分析服务(二)
基于云服务创建实时运营数据分析服务 实时运营数据分析 使用数据计算服务.流数据总线.流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态. 使用京东云的 ...
- 基于云服务创建实时运营数据分析服务(三)
基于云服务创建实时运营数据分析服务 实时运营数据分析 使用数据计算服务.流数据总线.流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态. 使用京东云的 ...
- 基于云服务创建离线数据统计分析服务(一)
基于云服务创建离线数据统计分析服务 离线数据统计分析 使用数据工厂.数据计算服务产品,可对多源数据(DB,FILE)整合分析,制定周期性的调度任务,提供任务监控及预警.数据统计分析等功能,可对接BI报 ...
- 基于Flink+ClickHouse构建实时游戏数据分析最佳实践
简介:本实践介绍如何快速收集海量用户行为数据,实现秒级响应的实时用户行为分析,并通过实时流计算.云数据库ClickHouse等技术进行深入挖掘和分析,得到用户特征和画像,实现个性化系统推荐服务. 直达 ...
- 基于数据挖掘的智能停车场运营数据分析系统
温馨提示:文末有 CSDN 平台官方提供的学长 Wechat / QQ 名片 :) 1. 项目简介 随着大数据分析技术的发展,智慧城市.智慧停车的领域正在发展,智慧停车场可以采集.记录以及存储停车场的 ...
- 基于云架构监控摄像头直播运营简介
基于云架构监控摄像头直播运营简介 监控视频大数据基于云技术设计,在云端转码.解码.云转发.云智能等技术行业领先,通过宽带网的将前端图像远程监控.传输.存储.管理的增值业务.支持第三方模拟监控升级.数字 ...
- 三体云–高可用实时音视频服务演进之路
三体云的前身是一家视频会议提供商,如今致力于为多领域提供实时音视频技术整体解决方案,为开发者提供简单易用.极度稳定.低延时.高保障的直播云服务,这其中的转变在架构升级.系统调度和质量监控三个方面都有不 ...
- 基于云开发创建(小程序云商城,基本页面的创建及动态代码的编写)
CSDN话题挑战赛第2期 参赛话题:万家争鸣的云计算修罗场 在这个专属于"云"的时代,各位云端弄潮儿们,请分享出你的云计算学习历程吧! 你可以从以下几个方面着手(不强制),或者根据 ...
- 基于云平台的ATS系统微服务架构方案研究
当前,城市轨道交通行业云平台化已经进入了大规模的应用阶段,云平台有着低成本.高可用.高扩展等优势,能够更好地助力城市轨道交通行业实现服务业务创新[1-2].列车自动监控系统(Automatic Tra ...
最新文章
- 将Pandas中的DataFrame类型转换成Numpy中array类型的三种方法
- layui tab选项卡外部html页面,layui的Tab选项卡知识
- 如何防御DDoS攻击
- 问题 D: 约数的个数
- Redash 9安装与配置(基于Docker方式)
- 第十三课时:递归组件的使用
- NoClassDefFoundError: org/apache/flink/metrics/MetricGroup
- Maven -- 在进行war打包时用正式环境的配置覆盖开发环境的配置
- 利用老毛头启动盘重装win7
- React后台管理系统-file-uploader组件
- 编译原理:文法及其二义性(判定及消除)
- 西门子的十一位CEO
- 使用VSCode创建Java项目
- vbox android wifi,virtualbox桥接无线网卡实现上网
- JNI HelloWorld 亲测可以。
- 测试人员面试需要掌握的内容
- 【注意】这款Python快递查询小系统超级好用:不信你自己试试?
- vue实现表格列位置的拖拽
- 对抗博弈搜索——吃豆人
- 浅说北仑有趣的地名之霞浦篇
热门文章
- Win10 Ubuntu16.04 时间同步问题
- python的自带数据集_机器学习基础 / 加载scikit-learn自带的数据集 - 汇智网
- [bzoj 4424]Cf19E Fairy
- 塞规公差带图_塞规公差计算表
- 计算机网络设计前三层实验,基于Packet Tracer的计算机网络实验设计
- lgv20刷twrp_LG V30+ 日版 L-01K 刷机解锁BL 刷入TWR 回复日版基带
- 联想y7000p怎么连接显示器_这一次,做中华良心想—联想Y7000P游戏本体验评测
- 404 Note Found队 Alpha7
- 【实现】Java实现的文件批量改名
- 详细讲解vue2组件通信(一)——父传子props