按照标准化的思路建设大数据平台,实现政务数据、社会数据及其他数据的安全接入、存储、共享、分析、应用和管理的目标,以支撑整个创新创业生态、大数据产业链的健康发展。大数据平台主要由数据接入系统、数据存储系统、数据分析系统和平台管理系统4大系统组成。

  1、数据接入系统

  数据接入系统作为底层基础支撑性 服务,是大数据平台的核心组成部分。数据接入系统通过提供多种数据接入工具,将政府各部门和来自互联网的结构化和非结构化的数据进行统一的汇聚接入,并为政务大数据平台提供原始数据支撑。

  2、数据存储系统

  数据存储系统作为数据采集的上层系统,作为数据分析共享的支撑系统,也是大数据平台的核心组成部分。数据存储系统需要满足对结构化数据、非结构化数据和半结构化数据的统一存储和查询的需求。查询的高效性和存储的安全性是数据存储系统的两项关键指标。

  3、数据分析系统

  数据分析系统作为政务大数据平台提供数据深度挖掘和分析服务的核心系统,利用分布式存储和并行计算框架,结合多种分布式计算引擎,对各类结构化、半结构化及非结构化的信息资源进行快速的分布式计算、并提供基于关联、聚类、分类、预测等类算法库以及可视化组件、拖拽式的数据挖掘分析开发工具包。

  4、平台管理系统

  提供数据资源管理、元数据管理、目录管理、组织人员管理、用户权限、数据接入和共享服务运行监控、日志审计及平台运维等平台运行和系统管理功能。

  只有抓住机遇,建立数据平台并将其应用于企业行业,我们才不会被这个时代所淘汰。随着时代的更迭,演变出更适合发展的模式。

大数据平台由哪些分析功能相关推荐

  1. 物联网大数据平台应具备的功能和特点

    物联网大数据平台应具备的功能和特点 物联网是一个很宽泛的概念,是指各种设备.机器都通过互联网连接起来,车联网.工业互联网等都属于物联网范畴.根据Gartner报告,联网的设备在2019年已经超过142 ...

  2. 大数据平台日志存储分析系统解决方案

    大数据平台日志存储分析系统是在大数据平台下,针对业务系统产生的日志记录进行存储和分析.日志数据来自ElasticSearch存储的日志历史数据,并将需要存储和分析的日志数据从ElasticSearch ...

  3. 物联网大数据平台需要具备哪些功能

    物联网是一个很宽泛的概念,是指各种设备.机器都通过互联网连接起来,车联网.工业互联网等都属于物联网范畴.根据Gartner报告,联网的设备在2019年已经超过142亿,预计2021年将达到250亿,这 ...

  4. 大数据平台网站日志分析系统

    1:大数据平台网站日志分析系统,项目技术架构图: 2:大数据平台网站日志分析系统,流程图解析,整体流程如下: ETL即hive查询的sql; 但是,由于本案例的前提是处理海量数据,因而,流程中各环节所 ...

  5. 大数据平台架构包含哪些功能

    为了满足企业对于数据的各种需求,需要基于大数据技术构建大数据平台.结合大数据在企业的实际应用场景,如下图所示的大数据平台架构所示: 最上层为应用提供数据服务与可视化,解决企业实际问题.第2层是大数据处 ...

  6. 物流大数据平台-物流流向分析(二)

    接上一讲用BI工具FineBI,实现物流BI大数据平台的搭建.针对物流行业平台搭建问题,可通过构建快通流向分析仪表板,选取关键指标进行可视化分析,分析的问题如表所示. 分析主题 分析问题 分析指标 可 ...

  7. 物流交通大数据平台-物流时效分析(二)

    接着上一讲,将用大数据BI平台实现对物流行业平台搭建之中的物流时效分析第二部分:同城物流时效分析和各省份配送时效明细,如平均配送时长,0.5天/1天/2天/3天/3天以上配送情况等. 方案设计 对于物 ...

  8. 物联网大数据平台具备哪些功能

    物联网是一个非常广泛的概念,是指各种设备和机器都通过互联网连接起来,车联网和工业互联网属于物联网范畴.毫无疑问,物联网需要一个大的数据平台来处理这些网络设备产生的大量数据. 一个物联网大数据平台需要具 ...

  9. 物联网大数据平台功能有哪些

    科技改变世界是一个能动的复杂变化过程,物联网作为从网络科技中延伸出来的分支,在促进社会智能化过程中更是涉及各个方面的资源调动与动态协同,其中包含了物联网系统架构的建立.物联网平台的搭建以及物联网卡与智 ...

最新文章

  1. zookeeper快速入门——简介
  2. 爬虫实现csdn文章一键(批量)更换阅读类型(全部可见、粉丝可见、vip可见)
  3. Win32多线程编程(5) — 线程局部存储
  4. iOS网络编程开发-数据加密
  5. 7-15 计算圆周率 (15 分)
  6. python前端代码_python前端HTML
  7. mac/linux 解决启动命令行出现declare问题
  8. 【转】Android 如何获取SDCard 内存(二)
  9. 学习笔记(02):MySQL数据库运维与管理-03-状态变量及查看方法
  10. HTML+CSS制作一个动画
  11. Python 学习线路图,码住!
  12. python怎么做情感分析_如何用python进行情感分析
  13. CSS 小结笔记之伸缩布局 (flex)
  14. python简单代码-Python简单进程锁代码实例
  15. 威斯康星麦迪逊计算机专业排名,威斯康星大学麦迪逊分校计算机工程排名
  16. elementUI表格无数据显示图片
  17. 解析Hander消息处理机制
  18. synergy安装和使用小结
  19. CN_计算机网络性能指标@信道利用率@信道吞吐率
  20. 断言(assert)方法

热门文章

  1. git “errno=Connection refused”
  2. java 十六进制数的转换
  3. 【二叉树迭代版中序遍历】LeetCode 94. Binary Tree Inorder Traversal
  4. Lintcode 51.上一个排列[Medium]
  5. 中缀表达式变后缀分析
  6. Linuxg环境搭建
  7. 设计模式--观察者模式与命令模式
  8. 读jQuery源码释疑笔记3
  9. 聊天内容3.2 浏览器
  10. [饭后算法系列] 数组中和非负的最长子数组