100页5万字政府大数据中心数据资源平台建设方案
目录
1 总体建设方案概述 4
1.1 项目建设目标 4
1.2 项目建设内容 5
1.2.1 建设数据交换子平台 6
1.2.2 建设数据治理子平台 6
1.2.3 建设数据资源门户 7
1.2.4 建设数据资源中心 8
1.3 总体建设方案 9
1.3.1 中心总体定位 9
1.3.2 总体解决方案 9
1.3.3 项目实施方案 12
2 资源平台建设方案 13
2.1 平台总体架构 13
2.2 数据交换子平台建设 13
2.2.1 建设方案概述 13
2.2.2 数据交换配置 15
2.2.3 数据交换前置 15
2.2.4 数据共享服务 16
2.2.5 数据共享接口 18
2.2.6 数据交换监控 18
2.3 数据治理子平台建设 19
2.3.1 建设方案概述 19
2.3.2 资源目录管理 21
2.3.3 数据标准管理 25
2.3.4 元数据管理 28
2.3.5 数据质量管理 32
2.3.6 数据开发平台 35
2.3.7 统一调度管理 37
2.3.8 数据资产管理 40
2.4 数据资源门户建设 45
2.4.1 门户首页设计 46
2.4.2 统一用户管理 46
2.4.3 统一认证授权 46
2.4.4 整合资源管理 48
2.4.5 统一审批管理 48
2.4.6 资源目录服务 48
2.4.7 统一消息管理 49
2.4.8 统一日志管理 50
2.4.9 统一监控运维 52
3 资源中心建设方案 58
3.1 中心总体定位设计 58
3.1.1 总体设计 59
3.1.2 设计原则 60
3.1.3 设计思路 61
3.1.4 数仓设计 62
3.1.5 数据安全 62
3.2 建设XX区级数据湖 64
3.2.1 数据湖数据架构 64
3.2.2 数据湖数据范围 66
3.3 完成数据对接实施 67
3.4 建设XX区基础库 67
3.4.1 人口综合库建设 67
3.4.2 法人综合库建设 70
3.4.3 电子证照库建设 74
3.4.4 空间地理库建设 74
3.5 建设XX区主题库 75
3.5.1 主题库建设概述 75
3.5.2 主题库建设方法 76
3.5.3 一网通办主题库 78
3.5.4 一网统管主题库 81
3.5.5 城市规划主题库 83
3.6 建设XX区专题库 84
3.6.1 应急专题库概述 84
3.6.2 管理对象专题库 85
3.6.3 灾害事件专题库 86
3.7 三清单一目录梳理 86
3.7.1 建设背景 86
3.7.2 总体目标 87
3.7.3 梳理思路 87
3.7.4 梳理工作开展 89
3.7.5 一目录三清单梳理培训 91
3.7.6 一目录三清单梳理指导 93
3.7.7 一目录三清单梳理交付内容 94
3.7.8 梳理工作要求 95
1.1.1 中心总体定位
区级大数据资源平台建设的核心是汇聚全区各类公共数据，建立面向政务顾问、经济发展、城市管理、社会公共服务与乡村振兴的数据资源库与数据服务。为智慧城市提供全面、高效、安全、智能的数据管理与应用支撑，是智慧城市建设总体战略与落地规划中的重要组成部分。
1.1.2 总体解决方案
1.1.2.1 平台总体蓝图
针对区级大数据资源平台的建设，我们将基于当前主流的大数据技术框架为XX区搭建一个大数据管理与应用平台。利用数据平台的数据采集功能，将XX区各级政府单位的政务数据、城市管理相关的监控视频等物联数据、企业事业单位数据，互联网等社据汇聚起来，形成统一的XX区级大数据资源池。
之后，在利用平台的数据治理与建模开发能力，将采集到的数据有效地进行分类整理与融合，构建诸如综合人口库、产业经济主题库、旅游数据库、菜园花鸟数据库，乡村产业经济振兴库等数据应用服务，并利用统一门户将相关数据应用对外开放，向XX区各级单位、企事业单位等用户提供数据服务，由此构建XX区的数据资源中心，实现对全区政务等数据的集中汇聚、统一管理与共享利用，为全区政务处理与经济发展提供数据支撑。具体，本次项目的解决方案蓝图如下：
1.1.2.2 平台总体架构
区级大数据资源平台平台基于基础设施（网络&技术&存储）、技术标准体系规范及信息安全保障体系建设数据支撑底座、数据交换、数据资源中心（基础及融合数据库）、数据整理治理、数据服务、数据分析、数据共享应用及数据资源门户模块，并实现与S市大数据资源平台的共享与交换。
1.1.2.3 平台架构关系
架构关系说明：
ü 基于数据治理平台，搭建数据治理产线：各个委办局梳理资源，形成目录清单并制定数据治理相关规范，基于目录及规范搭建数据治理产线；
ü 数据共享交换平台：数据治理/服务/分析平台设置数据归集调度任务，通过数据源采集数据到数据湖（数据资源中心）；
ü 数据源：各个委办设置前置机放置源数据；
ü 数据资源中心：对通过数据共享交换平台采集的数据进行存储；
ü 数据基础支撑平台：数据治理/服务/分析平台通过数据基础支撑平台进行数据读取、处理与存储；
ü 数据资源门户：通过治理后资源在门户进行展示，并为各个委办提供浏览及申请入口，同时经过申请的数据如果需要清洗/转换操作，则数据治理平台将根据治理规范及产线进行数据的加工处理，并将处理后的有效数据同步给门户；
ü 数据共享交换平台：用户经过门户申请的数据，将通过数据共享交换平台进行数据的共享。
ü 统一维护平台及数据安全管理将为整个数字区级大数据资源平台的平台建设保驾护航。
1.1.3 项目实施方案
在本项目中，首先需要建设一套大数据资源管理与应用平台，并基于大数据资源管理与应用平台，利用平台中的各类功能，通过汇聚数据、数据治理、数据开发与数据服务等手段，逐步建设各类区级数据资源（包括：数据湖、基础库、主题库、主题库等）。
具体，项目的总体建设实施方案如下：
2 资源平台建设方案
2.1 平台总体架构
区级大数据资源平台的总体架构由支撑体系（标准规范支撑体系、管理运行维护支撑体系、安全支撑体系）、网络系统、信息资源平台软硬件系统环境、平台应用系统（数据支撑底座、数据交换子平台、数据整理治理子平台、数据资源门户），以及数据资源中心（数据湖、基础库、主题库、专题库）组成。具体平台架构如下：
2.2 数据交换子平台建设
建设全区统一的数据数据交换子平台，形成公共数据归集、交换、共享的核心枢纽；打通全区各单位之间数据资源共享通道，实现双向数据互通。
2.2.1 建设方案概述
通过本项目数据共享交换平台建设，构建XX区数据共享交换体系，推动政务数据的跨层级、跨地域、跨系统、跨部门、跨业务的共享利用，为公共基础库、业务主题库，提供底层数据支撑。
XX区数据交换系统基于电子政务云搭建，为全区数据管理部门提供云端的数据共享交换服务的统一平台，可实现部门前置节点与政务云中心节点间、部门与部门间稳定可靠的双向信息传递。
2.2.1.1 架构设计
鉴于数据源应用的异构平台、异构系统接入的复杂性，数据共享交换平台建设应统一技术架构、统一接入标准规范（包括技术规范、接入规范、管理规范、运行规范等），同时既要充分考虑系统的安全性、可扩展性，又要充分考虑数据交换的实时性、可靠性和高效性，实现各系统数据的采集、同步、筛选比对等业务功能目标。
因此，本次数据共享交换平台建设将充分利用信息化手段，采用当前主流的技术标准，主要包括数据库技术、数据集成技术、消息中间件、SOA体系架构等技术，采用组件化和松耦合的设计思路，实现统一平台架构、统一技术标准、统一数据接口。数据交换子平台建设围绕数据资源的采集交换、数据传输、交换监控流程进行，以保证平台功能、服务更加贴近实际业务应用需要。
具体，本次区级大数据资源平台中的数据交换子平台的总体业务与逻辑架构设计如下：
利用数据交换平台与各政务部门进行互联，通过数据传输系统各委办的数据资源汇集到数据中心；对汇集到数据中心中的数据进行统一的加工、处理；将经过数据治理后的数据中心中的数据交换到各类基础信息库中，服务管理系统将各类基础信息库中的数据进行服务封装和服务发布，提供给各委办或决策分析等系统使用。
总之，通过数据交换平台的建设与实施，将为XX区构建完善的数据共享交换体系，为本项目总体体系建设提供数据共享交换服务支撑。
2.2.2 数据交换配置
获取信息资源中定义的信息资源更新频率，自动实现采集、可以配置全量或者增量采集方式，可以配置数据提供部门在数据中心部门前置库的存储位置等。
能够提供对于采集周期，时间的采集策略配置、接口配置采集任务配置功能。
对于应用数据采集，需要管理的关键业务点有采集点、数据传输。主要性能指标包括：在采样周期内成功取得文件的数量、采集数据间隔时间、采集文件大小、进程状态、文件连续性、采集状态、传输速率等。
获取信息资源中定义的信息资源更新频率，自动实现采集、可以配置全量或者增量采集方式，可以配置数据提供部门在数据中心部门前置库的存储位置等。
文章引用的资料均通过互联网等公开渠道合法获取，仅作为行业交流和学习使用，并无任何商业目的。其版权归原资料作者或出版社所有，本文作者不对所涉及的版权问题承担任何法律责任。若版权方、出版社认为本文章侵权，请立即通知作者删除。
100页5万字政府大数据中心数据资源平台建设方案相关推荐
- 搭建公司虚拟平台服务器平台,数据中心服务器虚拟化平台建设方案.pdf
数据中心服务器虚拟化 建设方案 数据中心服务器虚拟化实施方案 目 录 1 概述 1 1.1 项目背景1 1.2 现状概要1 2 规划目标 3 2.1 一个架构3 2.2 一套标准3 2.3 一种手段5 ...
- 政府大数据中心数据资源平台 建设方案
目录 1 总体建设方案概述 1.1 项目建设目标 1.2 项目建设内容 1.2.1 建设数据交换子平台 1.2.2 建设数据治理子平台 1.2.3 建设数据资源门户 1.2.4 建设数据资源中心 1. ...
- 政府大数据中心数据资源平台建设方案2022（word）
本资料来源公开网络,仅供个人学习,请勿商用,如有侵权请联系删除 1.1 总体建设方案 1.1.1 中心总体定位 区级大数据资源平台建设的核心是汇聚全区各类公共数据,建立面向政务顾问.经济发展.城市管理 ...
- 政府大数据中心数据资源平台建设方案WORD2022
本资料来源公开网络,仅供个人学习,请勿商用,如有侵权请联系删除 1.1 项目建设内容 对于本次区级大数据资源平台的建设,将按照"总体规划一步到位,平台建设分步实施,数据赋能逐步升级" ...
- 市区级大数据资源平台建设方案
市区级大数据资源平台建设方案 (获取完整版文档请添加关注并私信沟通!) 目录 1 总体建设方案概述 1.1 项目建设目标 1.2 项目建设内容 1.2.1 建设数据交换子平台 1.2.2 建设数据治理 ...
- 33页政务大数据平台-数据智能治理子平台建设方案
按照S市大数据中心对市区两级大数据资源平台建设统一标准规范的要求下,以实际需求为导向,搭建m区大数据资源平台,加快推进与承接S市大数据资源平台的落地数据资源,归集区内各单位公共数据资源,按需实现共享交 ...
- 14万字数字政府大数据治理平台及大数据中心资源平台建设方案
本资料来源公开网络,仅供个人学习,请勿商用,如有侵权请联系删除. 部分资料内容: 1.1 数据治理子平台建设 在本次项目中,我们将通过大数据治理子平台的建设,提供数据标准管理.元数据管理.数据质量管理 ...
- 数据中台：资产管理平台建设方案概述
文章目录 简介 核心 总结 简介 数据资产管理平台完成数据资产管理的两大核心工作,分别是数据治理工作和数据运营工作: 数据治理:数据资产管理平台将业务数据化,并开展数据标准化:数据资产管理平台清理垃圾 ...
- 数据中心机房智能化系统建设方案
推荐阅读: 世界的真实格局分析,地球人类社会底层运行原理 不是你需要中台,而是一名合格的架构师(附各大厂中台建设PPT) 亿级(无限级)并发,没那么难 论数字化转型--转什么,如何转? 华为干部与人才 ...
最新文章
- 百度地图 ip查询 service
- 看着拆焊过程，很治愈
- SQLServer 事务的隔离级别
- 8. Leetcode 26. 删除有序数组中的重复项 (数组-同向双指针-快慢指针)
- 使用Zookeeper实现leader选举-Leader Latch
- 微服务网关的设计与实现
- java怎么输入数据_java怎么键盘输入数据啊？
- 关于SpringCloud、SpringBoot 希望这是说得最详细的
- C#中的StreamReader/StreamWriter
- 美国道富java开发面试题_从事Java开发五年，面试9家拿到7家offer，1096面试+67笔试题...
- Jexus 配置ssl
- 中国人工智能趋势报告（完整版）
- 自定义 View 之抖音时钟罗盘仪效果
- 基于matlab的瑞利衰落信道建模和仿真
- 罗宾斯管理学13版pdf_罗宾斯管理学13版答案pdf
- Python爬虫获取异步加载站点pexels并下载图片(Python爬虫实战3)
- 计算机论文的致谢部分写什么,论文的致谢部分怎么写
- 【UWB 定位】测距TOA 和 TDOA详解
- struts1 使用poi组件 读取excel文件，创建excel ，输出excel文件
- CTFshow-卷王杯-简单的re（复现）