Atlas 2.1.0 实践之编译Atlas-Hive

问题前景：

Hive 2.2.0以下的低版本存在bug，字段级的血缘数据不能自动生成，需升级hive版本到2.2.0及以上才能正常生成字段级的血缘数据。所以记录一篇编译Atlas-Hive。

问题导读：

1、为什么要做数据治理？

2、如何安装并使用Altas？

3、执行maven编译打包？

4、踩过哪些坑？

为什么要做数据治理？业务繁多，数据繁多，业务数据不断迭代。人员流动，文档不全，逻辑不清楚，对于数据很难直观理解，后期很难维护。

在大数据研发中，原始数据就有着非常多的数据库，数据表。

而经过数据的聚合以后，又会有很多的维度表。如果想要对这些数据做好管理，光用文字、文档等东西是不够的，必须用图。

Atlas就是把元数据变成图的工具。

http://atlas.apache.org/

Atlas是一组可扩展和可扩展的核心基础治理服务，使企业能够有效地满足Hadoop中的合规性

Atlas 2.1.0 实践之编译Atlas-Hive相关推荐

Atlas 2.2.0源码编译及安装步骤
Atlas 2.2.0源码编译及安装步骤一.源码编译 1. 下载源码 2. 前置环境安装 3. 修改版本号 4. 修改源码中 atlas与kafka版本兼容问题 5. 开始编译 6. 问题锦集二. ...
老是说我编译版本不够_Atlas 2.1.0 实践（1）—— 编译Atlas
为什么要做数据治理?业务繁多,数据繁多,业务数据不断迭代.人员流动,文档不全,逻辑不清楚,对于数据很难直观理解,后期很难维护. 在大数据研发中,原始数据就有着非常多的数据库,数据表. 而经过数据的聚合 ...
源码编译打包_Atlas 2.1.0 实践（1）—— 编译Atlas
为什么要做数据治理? 业务繁多,数据繁多,业务数据不断迭代.人员流动,文档不全,逻辑不清楚,对于数据很难直观理解,后期很难维护. 在大数据研发中,原始数据就有着非常多的数据库,数据表. 而经过数据的聚 ...
atlas安装需要kafka吗_Atlas 2.1.0 实践（2）—— 安装Atlas
在完成Atlas编译以后,就可以进行Atlas的安装了.Atlas的安装主要是安装Atlas的Server端,也就Atlas的管理页面,并确保Atlas与Kafka Hbase Solr等组件的集成. ...
Apache Atlas 2.3.0 安装部署
安装前环境准备 hadoop 3.1.0 hbase 2.3.4 hive 3.1.3 solr 7.7.3 zookeeper 3.5.7 kafka 2.11-2.4.1 atlas 2.3.0 ...
Apache Atlas 1.2.0 安装部署
组件版本: Hive 1.1.0 CDH 5.15.0 Atlas 1.2.0 Centos 8 Maven 3.6.3 文章目录 Java 环境安装 Atlas编译安装下载源码包解压编译 Atl ...
最新！MongoDB 重磅发布 MongoDB 5.0 和无服务器 Atlas
2021年7月14日,全球领先的现代通用数据库平台MongoDB(NASDAQ代码MDB)今天在2021 MongoDB.live全球用户大会的主题演讲中,发布了一系列变革性的产品增强功能.重磅发布支 ...
Mysql 8.0 --MGR多主+Atlas代理（提一下Mysql-router代理）
本文亦有参考网上其他资料,篇数较多不一一列出,在此提前一并致谢. 壹.首先MGR多主搭建过程: 环境准备: VMware CentOS Linux release 7.3.1611 (Core) 一台 ...
Atlas 2.2.0 集成janusgraph 0.6.2
记录一下Atlas 2.2.0 集成janusgraph 0.6.2的主要过程 org.apache.commons.configuration 升级到import org.apache.common ...

Atlas 2.1.0 实践之编译Atlas-Hive

Atlas 2.1.0 实践之编译Atlas-Hive

问题导读：

Atlas 2.1.0 实践之编译Atlas-Hive相关推荐

最新文章

热门文章