Atlas架构：

Atlas 是一组可扩展和可扩展的核心基础治理服务——使企业能够有效且高效地满足其在 Hadoop 中的合规性要求，并允许与整个企业数据生态系统集成。
Apache Atlas 为组织提供开放的元数据管理和治理功能，以构建其数据资产的目录，对这些资产进行分类和治理，并为数据科学家、分析师和数据治理团队提供围绕这些数据资产的协作能力。

Atlas的核心功能依赖于sorl、hbase、kafka，安装Atlas前需要提前安装相关依赖服务。
安装步骤主要分为以下7步：
1、Hadoop安装
2、Hive安装
3、Zookeeper安装
4、Kafka安装
5、Hbase安装
6、Solr安装
7、Atlas安装

Atlas安装

1、下载安装source包
https://atlas.incubator.apache.org/1.2.0/InstallationSteps.html

2、通过mvn clean install和mv clean package命令进行安装和打包
打包成功后，在apache-atlas-sources-1.2.0/distro/target会生成安装包。
安装包目录如下：

2、solr创建索引
./solr create -c vertex_index -d /data/software/atlas-2.1.0/conf/solr -shards 3 -replicationFactor 2 -force #点
./solr create -c edge_index -d /data/software/atlas-2.1.0/conf/solr -shards 3 -replicationFactor 2 -force #线
./solr create -c fulltext_index -d /data/software/atlas-2.1.0/conf/solr -shards 3 -replicationFactor 2 -force #全图

3、开启中间件的atlas hook功能
如要采集hive的元数据，则需进入hive安装目录下的conf目录，在hive-site.xml中增加hook配置来开功能。

<property><name>hive.exec.post.hooks</name><value>org.apache.atlas.hive.hook.HiveHook</value>
</property>

4、安装Hive Hook
解压apache-atlas-2.1.0-hivehook.tar.gz
将hook解压目录报备至atlas的安装目录

5、执行./bin/atlas-start.py 启动atlas
初次启动会创建solr索引和hbase表等文件，时间较久。

6、初始化完成后
kafka、solr、hbase都会生成相应的atlas数据：

7、启动结束后，输入http://ip:21000，进入apache atlas管理端
默认账号和密码 admin admin

首次离线同步元数据

进入hook-bin目录 atlas-2.1.0/hook-bin
执行 import-hive.sh即可将hive当前的元数据批量同步至atlas。

Apache Atlas服务安装相关推荐

apache atlas 官方安装
转载自:http://atlas.apache.org/InstallationSteps.html Building & Installing Apache Atlas Building A ...
Apache Atlas 安装及入门
介绍 Apache Atlas 用来管理hive元数据安装 # 解压更名 tar xvfz apache-atlas-1.0.0-sources.tar.gz cd apache-atlas-sou ...
Apache Atlas 安装部署
Apache Atlas 安装部署 1.Atlas 原理及相关概念 2.安装前置条件 3.安装Hbase 4.安装Solr 5.安装kafka 6.编译Atlas 7.安装Atlas 8.集成hive ...
Apache Atlas 2.3.0 安装部署
安装前环境准备 hadoop 3.1.0 hbase 2.3.4 hive 3.1.3 solr 7.7.3 zookeeper 3.5.7 kafka 2.11-2.4.1 atlas 2.3.0 ...
apache atlas 2.1.0的安装
1.Atlas 架构原理 2.atlas安装 1)Atlas 官网地址:https://atlas.apache.org/ 2)文档查看地址:https://atlas.apache.org/2.1. ...
apache atlas 2.0 详细安装手册
1.1 atlas编译打包 l 首先,在官网下载源码包 http://atlas.apache.org/ l 上传到linux,解压 [root@h2 ~]# tar -zxf apache-atla ...
实验图文详解——apache的编译安装及httpd服务开机自启
实验图文详解--apache的编译安装及httpd服务开机自启 1.导入安装包 2.解压安装包 3.分别解压httpd.apr.apr-util包 4.对apr.apr-util目录进行移动及重命名操 ...
CDH6 安装 Apache atlas
编译一.环境 JDK1.8 下载地址 https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151. ...
配置安装Apache主服务发生错误：(OS 5)拒绝访问。 : AH00369: Failed to open the Windows service manager, perh······
配置安装Apache主服务发生错误:(OS 5)拒绝访问. : AH00369: Failed to open the Windows service manager, perhaps you fo ...

Apache Atlas服务安装

Atlas架构：

Atlas安装

首次离线同步元数据

Apache Atlas服务安装相关推荐

最新文章

热门文章