使用ambari安装hadoop集群
之前一篇介绍了ambari的安装,这一篇介绍一下通过ambari安装Hadoop集群
登陆后,给自己的hadoop集群起个名字
选择HDP版本,并且选中use local repository
我们操作系统是centos7,所以选择对应的redhat7,后面写上yum源的URL地址,然后next即可
每一行一台主机,然后选中使用SSH Private Key,把192.168.173.58的id-rsa密钥填入即可,这里注意,主机名一定要带域名,否则会出问题
我这里是顺利通过的,但是实际可能会报错,可以点击click here to see the check results查看具体报错,我出现过jdk的路径不一致的问题,还有就是防火墙的问题,这里都已经一一解决
然后就可以选择安装的服务了,这里根据自己的需求进行选择
分配相关服务的主节点
分配slave和client
提供相关服务的用户验证
hive元数据库我选择pg
这里需要下载jdbc驱动,并把驱动加载到ambari server
ambari-server setup --jdbc-db=postgres --jdbc-driver=/root/postgres-jdbc-driver/postgresql-42.2.5.jar
另外这里不会自己创建hive数据库,需要自己进入数据库,创建hive库和用户,然后测试连通性
jdbc驱动下载地址https://jdbc.postgresql.org/download.html
接下来就是相关目录配置了,根据自己分区目录配置
相关服务的用户
集群服务的相关配置
review
点击deploy,开始部署集群
安装完成
参考:https://docs.hortonworks.com/HDPDocuments/Ambari-2.7.3.0/bk_ambari-installation/content/ch_Getting_Ready.html
使用ambari安装hadoop集群相关推荐
- CentOS7 搭建Ambari-Server,安装Hadoop集群(一)
2017-07-05:修正几处拼写错误,之前没发现,抱歉! 第一次在cnblogs上发表文章,效果肯定不会好,希望各位多包涵. 编写这个文档的背景是月中的时候,部门老大希望我们能够抽时间学习一下Had ...
- Ambari在离线环境中安装Hadoop集群
2019独角兽企业重金招聘Python工程师标准>>> http://www.hackbase.com/article-973-1.html (WJW)Ambari在离线环境中安装H ...
- Ubuntu上安装Hadoop集群
戳蓝字"CSDN云计算"关注我们哦! 前面我们介绍了在Ubuntu上安装Hadoop单机版.但是我们知道,Hadoop在实际工作中都是以集群的形式存在的,毕竟需要处理大量的数据,单 ...
- ubuntu中安装hadoop集群
hadoop是由java 语言编写的主从结构分布式计算存储架构 准备工作: 操作系统: Ubuntu16.04 软件安装包:jdk-8u171-linux-x64.tar.gz : hadoop-2. ...
- 安装hadoop集群模拟大数据集群踩到的坑(一)
1.安装虚拟机 使用VMWARE安装虚拟机CentOS7时候踩到的第一个坑,当安装完毕CentOS7的时候,使用vmware workstation pro 14进行启动虚拟机,win10系统有概率蓝 ...
- 安装Hadoop集群(超详细!)
提示:安装前请准备好三台装有jdk的虚拟机 我这里名为hd01.hd02.hd03 hd01最好有hadoop和zookeeper的压缩包 文章目录 前言 一.准备环境 二.安装Hadoop 总结 前 ...
- 安装hadoop集群---resourcemanager和NameNode同一台机器上
1.复制虚拟机,搞了5台. 1:namenode,resourcemanager 2:secondardNameNode 3,4,5:DataNode 2.修改了网卡配置,连接上SecureCRT - ...
- 安装hadoop集群---resourcemanager和NameNode不在同一台机器上
1.复制虚拟机,搞了5台. 1:namenode 2:secondardNameNode,resourcemanager 3,4,5:DataNode 2.修改了网卡配置,连接上SecureCRT - ...
- Linux上安装Hadoop集群(CentOS7+hadoop-2.8.3)
https://blog.csdn.net/pucao_cug/article/details/71698903 1下载hadoop 2安装3个虚拟机并实现ssh免密码登录 2.1安装3个机器 2.2 ...
最新文章
- Django中自定义实现RESTful API
- Windows Forms DataGridView 中合并单元格
- Vue——请求转发配置解决方案
- 【BIOS大全】释义+设置+精解+释疑————玩转电脑必备工具帖(8)
- mysql-front权限管理_mysql 用户及权限管理 小结
- MODS: Fast and Robust Method for Two-View Matching
- 无人驾驶汽车之争本田为何未战先败
- linux内核的I2C子系统详解2——关键结构体、关键文件
- Java-Redis 热部署问题
- 案例分享,从0到1了解一个完整项目
- mysql增错误_使用MySQL练习增删改查时因为版本问题出现连接错误
- PYPL 6 月编程语言排行
- 微软高性能网络编程示例程序
- Atitit uke签名规范 与防伪鉴别 attilax总结
- 韩立刚计算机网络——第五章:传输层
- 苹果怎么用测试软件,iPhone 也能测量身高教你怎么用 iOS「测距仪」App
- 双非本科生进大厂,而我还在底层默默地爬树(上)
- Peoplesoft Pentest
- LSB利器-zsteg
- MYSQL修改数据库密码