CentOS6.7 安装hadoop2.7.5
一、下载hadoop二进制包
下载地址:http://mirrors.hust.edu.cn/apache/hadoop/common/
二、环境准备
1、安装JDK(1.8.0_151)
2、安装openssh-clients
注意: CentOS6.7 默认没有安装openssh-clients,导致系统没有ssh命令,而hadoop脚本中会使用ssh命令,如果不装openssh-clients,启动服务器时会报错
三、安装hadoop
tar zxf hadoop-2.7.5.tar.gz -C /usr/local/ mv /usr/local/hadoop-2.7.5 /usr/local/hadoop cd /usr/local/hadoop/etc/hadoop
1、修改hadoop-env.sh,配置JAVA_HOME
export JAVA_HOME=/usr/java/jdk1.8.0_151
2、修改core-site.xml文件,在configuration标签中加入以下配置
<configuration> <property><name>fs.default.name</name><value>hdfs://localhost:9000</value> </property> <property><name>hadoo.tmp.dir</name><value>/usr/local/hadoop/tmp</value> </property> </configuration>
3、修改hdfs-site.xml文件,加入以下配置
<configuration> <property><name>dfs.http.address</name><value>192.168.115.237:50070</value></property><property><name>dfs.replication</name><value>1</value></property><property><name>dfs.namenode.name.dir</name><value>file:/usr/local/hadoop/tmp/dfs/name</value></property><property><name>dfs.datanode.data.dir</name><value>file:/usr/local/hadoop/tmp/dfs/data</value></property> </configuration>
4、修改marped-site.xml文件
cp mapred-site.xml.template mapred-site.xml vim mapred-site.xml
<configuration> <property> <name>marped.job.tracker</name> <value>localhost:9001</value> </property> </configuration>
5、格式化hadoop的HDFS文件系统,在hadoop文件中输入
./bin/hadoop namenode -format
6、如果第5步没有报错,则执行下面的命令,启动hadoop服务
sbin/start-all.sh
启动时,会多次登录本机,要求输入root账户的密码,可以使用公钥认证的方式,进行免密码登录。这里不介绍任何设置
如果服务正常启动,输入jps能看到以下进程
访问http://ip:50070 可以查看hadoop集群状态
参考:http://blog.csdn.net/qq_32554863/article/details/79409433
转载于:https://blog.51cto.com/zengestudy/2087276
CentOS6.7 安装hadoop2.7.5相关推荐
- centos6.5安装hadoop2.6.4
为什么80%的码农都做不了架构师?>>> 1.下载 http://hadoop.apache.org/releases.html http://www.oracle.com/t ...
- centos6.6安装hadoop-2.5.0(四、hadoop HA安装)
操作系统:centos6.6 环境:selinux disabled:iptables off:java 1.8.0_131 安装包:hadoop-2.5.0.tar.gz HA模式下的HADOOP完 ...
- linux卸载hadoop版本,centos6.5 安装hadoop1.2.1的教程详解【亲测版】
本篇只简单介绍安装步骤 1. 角色分配 10.11.84.4 web-crawler--1.novalocal master/slave 10.11.84.5 web-crawler--2.noval ...
- 安装hadoop-2.3.0-cdh5.1.2全过程
工欲善其事,必先利其器,啥都不说,Hadoop下载:http://archive.cloudera.com/cdh5/cdh/5/ 选择好相应版本搞起,在本文讲述的是 围绕hadoop-2.3.0- ...
- centos6一键安装vsftpd脚本
centos6一键安装vsftpd脚本 手动安装vsftpd参考教程:Centos下安装Vsftpd的图文教程 vsftpd脚本功能: 1.安装 (命令执行:sh xxx.sh)2.添加ftp用户 ( ...
- Windows 10下编译安装Hadoop2.6
转自:https://www.linuxidc.com/Linux/2016-08/134131.htm Windows 10下安装Hadoop2.6,Windows10下编译64位Hadoop2.x ...
- centos6.8 安装nginx
centos6.8 安装nginx需要编译nginx源码,不过没啥大不了的,按照步骤来,肯定能成功. 1.安装必要的依赖: yum install -y gcc-c++yum install -y p ...
- centos6.8安装 gitlab 9.3.5及使用
centos6.8安装 gitlab 9.3.5及使用 环境准备: [root@caosm03 conf]# cat /etc/issue CentOS release 6.8 (Final) Ker ...
- Centos6.6安装zabbix server 3.2
2019独角兽企业重金招聘Python工程师标准>>> Centos6.6安装zabbix server 3.2 mysql,php,tengine 安装包和表分区脚本下载:http ...
最新文章
- Makefile中指示符“include”、“-include”和“sinclude”的区别
- 李宏毅深度学习——分类
- Oracle Database 10g:删除表
- 成功解决No handles with labels found to put in legend.
- 【读书笔记《Android游戏编程之从零开始》】6.Android 游戏开发常用的系统控件(TabHost、ListView)...
- 使用View modification扩展SAP Fiori应用的一个案例
- win32mysql数据库回复_windows mysql 数据库备份与还原方法
- 存储ic载板_延伸IC领域 崇达技术拟将持有普诺威55%股权
- php安装mongo扩展,php安装mongo扩展和mongodb扩展
- 如何在Vue项目中使用vw实现移动端适配
- linux界面右键无效,在linuxtkin中运行GUI时,右键单击菜单消失得太快
- 计算机维修费税收分类,维修费税收分类编码是多少?
- koa2 mysql项目教程_blogs: Node.js + Koa2 + MySQL + Vue.js 实战开发一套完整个人博客项目网站...
- PI控制器概念 笔记
- 让所有版本的IE卡死的HTML代码
- lvs+keepalived+ipvsadm 完整搭建笔记
- python 不区分大小写的字典实现
- codeforces 869c(组合数)
- Typora导出PDF时,对PDF格式的修改
- 无线WiFi安全渗透与攻防(一)之无线安全环境搭建