CentOS 7 Hadoop安装配置

前言：我使用了两台计算机进行集群的配置，如果是单机的话可能会出现部分问题。首先设置两台计算机的主机名 root 权限打开/etc/host文件

再设置hostname,root权限打开/etc/hostname文件设置

从机设为Slaver.Hadoop

1.安装java jdk 并配置环境

　　centos 自带安装了一个jdk,如果我们要自己安装jdk并配置环境的话首先卸载掉原本的jdk

　　在命令行模式下健入命令：yum remove java (root用户，非root用户请在命令前加sudo).

　　接下来安装jdk并配置环境,到网上下载jdk的rpm包，使用命令：rpm -ivh jdk-......;

　　配置jdk环境：

　　root用户打开/etc/profile文件在文件末尾添加jdk路径类似下面的配置，只需注意jdk版本即可

　　上面一部分为java环境变量，后面为hadoop变量，等会用得上。

2.安装hadoop并配置环境。　

　　到Apache网站下载hadoop-2.6.0版本.

　　解压文件：　tar -xvf hadoop-2.6.0.tar.gz (解压到需要安装的路径，或者到时候再设定路径)

　　进入解压后的目录，到hadoop-2.6.0/etc/hadoop/路径下找到下面几个配置文件

　　core.site.xml:

　　hdfs-site.xml

　　mapred-site.xml.template

　　hadoop-env.sh

　　slaves

　　 192.168.1.126 从机ip

　　到此配置完成，启动参照网上的教程。

　　/hadoop-2.6.0/bin/hadoop namenode -format

　　/hadoop-2.6.0/sbin/start-all.sh

　　完成。

　　注意：启动前需要将两台计算机的防火墙关闭：sudo systemctl stop iptables.service

3.安装配置hadoop eclipse 插件

　　下载hadoop eclipse 插件，将其放入eclipse 文件夹的plugins文件夹中,启动eclipse.

　　eclipse window->open persperctive->other->

　　分别打开Map/Reduce 和 Resource 。然后到eclipse中新建M/R项目，找到wordcount.java源代码执行，

　　eclipse中run as configuertion 设置参数：

　　eclipse中项目目录：

　　执行结果：

转载于:https://www.cnblogs.com/chenshungen/p/4379389.html

CentOS 7 Hadoop安装配置相关推荐

CentOS 7.x安装配置
简述 VMware可以创建多个虚拟机,每个虚拟机上都可以安装各种类型的操作系统.安装方法也有很多种.下面,主要以ISO镜像安装为例,介绍CentOS 7.x的安装过程及相关的参数设置. 简述创建虚拟 ...
CentOS 5.5-yum安装配置LNMP
CentOS 5.5-yum安装配置LNMP [日期:2011-06-20] 来源:Linux社区作者:fighter 一.安装所需的库文件和编译环境 yum -y install gcc ...
linux php7 mongodb,CentOS 7下安装配置PHP7跟LAMP及MongoDB和Redis
CentOS 7下安装配置PHP7跟LAMP及MongoDB和Redis 我是想能yum就yum,所有软件的版本一直会升级,注意自己当时的版本是不是已经更新了. 首先装CentOS 7 装好cento ...
CentOS 7.0安装配置Vsftp服务器
2019独角兽企业重金招聘Python工程师标准>>> 一.配置防火墙,开启FTP服务器需要的端口 CentOS 7.0默认使用的是firewall作为防火墙,这里改为iptable ...
hadoop服务器系统设置win10,win10系统hadoop安装配置的设置技巧
win10系统使用久了,好多网友反馈说关于对win10系统hadoop安装配置设置的方法,在使用win10系统的过程中经常不知道如何去对win10系统hadoop安装配置进行设置,有什么好的办法去设置 ...
CentOS 6.4安装配置LAMP服务器(Apache+PHP5+MySQL)
2019独角兽企业重金招聘Python工程师标准>>> 准备篇: 1.配置防火墙,开启80端口.3306端口 vi /etc/sysconfig/iptables -A ...
cent mysql 配置,centos下MySQL安装配置
centos下MySQL安装配置下载 https://dev.mysql.com/downloads/mysql/下载Linux-Generic版本 uname -a查看系统架构, 选择相应版本. ...
Centos Denyhosts 一键安装配置脚本
Centos Denyhosts 一键安装配置脚本一键安装denyhosts脚本并配置为常用配置.放置Linux服务器被暴力破解由于不能上传tar文件.所以改为zip压缩. 将附件的zip压缩包解 ...
CentOS 6.3安装配置LAMP服务器(Linux+Apache+MySQL+PHP5)
服务器系统环境:CentOS 6.3 客户端系统环境:Windows 7 ultimate(x86)sp1 简体中文旗舰版 ※ 本文档描述了如何在Linux服务器配置Apache.Mysql.PHP5 ...
php7.4安装配置,CentOS环境下安装配置PHP 7.4的方法
CentOS环境下安装配置PHP 7.4的方法发布时间:2020-06-19 10:22:32 来源:亿速云阅读:136 作者:Leah 本文给大家分享的是CentOS环境下安装配置PHP 7.4 ...

CentOS 7 Hadoop安装配置

CentOS 7 Hadoop安装配置相关推荐

最新文章

热门文章