配置单机版hadoop

1.配置网络
vi /etc/sysconfig/network-scripts/ifcfg-ens33
onboot=no =>yes 动态获取ip
192.168.140.143
可以根據網段設計ip
192.168.140.xxx

dhcp-》static
IPADDR=192.168.140.200
GATEWAY=192.168.140.2
NETMASK=255.255.255.0
DNS1=114.114.114.114

service network restart
ip addr 查看ip

2.xshell xftp
传输 jdk+hadoop 传到 /opt

3.安装java

cd /opt
rpm -ivh /opt/jdk-7u67-linux-x64.rpm

將自動安裝java ？裝到哪裏了呢？
裝到 /usr/java 去了
java -version

4.解压hadoop
tar -zxf /opt/hadoop-2.6.5.tar.gz -C /usr/local/

5.修改环境变量->讓系統知道你裝了這個
vi /etc/profile
在文末添加

export HADOOP_HOME=/usr/local/hadoop-2.6.5/
export JAVA_HOME=/usr/java/jdk1.7.0_67
export JRE_HOME= J A V A H O M E / j r e e x p o r t P A T H = JAVA_HOME/jre export PATH= JAVAHOME/jreexportPATH=PATH: J A V A H O M E / b i n : JAVA_HOME/bin: JAVAHOME/bin:JRE_HOME/bin: H A D O O P H O M E / b i n ; e x p o r t C L A S S P A T H = . : HADOOP_HOME/bin; export CLASSPATH=.: HADOOPHOME/bin;exportCLASSPATH=.:JAVA_HOME/lib/dt.jar: J A V A H O M E / l i b / t o o l s . j a r : JAVA_HOME/lib/tools.jar: JAVAHOME/lib/tools.jar:JRE_HOME/lib

source /etc/profile 重新加载配置文件

cd $HADOOP_HOME 测试是否能够跳转，测试是否配置成功
cd $JAVA_HOME 测试是否能够跳转，测试是否配置成功

6.修改hadoop运行环境
cd H A D O O P H O M E / e t c / h a d o o p v i h a d o o p − e n v . s h 找到 e x p o r t J A V A H O M E = HADOOP_HOME/etc/hadoop vi hadoop-env.sh 找到 export JAVA_HOME= HADOOPHOME/etc/hadoopvihadoop−env.sh找到exportJAVAHOME={JAVA_HOME}
改成->export JAVA_HOME=/usr/java/jdk1.7.0_67

7.启动单机版hadoop 测试计算pi
hadoop jar $HADOOP_HOME/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.5.jar pi 10 10000

配置单机版hadoop相关推荐

Win10安装配置Spark3.0.2+单机版hadoop+JDK并运行实例+安装运行Docker
文章目录 1.安装JDK 2.安装hadoop 3.安装spark 4.anaconda配置spark 5.安装Docker 1.安装JDK 可以去官网https://www.oracle.com/j ...
Windows下配置单机Hadoop环境
Windows下配置单机Hadoop环境文章目录 Windows下配置单机Hadoop环境下载Hadoop 下载配置文件配置环境变量初始化HDFS 启动Hadoop 关闭Hadoop 常见错误 ...
配置完hadoop后调用HDFS的API进行统计英语单词数量
前提:hadoop已经配置完成并且已经成功启动. 1.首先在windows系统中创建一个文本文件,并在其中添加含有英语单词的文本保存. 2.将刚刚创建的文本文件上传到hadoop中,这里有两种办法: ...
单机版 hadoop 云平台（伪分布式）搭建统计单词
1.首先需要配置java环境 CentOS安装java jdk教程 2.上传hadoop到/usr/local目录并解压 cd /usr/local ls linux上传下载文件教程 3.配置had ...
docker镜像仓库habor1.10.0安装配置-单机版
habor1.10.0安装配置前言一.安装docker 二.harbor安装与简单配置 1. 下载指定版本harbor 2. harbor简单配置三.配置harbor前面的nginx 1. 添加 ...
安装Idea(集成scala)以及在windows上配置spark(hadoop依赖)本地开发环境
这两天花了点时间重装了win 10,必要的开发常用工具如IDE Idea以及运行spark等任务需要的hadoop本地依赖环境重新配起来,记录下简要步骤和几个小问题希望能给正在学习的小伙伴一点帮助. ...
虚拟机搭建单机版Hadoop教程（惨痛经历）
虚拟机搭建Hadoop教程(惨痛经历) 目录 1. JDK环境 2. 防火墙和SELinux关闭 3. ssh免密登录配置(多台服务器一样的配置) 3.1 设置主机名 3.2 配置hosts 3.3 ...
配置单体hadoop
配置依赖环境 hadoop是Apache的项目,所以依赖java. 有两个必须安装的: ssh Java 安装Java 如果是yum安装的话,那么执行 yum list|grep java* 看: j ...
超图大数据环境搭建之单机版hadoop搭建
1 准备 1.1 软件版本 hadoop2.7.3 1.2 绑定 IP 和修改计算机名 1.2.1 修改/etc/hosts,添加 IP 绑定 1.2.2 修改/etc/hostname,为绑定计算 ...

配置单机版hadoop

配置单机版hadoop相关推荐

最新文章

热门文章