hadoop java配置环境变量_hadoop2.7.2修改配置文件,配置linux java环境变量
1.修改core-site.xml,加上
fs.defaultFS
hdfs://backup02:9000
hadoop.tmp.dir
file:/home/zhongml/hadoop-2.7.2/tmp
io.file.buffer.size
131702
2.修改hdfs-site.xml,加上
dfs.namenode.name.dir
file:/home/zhongml/hadoop-2.7.2/hdfs/name
dfs.datanode.data.dir
file:/home/zhongml/hadoop-2.7.2/hdfs/data
dfs.replication
2
dfs.namenode.secondary.http-address
backup02:9001
dfs.webhdfs.enabled
true
3.先复制一个mapred-site.xml
cp mapred-site.xml.template mapred-site.xml
修改mapred-site.xml,加上
mapreduce.framework.name
yarn
mapreduce.jobhistory.address
backup02:10020
mapreduce.jobhistory.webapp.address
backup02:19888
4.修改yarn-site.xml,加上
yarn.nodemanager.aux-services
mapreduce_shuffle
yarn.nodemanager.auxservices.mapreduce.shuffle.class
org.apache.hadoop.mapred.ShuffleHandler
yarn.resourcemanager.address
backup02:8032
yarn.resourcemanager.scheduler.address
backup02:8030
yarn.resourcemanager.resource-tracker.address
backup02:8031
yarn.resourcemanager.admin.address
backup02:8033
yarn.resourcemanager.webapp.address
backup02:8088
yarn.nodemanager.resource.memory-mb
768
5.配置/home/zhongml/hadoop-2.7.2/etc/hadoop目录下hadoop-env.sh、yarn-env.sh的JAVA_HOME
6.配置/home/zhongml/hadoop-2.7.2/etc/hadoop目录下slaves
7.验证启动是否成功
bin/hadoop fs -ls
http://localhost:50030(MapReduce的页面)
http://localhost:50070(HDFS的页面)
8.如果是64位的linux,需要覆盖native
9.配置java环境变量/etc/profile
先卸载linux自带的jdk,
执行以下命令查看需要卸载的选项:
rpm -qa | grep gcj
执行卸载操作:
yum -y remove java-1.4.2-gcj-compat-1.4.2.0-40jpp.115
将以下内容添加到/etc/profile末尾
JAVA_HOME=/jdk/jdk1.8.0_101/
PATH=$JAVA_HOME/bin:$PATH
CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export JAVA_HOME
export PATH
export CLASSPATH
注意:装好hadoop环境必须关闭防火墙:
关闭防火墙服务
[root@cluster3 hadoop]# service iptables stop
关闭开机自动启动
[root@cluster3 hadoop]# chkconfig iptables off
安装以下软件:
yum install svn
yum install autoconfautomake libtool cmake
yum install ncurses-devel
yum install openssl-devel
yum install gcc*
hadoop java配置环境变量_hadoop2.7.2修改配置文件,配置linux java环境变量相关推荐
- 【Linux集群基础环境搭建】基于虚拟机的多节点Linux网络环境搭建(超详细)
基于VMWare虚拟机的多节点Linux网络环境搭建 一.使用工具 二.方案设计 三.实现过程 1.安装VMWare虚拟机软件 2. 创建虚拟机节点controller并安装CentOS 3. 通过节 ...
- 【WebService】wsdl配置详解以及使用注解修改wsdl配置
本文转自: https://blog.csdn.net/eson_15/article/details/52051801 (倪升武的博客) 对大佬的膜拜! 前面分析了一下关于ws的基本知识,我们知 ...
- linux的桌面环境排行榜,自由之选:七大顶尖Linux桌面环境比拼
与Windows或者OS X不同,Linux阵营拥有大量桌面环境方案供大家选择,而这些方案亦各自拥有不同的外观设计与功能定位. 面对Linux阵营,我们首先需要解决的问题就是选择.选择适合自己的发行版 ...
- linux c++开发环境_使用 VM VirtualBox 搭建完善的Linux开发环境
导读 在上一篇文章中说到使用 微软window10的linux子系统,搭建一个轻量高效的linux系统. 实际使用由于window不提供center os 跟线上环境有差异并且由于与本机服务融合在一起 ...
- linux桌面环境知乎,24 个值得尝试的 Linux 桌面环境 | Linux 中国
我全要! (本文字数:2014,阅读时长大约:3 分钟) Linux 桌面的最大优点之一是它提供给用户选择的权利.如果你不喜欢你屏幕左下角的应用程序菜单,你可以移除它.如果你不喜欢你的文件管理器组织文 ...
- 通常情况下登录linux桌面环境需要,在通常情况下,登录Linux桌面环境,需要。...
摘要: 通桌面体写末答智慧作申案用文论期树实.况下门最新考智慧知到级日案)初语入树(试答.环境中国_章节测大学_启案验答老年航·护理.... 通桌面体写末答智慧作申案用文论期树实. 常情模拟技术基础大 ...
- 计算机开机配置系统怎么办,电脑开机显示硬件配置文件配置恢复怎么办?
丿丶纪念灬 回答数:5291 | 被采纳数:21 2017-03-23 07:34:25 你用的估计是NVIDIA的芯片组吧! 而且你还安装的NVIDIA主板驱动中的IDE驱动(支持硬盘热拔插). ...
- linux 环境安装配置,Linux相关环境安装与配置
最近买了一个腾讯云的服务器,简单安装了下环境并记录一下 Java: 1.查找java相关的列表 yum -y list java* 2.安装JDK(这里是1.8.0版本) yum install ja ...
- 服务器c的环境配置文件,配置linux服务器环境(jdk+tomcat+mysql+nginx+redis+svn+nexus的maven私服)...
一.安装jdk: 1.远程连接工具我用的是xshell6: 切换到root用户 2.创建安装目录: 创建安装目录 3.将jdk上传到目录下,并解压: 上传文件 解压tar zxvf jdk-8u191 ...
最新文章
- kinect+java3d+robot开发备忘录
- 深入浅出详细介绍Java异常,让你茅塞顿开般的感觉
- windows API(一)
- Divan and a Store 贪心(800)
- Android笔记(三十一)Android中线程之间的通信(三)子线程给主线程发送消息...
- Types cannot be provided in put mapping requests, unless the include_type_name parameter is set to t
- oracle如何并发重建索引,oracle数据库如何重建索引?
- 一般的模式匹配算法(求子串位置)
- 爬虫-例子-飞机图片的提取-抓取一个文章中的全部图片
- 阿里云印尼大区开服,助力“一带一路”发展数字经济
- 基于Kinetis系列微控制器K60芯片的I2C接口函数程序说明1
- 【期末划重点】高数下期末考复习
- 【easyui】之DataGrid数据显示
- 基于videojs 实现javascript弹幕功能
- showdown解析md文件
- [QT]clicked(bool)与toggled(bool)区别
- 佛山市政携手企企通,打造高效协同的云端极速供应链
- 【编程学习】浅谈哈希表及用C语言构建哈希表!
- 微信视频号服务商怎么赚钱?
- 赛维时代IPO过会:第一季净利降71% 出口跨境电商热度降温
热门文章
- ArrayDeque 双端队列
- ASP.NET MVC 4 视图页去哪里儿
- 读书笔记2013第5本:《拖延心理学》
- C#发布网站在web.config和IIS中设置Session过期时间
- vue :style 设置背景图片 backgroundImage
- “Table .__efmigrationshistory doesn’t exist”的解决方案
- 初级开发人员的缺点_如何避免我作为初级开发人员犯的这7个错误
- gettext 国际化_如何使用Gettext在Phoenix应用程序中执行本地化
- swift 富文本编辑_如何使用Swift构建协作式文本编辑器
- java代码题_精选20道Java代码笔试题