hadoop部署单机

将jjdk-6u45-linux-x64.bin与hadoop-2.5.2.tar.gz放在目录/home/dongwengao/hadoop中

vi /etc/hosts

#./jdk-6u45-linux-x64.bin解压

# tar -zxvf hadoop-2.5.2.tar.gz解压

进入解压后的hadoop-2.5.2中，修改hadoop-2.5.2中的 etc/hadoop中的配置文件

修改配置文件

修改hadoop-env.sh配置jdk的bin

修改mapred-site.xml添加

修改core-site.xml

修改hdfs-site.xml

修改yarn-site.xml 添加

修改slaves也可不修改，默认里有一个localhost

启动hadoop:

不提倡:

sbin/start-all.sh

一步一步：

格式化 # bin/hadoop namenode -format

启动namenode sbin/hadoop-daemon.sh start namenode

调用 #/jdk1.6.0_45/bin/jps发现多了一个线程NameNode表示启动成功

可以通过/home/dongwengao/hadoop/hadoop-2.5.2/hadoop-root-namenode-node1.log查看日志

启动datanode

sbin/hadoop-daemon.sh start datanode

启动yarn

# sbin/yarn-daemon.sh

打开浏览器输入:yarn001:8088

运行案例：

#bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce.example-*.*.* jar pi 2 100

关：

#sbin/stop-yarn.sh

#sbin/stop-dfs.sh

转载于:https://www.cnblogs.com/hotMemo/p/9275291.html

hadoop部署单机相关推荐

day70-大数据之Hadoop部署1(单机部署与伪分布式部署)
大数据基础平台实施及运维一.大数据介绍学习目标能够了解为什么使用大数据技术能够了解大数据指的是什么 1. 为什么使用大数据技术? 数据量越来越大数据分析的实时性越来越强数据结果的应用越来越 ...
ceph 部署单机集群
文章目录 ceph-deploy部署集群 ceph-deploy 部署单机 ceph-deploy 创建osd ceph osd创建资源池 ceph创建rbd块设备 ceph创建fs文件系统本文档主 ...
Hadoop部署方式-高可用集群部署(High Availability)
Hadoop部署方式-高可用集群部署(High Availability) 作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任. 本篇博客的高可用集群是建立在完全分布式基础之上的,详情请参 ...
#大数据技术#基于python的hadoop（单机）环境搭建及使用
基于python的hadoop(单机)环境搭建及使用 0.写在前面 1.虚拟机安装centos6.5 1.1安装流程 1.1.1系统安装 1.1.2修改静态ip(超级用户) 1.1.3更换可用源(超级 ...
hadoop部署技巧_我从部署中学到的十大技巧
hadoop部署技巧 Whether you are working on a personal project, collaborating with a couple people on an i ...
蓝的成长记——追逐DBA（14）：难忘的“云”端，起步的hadoop部署
原创作品,出自 "深蓝的blog" 博客,欢迎转载,转载时请务必注明出处,否则追究版权法律责任. 深蓝的blog:http://blog.csdn.net/huangyanlong ...
linux下的单机工具,Linux下单机模式的Hadoop部署
需要软件: ssh:fedore 9 自带. jdk:http://java.sun.com/javase/downloads/index.jsp,下最近版本jdk-6u18-linux-i586 H ...
在谷歌云服务器(ubantu 16.04)上部署单机hadoop（2.9.2）环境
要想部署hadoop,首先下载并配置java(JDK)程序,这里使用jdk8 1 部署JDK sudo apt-get update && \ sudo apt-get -y inst ...
windows下hadoop的单机伪分布式部署（3）
下面介绍myeclipse与hadoop的集成. 我用的myeclipse版本是8.5. 1.安装hadoop开发插件在hadoop1.2.1版本的安装包contrib/目录下,已经不再提供hado ...

hadoop部署单机

hadoop部署单机相关推荐

最新文章

热门文章