hadoop-1.1.2 在centos环境下的部署

环境：

虚拟机

CentOS6.4

Java:默认的 OpenJDK1.7.0.9

1:配置JAVA_HOME

http://blog.csdn.net/wind520/article/details/9308809

2:下载

hadoop1.1.2 http://download.csdn.net/detail/wind520/5693609

3:解压

tar zxf hadoop-1.1.2-bin.tar.gz

4：配置

hadoop1/conf下需要配置的文件：

1).hadoop-env.sh

2).core-site.xml

3).hdfs-site.xml

4).mapred-site.xml

如何修改请参考 http://blog.csdn.net/wind520/article/details/9225429

5：启动Hadoop

第一步，在hadoop目录下创建目录logs，用于保存日志
第二步，Format a new distributed-filesystem: 格式化namenode，创建HDFS
执行命令： ./hadoop namenode -format

[jifeng@localhost bin]$ ./hadoop namenode -format
13/07/12 17:56:14 INFO namenode.NameNode: STARTUP_MSG:
/************************************************************
STARTUP_MSG: Starting NameNode
STARTUP_MSG:   host = localhost/127.0.0.1
STARTUP_MSG:   args = [-format]
STARTUP_MSG:   version = 1.1.2
STARTUP_MSG:   build = https://svn.apache.org/repos/asf/hadoop/common/branches/branch-1.1 -r 1440782; compiled by 'hortonfo' on Thu Jan 31 02:03:24 UTC 2013
************************************************************/
13/07/12 17:56:15 INFO util.GSet: VM type       = 32-bit
13/07/12 17:56:15 INFO util.GSet: 2% max memory = 19.33375 MB
13/07/12 17:56:15 INFO util.GSet: capacity      = 2^22 = 4194304 entries
13/07/12 17:56:15 INFO util.GSet: recommended=4194304, actual=4194304
13/07/12 17:56:15 INFO namenode.FSNamesystem: fsOwner=jifeng
13/07/12 17:56:15 INFO namenode.FSNamesystem: supergroup=supergroup
13/07/12 17:56:15 INFO namenode.FSNamesystem: isPermissionEnabled=true
13/07/12 17:56:15 INFO namenode.FSNamesystem: dfs.block.invalidate.limit=100
13/07/12 17:56:15 INFO namenode.FSNamesystem: isAccessTokenEnabled=false accessKeyUpdateInterval=0 min(s), accessTokenLifetime=0 min(s)
13/07/12 17:56:15 INFO namenode.NameNode: Caching file names occuring more than 10 times
13/07/12 17:56:15 INFO common.Storage: Image file of size 112 saved in 0 seconds.
13/07/12 17:56:16 INFO namenode.FSEditLog: closing edit log: position=4, editlog=/tmp/hadoop-jifeng/dfs/name/current/edits
13/07/12 17:56:16 INFO namenode.FSEditLog: close success: truncate to 4, editlog=/tmp/hadoop-jifeng/dfs/name/current/edits
13/07/12 17:56:16 INFO common.Storage: Storage directory /tmp/hadoop-jifeng/dfs/name has been successfully formatted.
13/07/12 17:56:16 INFO namenode.NameNode: SHUTDOWN_MSG:
/************************************************************
SHUTDOWN_MSG: Shutting down NameNode at localhost/127.0.0.1
************************************************************/
[jifeng@localhost bin]$ ./start-all.sh
starting namenode, logging to /home/jifeng/down/hadoop/libexec/../logs/hadoop-jifeng-namenode-localhost.localdomain.out
jifeng@localhost's password:
localhost: starting datanode, logging to /home/jifeng/down/hadoop/libexec/../logs/hadoop-jifeng-datanode-localhost.out
jifeng@localhost's password:
localhost: secondarynamenode running as process 3118. Stop it first.
jobtracker running as process 3190. Stop it first.
jifeng@localhost's password:
localhost: tasktracker running as process 4973. Stop it first.
[jifeng@localhost bin]$

第三步，启动Hadoop，执行命令： ./start-all.sh

需要输入3次密码.

hadoop默认的NameNode 和 JobTracker

<ul><li><span class="codefrag">NameNode</span> - <a target=_blank href="http://localhost:50070/"><span style="color:#336699;">http://localhost:50070/</span></a></li><li><span class="codefrag">JobTracker</span> - <a target=_blank href="http://localhost:50030/"><span style="color:#336699;">http://localhost:50030/</span></a></li></ul>

其他命令：

上传本地文件到HDFS

[jifeng@localhost hadoop]$ bin/hadoop fs -copyFromLocal local/hadoop.tar.gz /user/zip/hadoop.tar.gz

查看运行：
[jifeng@localhost hadoop]$ jps
2822 DataNode
3198 TaskTracker
3510 Jps
3043 JobTracker
2704 NameNode
2960 SecondaryNameNode

hadoop-1.1.2 在centos环境下的部署相关推荐

Centos环境下部署游戏服务器－软件安装
这篇文章主要介绍一下游戏服务器需要安装的软件和需要修改的配置.现介绍下项目,本项目服务器端是c++ + mysql组合,客户端是as写的,需要安装的服务为Mysql,Php,Apache, 以及一个n ...
centos环境下使用percona-xtrabackup对mysql5.6数据库innodb和myisam进行快速备份及恢复...
centos环境下使用percona-xtrabackup对mysql5.6数据库innodb和myisam进行快速备份及恢复有时候我们会碰到这样的业务场景: 1.将大的数据库恢复到本地进行业务测试 ...
linux编译ace tao,CentOS环境下ACE编译指南
CentOS环境下ACE编译指南 1.环境说明: (1)CentOS6.3 (2) ACE6.10 2.编译步骤: (1)定义环境变量: ACE_ROOT=/root/work/cots/ACE_wr ...
centos php支持yaf,CentOS环境下给PHP7.0安装yaf扩展
| CentOS环境下给PHP7.0安装yaf扩展在CentOS环境下给PHP7.0安装yaf扩展,首先要知道PHP的安装目录在哪里,以我当前的路径为例,在/usr/local/php目录下. 下一 ...
centos 启动一个redis_linux环境下安装部署redis服务器
概述 Redis是Remote Dictionary Server的缩写.他本质上一个Key/Value数据库,与Memcached类似的NoSQL型数据库.今天把之前在生产环境下安装部署redis的 ...
php7.4安装配置,CentOS环境下安装配置PHP 7.4的方法
CentOS环境下安装配置PHP 7.4的方法发布时间:2020-06-19 10:22:32 来源:亿速云阅读:136 作者:Leah 本文给大家分享的是CentOS环境下安装配置PHP 7.4 ...
Linux环境下Tomcat部署Solr4.x
Linux环境下Tomcat部署Solr 最近接手了公司搜索相关的业务,由于其使用的是Solr,故趁着周末自己鼓捣下; 由于业务上使用的是Solr4.2.0版本,因此在学习时,使用相对较老的版本Sol ...
linux环境下编译部署php生产环境
linux环境下编译部署php生产环境版本控制 php:7.2.4 nginx:1.9.9 部分插件版本 xlswriter:1.3.3.2 redis:3.1.3 一.安装php 1.安装依赖(之 ...
Sonar Qube连续代码质量管理（二）Sonar Qube7.6在Windows环境下安装部署和服务启停
继续上篇内容,对Sonar Qube7.6在Windows 10环境下安装部署操作步骤进行分解,后期将会考虑在Linux上部署. 一.启动服务进入到D:\DevelopSoft\Sonar\sona ...

hadoop-1.1.2 在centos环境下的部署

hadoop-1.1.2 在centos环境下的部署相关推荐

最新文章

热门文章