2019独角兽企业重金招聘Python工程师标准>>>

一、准备环境:
a.ubuntu14.04-64
b.hadoop2.6.4(https://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.6.2/hadoop-2.6.2.tar.gz)
c.自行配置
二、java以及秘钥登陆[。。。]
三、hadoop的安装
a.tar -zxvf hadoop-2.6.2.tar.gz 解压后放置在/data/下 命名为hadoop
b.修改hadoop-env.sh
vim /data/hadoop/etc/hadoop/hadoop-env.sh 大概在# set JAVA_HOME in this file下面添加
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
c.vim /data/hadoop/etc/hadoop/core-site.xml 添加如下:

fs.defaultFS
hdfs://localhost:9000

hadoop.tmp.dir
/data/hadoop/tmp

hadoop.native.lib
true

d. vim /data/hadoop/etc/hadoop/hdfs-site.xml 添加如下:
<configuration><property> <name>dfs.replication</name> <value>1</value> </property> <property><name>dfs.namenode.name.dir</name><value>/data/hadoop/hdfs/name</value></property><property><name>dfs.datanode.data.dir</name><value>/data/hadoop/hdfs/data</value></property><property><name>dfs.permissions</name><value>false</value></property>
</configuration>e.vim /data/hadoop/etc/hadoop/mapred-site.xml 添加如下:
<configuration><property><name>mapreduce.framework.name</name><value>yarn</value></property>
</configuration>f. vim /data/hadoop/etc/hadoop/yarn-site.xml 添加如下:
<configuration>
<property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value>  ##注意这里有坑  mapreduce.shuffle 链接符为.的时候有问题</property>
</configuration>

四、创建文件夹
cd /data/hadoop
mkdir tmp
cd tmp
mkdir name data
chmod -R 777 tmp
五、格式化
cd /data/hadoop/bin
hdfs namenode -format
六、启动了
cd /data/hadoop/sbin
./start-all.sh
jps 可以查看到
6个进程即可

转自于:http://www.hitoky.com/index.php/archives/13.html

转载于:https://my.oschina.net/u/1780456/blog/874539

hadoop2.6.4 在ubuntu14.04下的搭建相关推荐

  1. ubuntu14.04下出现libmysqlclient.so.20找不到问题

    ubuntu14.04下出现libmysqlclient.so.20找不到问题 搜了下,发现没人公布解决这个问题的方法,于是分享了下,分享让科技进步更快,大家一起加油 /usr/bin/ld: war ...

  2. Ubuntu14.04下Neo4j图数据库官网安装部署步骤(图文详解)(博主推荐)

    不多说,直接上干货! 说在前面的话  首先,查看下你的操作系统的版本. root@zhouls-virtual-machine:~# cat /etc/issue Ubuntu 14.04.4 LTS ...

  3. 解决Ubuntu14.04 下 E: Encountered a section with no Package: header 问题

    参考: ubuntu-E:Encountered a section with no Package: header的解决办法 解决Ubuntu14.04 下 E: Encountered a sec ...

  4. Linux(Ubuntu14.04)下安装Anaconda和Spyder

    Linux(Ubuntu14.04)下安装Anaconda是为了安装python所需要的各种库以及他们的环境配置. Spyder是使用python的IDE 安装python和pip 一般linux系统 ...

  5. Ubuntu14.04下安装wineqq国际版和卸载QQ

    转载自: http://www.bubuko.com/infodetail-343048.html http://jingyan.baidu.com/article/e9fb46e199d60d752 ...

  6. ubuntu14.04下mysql数据库的默认存放路径并修改

    ubuntu14.04下mysql数据库的默认存放路径为:/var/lib/mysql 但有些时候,mysql的数据可能会非常大,由于/var所划分的空间不够大,所以我们需要将mysql数据存放路径修 ...

  7. PHP学习记录第一篇:Ubuntu14.04下LAMP环境的搭建

    PHP学习记录第一篇:Ubuntu14.04下LAMP环境的搭建 最近一段时间会学习一下PHP全栈开发,将会写一系列的文章来总结学习的过程,以自勉. 第一篇记录一下LAMP环境的安装 0. 安装Apa ...

  8. Ubuntu14.04下Mongodb数据库可视化工具安装部署步骤(图文详解)(博主推荐)

    不多说,直接上干货! 前期博客 Ubuntu14.04下Mongodb(离线安装方式|非apt-get)安装部署步骤(图文详解)(博主推荐) Ubuntu14.04下Mongodb官网安装部署步骤(图 ...

  9. apache2+支持php7,Ubuntu14.04下配置PHP7.0+Apache2+Mysql5.7

    Apache 步骤一:安装apache ronyao@ubuntu:~$ sudo apt install apache2 安装好后,在浏览器上输入localhost(服务器端,请输入你的IP地址), ...

最新文章

  1. RS232接口是如何工作的?
  2. 你为何如此优秀?| 神策数据 2018 年获奖集锦
  3. boost::mpi模块all_reduce() 集合的测试
  4. shell讲解-小案例
  5. [kubernetes] Schedule --- Node调度与隔离
  6. 工作125:各个接口需要的token不同 token是获取数据的关键
  7. SU suspecfk命令学习
  8. Android主题换肤实现
  9. php执行跟踪_PHP 代码调试跟踪工具 Ytrace
  10. 深入浅出 Golang 协程池设计
  11. char强制类型转换为int_彻底理解Java中的基本数据类型转换(自动、强制、提升)...
  12. 【论文笔记】多智能体强化学习值分解基础论文5篇
  13. 区块链会议_2018杭州云栖大会区块链相关_20180919
  14. 计算机网络Flash教学课件,flash动画教学课件
  15. 查询包含关系的SQL
  16. 基于vue2编写的md编辑器-Bytemd
  17. Windows10杀毒软件哪个好用点?
  18. 计算机专业新生研讨课资料整合
  19. apache 编译java_关于apache的bsf包的JavaUtils工具类包自定义类编译器对指定目标文件进行编译JDKcompile...
  20. 什么是黑客、骇客、白客、红客?他们的工作是什么?

热门文章

  1. java jar apktool,ShakaApkTool.jar v3.0.0(反编译显示中文的apktool)下载
  2. 8备份sqlserver_关于SQL server 巡检的要点你都知道吗?
  3. idea 设置jdk_IDEA开发小技巧~jdk问题
  4. php mysql encode_PHP json_encode mysql结果
  5. t-sql查询where in_产品操作MySQL第7篇 – 运算符 - IN
  6. 关于码云的一些基本知识_一些关于 CPU 的基本知识
  7. c语言随机函数怎么循环,如何在C ++循环中生成不同的随机数?
  8. 微信小程序学习笔记01:微信小程序概述
  9. 【BZOJ3439】Kpm的MC密码,trie树+dfs序+主席树
  10. 14.图像透视——投影几何性质,平行线(Parallel Lines),消失点(Vanishing Point)_3