windows环境搭建hadoop
1、下载hadoop
下载hadoop2.5.2.tar.gz ,并解压到你想要的目录下,我放在E:\hadoop-2.5.2
2、配置环境变量
2.1windows环境变量配置
右键单击我的电脑 –>属性 –>高级环境变量配置 –>高级选项卡 –>环境变量 –> 单击新建HADOOP_HOME,
2.2接着编辑环境变量path,将hadoop的bin目录加入到后面;
3、修改配置文件
编辑“E:\hadoop-2.5.2\etc\hadoop”下的core-site.xml文件,将下列文本粘贴进去,并保存;
<configuration><property><name>hadoop.tmp.dir</name><value>/E:/hadoop-2.5.2/workplace/tmp</value></property><property><name>dfs.name.dir</name><value>/E:/hadoop-2.5.2/workplace/name</value></property><property><name>fs.default.name</name><value>hdfs://localhost:9000</value></property>
</configuration>
编辑“E:\hadoop-2.5.2\etc\hadoop”目录下的mapred-site.xml(没有就将mapred-site.xml.template重命名为mapred-site.xml)文件,粘贴一下内容并保存;
<configuration><property><name>mapreduce.framework.name</name><value>yarn</value></property><property><name>mapred.job.tracker</name><value>hdfs://localhost:9001</value></property>
</configuration>
编辑“E:\hadoop-2.5.2\etc\hadoop”目录下的hdfs-site.xml文件,粘贴以下内容并保存。请自行创建data目录,在这里我是在HADOOP_HOME目录下创建了workplace/data目录;
<configuration><!-- 这个参数设置为1,因为是单机版hadoop --><property><name>dfs.replication</name><value>1</value></property><property><name>dfs.data.dir</name><value>/E:/hadoop-2.5.2/workplace/data</value></property>
</configuration>
编辑“E:\hadoop-2.5.2\etc\hadoop”目录下的hadoop-env.cmd文件,将JAVA_HOME用 @rem注释掉,编辑为JAVA_HOME的路径,然后保存;
@rem set JAVA_HOME=%JAVA_HOME%
set JAVA_HOME=C:\PROGRA~1\Java\jdk1.8.0_261
注意:
如果jdk在Program Files文件夹中,将Program Files改为PROGRA~1,因为Program Files之间有空格,否则会报错
Error: JAVA_HOME is incorrectly set. Please update E:\hadoop-2.5.2\conf\hadoop-env.cmd
4、替换文件
下载到的hadooponwindows-master.zip,解压,将bin目录(包含以下.dll和.exe文件)文件替换原来hadoop目录下的bin目录
5、运行环境
运行cmd窗口,执行“hdfs namenode -format”;
运行cmd窗口,切换到hadoop的sbin目录,执行“start-all.cmd”,它将会启动以下进程
成功后,如图:
windows环境搭建hadoop相关推荐
- 环境搭建-Hadoop集群搭建
环境搭建-Hadoop集群搭建 写在前面,前面我们快速搭建好了centos的集群环境,接下来,我们就来开始hadoop的集群的搭建工作 实验环境 Hadoop版本:CDH 5.7.0 这里,我想说一下 ...
- windows下搭建hadoop
windows下搭建hadoop 下载 环境变量 windows 脚本替换 配置 windows权限 启动 单词统计实例 下载 首先去Apache Hadoop下载hadoop的安装包 选择二进制文件 ...
- Kafka单机Windows环境搭建
Kafka单机Windows环境搭建 1,安装jdk1.8:安装目录不能有中文空格: 2,下载zookeeper,https://mirrors.cnnic.cn/apache/zookeeper/z ...
- JAVA JDK windows环境搭建
JAVA JDK windows环境搭建 系统环境: windows 10 , JDK 1.7 操作步骤: 1.下载JDK,全部选择默认,直接点击下一步 2.配置环境变量 打开环境变量 变量设置 JA ...
- Flutter之Windows环境搭建
Flutter之Windows环境搭建 原创作者:只能陪你走一程 原文地址:https://www.jianshu.com/p/a78fd5e5116d 官方网址:https://flutter.io ...
- Windows 环境搭建 git 服务
Windows 环境搭建 git 服务 有时候在本地开发个人项目, 需要对代码进行版本管理, 可在 Windows 上搭建一个自己使用的 git 服务器 当前搭建系统环境 Windows10 安装Gi ...
- tinygo的windows环境搭建及简单例程
windows 环境搭建 安装 g 这里还是推荐g这个 go 的多版本管理工具,类似 NodeJS 的 nvm,Python 的 virtualenv. 官网下载: https://github.co ...
- RockChip Android平台抓取android trace的windows环境搭建
RockChip Android平台抓取android trace的windows环境搭建的步骤 安装python2.7.9 下载链接: https://www.python.org/download ...
- kafka windows环境搭建 SASL_PLAINTEXT/SCRAM
kafka windows环境搭建 SASL_PLAINTEXT/SCRAM acl认证记录 一.kafka 下载参考地址 https://kafka.apache.org/downloads 二.环 ...
- ESC32 windows 环境搭建【Visual Studio Code】
ESP32 windows 环境搭建 第一步:工具准备 1.Visual Studio Code下载 2.工具链下载 3.SDK下载 第二步:搭建环境 1.Visual Studio Code安装 2 ...
最新文章
- Qt控制台输出QString
- 讲讲JavaScript的闭包
- Laravel-admin添加模型路由报错出现问题:Model does not exists !
- python 指针指向的内容,python-文件的读取及指针位置
- java 异步调用webapi_Async Await异步调用WebApi
- mysql innodb 写锁_MySQL-InnoDB-锁
- float强制转换的问题及解释
- 打开IE窗口自动最大化效果
- python ttk.notebook_python - ttk.Notebook每个选项卡上的不同网格大小 - 堆栈内存溢出...
- 新员工入职表_招人难,留人难!超市如何留住新员工
- revit2019 导出obj_Revit模型转obj模型插件
- Pytorch——Conv2d、conv2d
- ARM LINUX 扩展串口
- 终于在国庆前找到工作了!(面试全过程真实记录)
- ON DUPLICATE KEY UPDATE 作用及一句SQL实现批量修改
- javascript-彩票游戏
- 你是个年轻人,请你好好生活
- Web UI自动化框架大比拼
- 天河计算机二级未来教育第几套,计算机二级考试的题目是从未来教育套题里抽的吗?...
- 腾讯云发送短信验证码服务
热门文章
- vs2012 有效产品密钥
- 吴昊品游戏核心算法 Round 16 —— 吴昊教你玩口袋妖怪 完结篇 由金手指想到的...
- WEB项目优化:雅虎优化网站的34条法则(转)
- 2018通达信l2服务器源码,通达信强势龙头指标源码无未来,牛股连板涨停启动源码...
- Maya中AO贴图的一些烘焙心得
- python+pygame 最强大脑联动归位游戏
- 将h.264视频流封装成flv格式文件(二.开始动手)
- FLV、AAC、AVC封装格式分析
- 安川服务器显示ab32,安川驱动器维修常见报警代码及维修方法
- Java Web之三大利器