windows配置Hadoop开发环境
windows配置Hadoop开发环境
问题描述
windows下连接hadoop集群，报以下错误：
java.io.FileNotFoundException: java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset. -see https://wiki.apache.org/hadoop/WindowsProblems
在windows下想要连接hadoop集群，又不想安装hadoop环境下，这个时候就需要第三方工具了（hadoop-winutils）
工具地址
工具安装
下载工具
根据自己的安装的hadoop版本来选择对应的工具
我的集群时CDH版本，选择主机->所有主机->选择一个主机-> 组件，进行查看
这里我选择的时3.1.0版本可以兼容3.0.0
安装配置
配置HADOOP_HOME环境变量
点击环境变量，新建系统变量
配置Path
重启系统
SpringBoot配置连接Hbase
maven
<!-- hbase --><dependency><groupId>org.apache.hbase</groupId><artifactId>hbase-client</artifactId><version>2.4.1</version></dependency>
application.yml
hbase:config:hbase:zookeeper:quorum: node1property:clientPort: 2181
node1：指的时zookeeper连接地址
windows配置Hadoop开发环境相关推荐
- 配置HADOOP开发环境
考虑到Windows平台尽管界面友好,但Hadoop环境配置较"怪异",需借助cygwin,这个过程并不优雅.正好我手上另有一套ubuntu环境,用着也很顺手,就在ubuntu中安 ...
- Hadoop完全分布式搭建过程、maven和eclipse配置hadoop开发环境、配置Map/Reduce Locations、简单wordcount测试!
Hadoop完全分布式搭建及测试 项目开始前准备工作 1.下载并安装VM workstation pro 15安装包,这里选择: VMware-workstation-full-15.1.0-1359 ...
- Hadoop入门系列（二）idea配置hadoop开发环境
主要分两部分:一.idea配置hadoop开发环境.二.idea安装hadoop插件. 一. 1.为了便于各个版本的hadoop获得对应jar包以及其依赖jar包.搭建maven项目是个很好的选择.创 ...
- IDEA中配置hadoop开发环境
IDEA中整合hadoop开发环境 前言: hadoop程序运行在分布式环境下,运行调试MapReduce只需要对应的hadoop相应的依赖jar包就可以,下面以是在伪分布模式下hadoop程序的开发 ...
- 在idea上配置hadoop开发环境，使用maven配置hadoop的依赖，自动管理相关jar包
使用maven可以很方便的管理我们项目的依赖,不需要手动去加载项目依赖的ja包,也方便项目的迁移,所以我选择使用 maven 来管理hadoop的开发环境的jar包. maven官网 JDK版本的要求 ...
- Windows配置Gtkmm开发环境(with codeblocks)
文章目录 写在前面 MSYS2的安装/配置 添加环境变量 更换国内镜像 安装必需软件包 Code::Blocks配置 一个简单的例子(hello world) 主要参考 写在前面 最近腾出时间来学习一 ...
- Eclipse安装Hadoop插件配置Hadoop开发环境
一.下载Hadoop插件 注意:Hadoop插件要跟自己安装的Hadoop版本相对应. 这儿有一个Hadoop 2.X版本对应的Hadoop插件,前往下载, 下载hadoop2x-eclipse-pl ...
- 第五章 MyEclipse配置hadoop开发环境
1.首先要下载相应的hadoop版本的插件,我这里就给2个例子: hadoop-1.2.1插件:http://download.csdn.net/download/hanyongan300/62381 ...
- windows配置spark开发环境
声明:搭建过程中,会因为版本兼容问题,造成闪退等问题,以下是我自用的版本,如需其他版本,最好先查一下兼容问题 1.jdk-8u333-windows-x64下载链接 2.scala-2.13.10下载 ...
- 配置Hadoop开发环境（Eclipse）
参考博文: http://blog.csdn.net/zythy/article/details/17397153 http://www.tuicool.com/articles/AjUZrq 注意事 ...
最新文章
- oracle 提示:ORA-02292:integrity constraint(xxxxxxx) violated - child record found
- 一场科技盛宴，一次“盈”满天下 安创成长营五期Demo Day完美收官
- 哪吒之魔童降世 - 逆天改命，若命运不公，就和它斗到底！
- boost::mp11::mp_join相关用法的测试程序
- 给出一个包含n个整数的数列，问整数a在数列中的第一次出现是第几个。
- Java 正则表达式 工具类 中文 英文 email 手机号 身份证 数字 日期
- centos安装apache_实战Linux部署Apache
- ASP.NET2.0的控件状态和视图状态探讨
- 软件 测试试用期转正申请,软件工程师试用期工作总结及转正申请
- 地震数据.dat文件转.sgy文件
- SQL练习：查询各科成绩前三名的记录
- 苹果手机怎么设置新的id
- 移动智能终端之国产操作系统（笔记三）
- 苹果严打iMessage垃圾短信
- InnoDB存储引擎介绍-(6) 二. Innodb Antelope文件格式
- word文档怎么把波浪线去掉_Word实战技巧：干掉波浪线，Word中红色波浪线如何去掉？...
- Linux curl 命令模拟 POST/GET 请求
- java for循环如何优化_java for循环及其优化
- sap 标准委外和工序委外_委外加工SAP的两种典型委外处理方法
- MAC地址绑定（交换机命令大全）