hadoop2.0以后不需要借助cywin运行在Windows上

Hadoop 2.0及以后的版本可以直接在windows上跑, 不用cygwin了, 凡是讲cygwin的攻略都可以忽略.

去官网下载hadoop，其实都是tar.gz linux版本，所以我们单独下载window需要一些文件。

关于环境变量: 我实验下来要加的唯一一个环境变量是系统变量里的Path, 往里加上Hadoop的bin目录的路径.

关于winutils: 除了Hadoop安装包和JDK外,还要下载的一个第三方工具是名为winutils的一套类库, 下载地址:

https://github.com/steveloughran/winutils

注意比如你hadoop下载的是3.1版本, 那么这个类库你也要用3.1的. 下载完了把里面所有的dll等文件都覆盖到hadoop目录的bin子目录下去.

关于hadoop的配置: 在hadoop目录下的etc/hadoop下找到大量配置文件, 文件后缀名为sh的是linux环境用的, cmd的就是windows的脚本,先要配置hadcoop-env.cmd: 这个文件唯一要配置的地方是:

 set JAVA_HOME=C:\Java\jdk1.8.0_121

尤其要注意的一点是如果你的Java装在Program Files这样带空格的文件夹下的话, 一定要把这个文件夹命名为不带空格的名字, 或者用 "C:\PROGRA~1" 来表示 "C:\Program Files", 否则会报错, 这是一个坑.！！！

hadoop2.0以后不需要借助cywin运行在Windows上相关推荐

如果彩虹QQ算非法外挂，那么运行在windows上的非微软开发的程序算什么？
如果彩虹QQ算非法外挂,那么运行在windows上的非微软开发的程序算什么?你腾讯QQ不也是利用了一堆微软提供的信息,开放的API了吗?你腾讯QQ不也是windows上的外挂程序吗? 也许有人要说腾讯 ...
Linux命令能否运行在Windows上？
Linux命令能否运行在Windows上? 可以. Windows系统自带的PoweShell,可以执行Linux命令. 使用Git Bash.从下图可以看出,Git本身就有多个版本,下载Window ...
linux运行容器,容器与云|如何在 Windows 上运行 Linux 容器
1.概述现在能够在 Windows 10 和 Windows 服务器上运行 Docker 容器了,它是以 Ubuntu 作为宿主基础的. 想象一下,使用你喜欢的 Linux 发行版--比如 Ubun ...
开源流媒体服务器ZLMediaKit在Windows上运行、配置、按需拉流拉取摄像头rtsp视频流)并使用http-flv网页播放
场景目前市面上有很多开源的流媒体服务器解决方案,常见的有SRS.EasyDarwin.ZLMediaKit和Monibuca等. 1.SRS GitHub - ossrs/srs: SRS is a ...
mscorwks.dll没有被指定在Windows上运行，或者它包含错误...
每次电脑开机后都会出现一个弹窗,弹窗的内容为: C:\Windows\Microsoft.NET\Framework64\v2.0.50727\mscorwks.dll 没有被指定在Windows上运 ...
Hadoop2.0 YARN
前言:Hadoop2.0中的YARN YARN产生背景第一代MapReduce(MRv1)的局限性扩展性差.MRv1中JobTracker兼备集群资源的管理和作业管理的调度和控制两大功能,使得Jo ...
Hadoop2.0高可用集群搭建【保姆级教程】
搭载Hadoop2.0高可用集群说明准备下载好所需要的文件目录准备虚拟机网络配置(可能会在其他文章中讲到) 文件的安装配置环境变量环境变量的验证关闭防火墙配置Hadoop高可用集群 ...
从Hadoop1.0到Hadoop2.0架构的优化和发展探索详解
前言本人大三软件工程大数据专业,在此领域本人有诸多不明确疑问,可能文章会有些许错误,望大家在评论区指正,本篇文章错误将会不断更正维护. 提示:以下是本篇文章正文内容,下面案例可供参考一.Hadoo ...
大话Hadoop1.0、Hadoop2.0与Yarn平台
2016年12月14日21:37:29 Author:张明阳博文链接:http://blog.csdn.net/a2011480169/article/details/53647012 参考 ppt ...

hadoop2.0以后不需要借助cywin运行在Windows上

hadoop2.0以后不需要借助cywin运行在Windows上相关推荐

最新文章

热门文章