作为初学者,总结一下配置hadoop2.6的心得体会。

首次配置时采用虚拟机中运行Ubuntu14.04,直接配置hadoop2.6,并在其中运行Eclipse。于自己的机子性能较为一般(4核+4G),尝试几个案例时就出现卡的现象。后来尝试CYGWIN代替Ubuntu,但各种配置问题不断产生,不得不放弃。改为在win7(64bit)下采用Eclipse连接ubuntu中hadoop2.6,为了提升性能,ubuntu改为命令行模式下启动,去掉图形化界面。

Ubuntu下配置hadoop2.6并没遇到太多问题,参照一下博文:                           http://blog.csdn.net/ggz631047367/article/details/42426391

Win7下将hadoop2.6插件配置到Eclipse,参照博文设置虚拟机中Ubuntu与Eclipse配置:http://www.xuebuyuan.com/1415322.html

文中提及虚拟机网络连接采用桥接模式,本人在实现中采用NAT也是可行的,并未遇到IP变动的问题。插件配置中要涉及到hadoop.tmp.dir的配置是与网上其他攻略不同的地方,在实践中曾因忽略此处,eclipse无法连接上HDFS。

连接上HDFS文件系统后,建立工程,复制WordCount代码,如果采用的是官网上的Hadoop2.6,因为缺少hadoop.dll与winutils.exe会有异常出现,2.6版本到

http://download.csdn.net/detail/u014310430/8402965#comment下载  亲测可用。放到WIN7下hadoop文件的BIN,中,同时配置环境变量HADOOP_HOME和在Path变量中加入%HADOOP_HOME%\bin,重启电脑。

Ubuntu去图形界面

    sudo vim /etc/default/gru

找到:GRUB_CMDLINE_LINUX_DEFAULT="quiet splash",应该是在第11行。复制本行然后把quiet splash替换成text。保存后执行命令更新

    sudo update-grub 

重启后就直接进入文字界面。

    sudo reboot

转载于:https://blog.51cto.com/slocum/1612249

win764bit下Eclipse连接ubuntu中hadoop2.6经验总结相关推荐

  1. 简明Hadoop配置(3)——windows下eclipse连接虚拟机

    在windows下配置,还需要当心IP地址和eclipse配置时的问题,这需要单独说一下. 在Ubuntu下eclipse新建hadoopIP直接填localhost就好,但是在windows下肯定是 ...

  2. ubuntu eclipse mysql_ubuntu下eclipse连接mysql

    提示:一定要保证电脑处于联网状态 我们要下载一个mysql-connector-java-5.0.8-bin.jar的东西(当然这个jar包的版本号和你的mysql版本号的关系不是非常大),放到你新建 ...

  3. windows下eclipse连接hadoop

    首先介绍配置环境 linux版本 CentOS release 6.7 64位 一个master,若干slave windows版本 win7 32位 hadoop 2.6.0版本 1 安装插件had ...

  4. Ubuntu12.04下Eclipse连接小米2s调试

    前言 初入职场第一周就让我感受到了学校和社会的差距,学校里有水平差不多一起努力的小伙伴,社会上尤其是大公司里基本都是各种大神.技术专家,而且依旧很努力.之前以为自己很用功,可到了社会上发现这只是维持生 ...

  5. Windos下navcat连接虚拟机中的mysql

    进入mysql命令行, 使用root用户,密码:youpassword(你的root密码)连接到mysql服务器: # mysql -u root -proot  mysql>GRANT ALL ...

  6. Xshell7连接ubuntu

    项目场景: Xshell7连接ubuntu 问题描述 Xshell7连接ubuntu中显示拒绝访问密码的问题 原因分析: 提示:因为在连接Ubuntu的过程中,导致密码拒绝访问.ssh服务已经更新和开 ...

  7. Windows系统使用VScode开发golang程序,远程连接Ubuntu系统编辑代码并编译运行

    文章目录 Windows系统配置Linux golang开发环境 VMware安装 VMware安装Ubuntu无桌面版 Ubuntu系统下配置golang开发环境 配置golang环境 配置git流 ...

  8. Windows 下用 SecureCRT 连接 VirtualBox 中的 Ubuntu

    1. 软件准备工作 (1)下载VirtualBox 虚拟机,地址:https://www.virtualbox.org/wiki/Downloads (2)  下载Ubuntu 10.4 LTS,地址 ...

  9. Ubuntu中搭建Hadoop2.5.2完全分布式系统(一)

    Hadoop平台搭建有三种模式,分别是单机模式.伪分布模式.完全分布模式.单机模式是在单一计算机或者服务器上运行Hadoop,没有分布式的文件上传和任务分配等功能.它执行的流程仍然是Map/Reduc ...

最新文章

  1. Activity向Fragment传值
  2. pythonpandas读取csv和另外一个csv进行比较_Python Pandas:比较一个列中类似值的两个csv(dataframe)的行,并返回相似的行(列)的内容...
  3. 黑盒測试(一)-----边界值測试
  4. ClickHouse数据分析列式数据库概述
  5. LeetCode 52.N-Queens II
  6. 关于VS2012连接MySql数据库时无法选择数据源
  7. python创建一个空的dataframe_python 创建一个空dataframe 然后添加行数据的实例
  8. [JavaWeb-MySQL]DDL_操作数据库,表
  9. Dart基础学习02--变量及内置类型
  10. python 网络摄像头安装图解_网络摄像头在opencv-python和opencv-contrib-python...
  11. USB总线-USB协议简介(一)
  12. verilog赋多位值_verilog语句两个always块对同一个变量赋值问题!【恢复】
  13. 【快速迭代】【原型开发】
  14. Office之word如何去除尾注的横线?
  15. 技术开放平台,推进开放银行布局
  16. vue打包后华为手机自带浏览器访问空白
  17. A. Sonya and Queries
  18. 动漫培训学费一般多少钱
  19. 计算机组成原理 主存储器1
  20. 发表SCI有什么好处?如何发表一篇SCI论文?

热门文章

  1. Linux下修改当前用户的最大线程数和 open files
  2. 批量复制文件并改成有顺序的文件名
  3. 2019web前端全新面试题库 一
  4. 实现图片的变亮,变暗,灰白
  5. ubuntu16 kickstart pxe 安装系统
  6. HTML5文件上传插件 Huploadify V2.1发布
  7. uboot1.1.6 start.s分析
  8. DataTable 转换 DataSet
  9. 第一个工程 HttpLoader
  10. 隐藏Jquery dialog 按钮