Hadoop 安装 in Ubuntu 64bit on VMware station

  • 1. Install VMware pro 15 on Windows 10.
  • 2. Download Ubuntu 64 bit from official website
  • 3. 在虚拟机上安装Ubuntu
  • 4. 安装Hadoop
    • 4.1 Install hadoop on Ubuntu system (PDF)
    • 4.2 Installation JDK. Choose Oracle JDK, open JDK not working for me.
    • 4.3 Install Hadoop (PDF)
    • 4.4 Install eclipse on Ubuntu
    • 4.5 Install Hadoop-Eclipse-Plugin (PDF)
    • 4.6 Install Apache pig
    • 4.7 Run Apache Pig Script

1. Install VMware pro 15 on Windows 10.

可以在VMware官网下载,也可以用胡萝卜周(很良心的软件分享者)的网站下载,有注册码。

2. Download Ubuntu 64 bit from official website

直接去官网下载就可以了:https://ubuntu.com/

3. 在虚拟机上安装Ubuntu

按照提示一步步操作就可以,要想在宿主机和虚拟机复制粘贴共享文件,可以设置共享文件夹,安装vm tools,这一步问题很多,解决方法是打vmtools 补丁,如果mnt不了,参考这里:Ubuntu论坛

4. 安装Hadoop

4.1 Install hadoop on Ubuntu system (PDF)

Download hadoop stable version:
http://apache.mirrors.spacedump.net/hadoop/common/stable/

Note: If VM cannot connect to Wi-Fi network, re-connect your Wi-Fi to make authorization. Change to Bridge connection not working for me.

4.2 Installation JDK. Choose Oracle JDK, open JDK not working for me.

http://www.cnblogs.com/a2211009/p/4265225.html

Use second way, go to official site download the latest version of JDK: http://www.oracle.com/technetwork/java/javase/downloads/index.html

sudo mkdir /usr/lib/jvm
sudo tar -zxvf jdk-9.0.1_linux-x64_bin.tar.gz -C /usr/lib/jvm
sudo vim ~/.bashrc (vim: press i to enter insert mode and press esc to return , :wp for save and exit the vim)

#set oracle jdk environment
export JAVA_HOME=/usr/lib/jvm/ jdk-9.0.1
source ~/.bashrc
java –version

4.3 Install Hadoop (PDF)

4.4 Install eclipse on Ubuntu

In the Ubuntu software, search Eclipse and install. Default directory is /usr/lib/eclipse

4.5 Install Hadoop-Eclipse-Plugin (PDF)

Note: Plugin version 2.6 also works for Hadoop 2.9.0 in this case.

4.6 Install Apache pig

https://www.w3cschool.cn/apache_pig/apache_pig_installation.html
Download a release: http://apache.mirrors.spacedump.net/pig/
Note: Restore environment variables:
Export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin

4.7 Run Apache Pig Script

hadoop version
start-dfs.sh
cd /$Hadoop_Home/bin/
hdfs dfs -mkdir hdfs://localhost:9000/Pig_Data
cd $HADOOP_HOME/bin
hdfs dfs -put /home/Hadoop/Pig/Pig_Data/student_data.txt dfs://localhost:9000/pig_data/
pig -x local Sample_script.pig
pig -x mapreduce Sample_script.pig

Processing time: 10G ~ 15min (4G ram 2 Cores)

虚拟机安装Ubuntu与Hadoop相关推荐

  1. 在VMware15中创建虚拟机安装ubuntu系统(超详细教程)

    此篇博文分享幼儿园老小(本人)创建虚拟机安装ubuntu系统的详细操作过程,希望对新手有所帮助咯!(大佬请自行略过哈哈) 我的下载地址详情如下: 下载请戳–>Ubuntu18.04/64位下载地 ...

  2. (转)VMware 虚拟机安装Ubuntu 11.10使用share folders共享目录

    第一步,安装VMware Tools 恢复虚拟机ubuntu后,首先,点击 虚拟机--安装VMware Tools(Install VMware Tools),这时我们会在Ubuntu系统桌面上发现V ...

  3. ROS入门-1认识Linux系统,虚拟机安装Ubuntu

    一.认识ROS 二.Linux系统介绍与安装 1.认识操作系统 linux是一种自由.开放源码的类似Unix的操作系统 2.虚拟机安装ubuntu 1)下载VMware 杂货猿公众号 2)下载ubun ...

  4. 解决vmware虚拟机安装ubuntu 无法连接wifi找不到wifi适配器问题

    解决vmware虚拟机安装ubuntu 无法连接wifi找不到wifi适配器问题 这个问题真的是折磨了我好久,bing了许多博客但都解决不了问题,几度想要放弃,已经准备用双系统,放弃虚拟机了,最后在实 ...

  5. Vmware 虚拟机安装 Ubuntu

    Vmware 虚拟机安装 Ubuntu 教程 1.下载 Ubuntu 系统镜像. 2.下载 VMware Workstation 虚拟机 3.安装 VMware Workstation 虚拟机 4.安 ...

  6. 【Linux 虚拟机】VMware虚拟机安装Ubuntu系统英文改中文的方法

    繁體 VMware虚拟机安装Ubuntu系统英文改中文的方法 我们已经在Windows 7下用VMware Workstation 10虚拟机安装 Ubunbu 14.04. (本文更新http:// ...

  7. 使用U盘在VMware虚拟机安装Ubuntu(Linux)系统

    使用U盘在VMware虚拟机安装Ubuntu(Linux)系统 用 U 盘做好 PE 启动,将系统镜像(gho 文件,非 iso 文件,iso 是制作 U 盘启动盘用 的)下载好放在 U 盘里,或者将 ...

  8. PX4-AutoPilot教程-0-使用VMware虚拟机安装Ubuntu系统并搭建PX4开发环境(ROS+mavros+jMAVSim+gazebo+QGC+QT)

    使用VMware虚拟机安装Ubuntu系统并搭建PX4开发环境 本教程使用VMware虚拟机安装Ubuntu18.04系统(官方推荐使用版本),搭建PX4固件版本为v1.9.2,飞控板为pixhawk ...

  9. 虚拟机安装Ubuntu时界面显示不全

    虚拟机安装Ubuntu时界面显示不全 如上图所示,在安装过程中由于分辨率的问题界面显示不完全,从而无法点击右下角的继续按钮,且Ubuntu没安装好无法调整分辨率,这时只需要使用快捷键: Alt+鼠标左 ...

最新文章

  1. eclipse(myeclipse) JavaWeb项目导入Idea2017
  2. flask_socketio 用法:
  3. 遗传算法与直接搜索工具箱学习笔记 -----从直接搜索算法开始
  4. Java设计模式之结构型:组合模式
  5. 【一】Drupal 入门之新建主题
  6. SpringBoot使用日志
  7. openglshader实现虚拟场景_opengl+shader
  8. Oracle并行操作——从串行到并行(转)
  9. Javascript加号的作用、数据类型、输入用户的输入第四课
  10. HTML学习之==JS
  11. vue+elementUI中Dialog实现组件弹框以及子父组件页面传值
  12. 设为首页 加入收藏 html,js设为首页和加入收藏代码(兼容所有浏览器)
  13. 日语学习之——五十音图及单词(3)
  14. 1分钟利用Excel快速制作随机点名器
  15. 美国名校的与机器视觉相关的研发中心网址
  16. 天刀手游服务器维护11月7号,天涯明月刀手游11月11日正式服维护公告
  17. 记录一次租房经历一(1)
  18. APP自动化--元素操作之九宫格解锁密码图案
  19. linux摄像头拍照程序,Android开发:Camera初探——控制摄像头拍照
  20. powerDesigner 从postgresql数据库中绘制ER图

热门文章

  1. 直击安全狗攻防武道大赛:完美防护与技术牛人的巅峰对决
  2. 电脑硬盘被格式化了还能恢复吗?
  3. 更新并关机怎么关闭计算机,win10系统如何取消“更新并关机”
  4. abaqus 三维基坑开挖渗流模型,含地下连续墙,内支撑,地下水渗流,流固耦合
  5. tomcat闪退原因及解决方法
  6. JAVA项目:收费视频播放系统,可以用于各类教学及视频在线展播
  7. 没经营过的公司怎么进行简易注销?
  8. 一个屌丝程序员的青春(一八六)
  9. 新站交换友情链接这些网站绝对不能交换
  10. Python学习笔记D8(字典与集合)