20190228 搭建Hadoop基础环境
- 下载VMware 12 版本以上
- 下载CentOS 7以上版本
- 安装虚拟机,安装系统时,注意设置root 账号和密码
- 虚拟机配置网络,命令ip addr 查看IP 地址,(配置网络网上有很多办法,百度即可)
- 保证虚拟机和主机可以相互ping IP 后,端口22可访问
- 安装WinSCP,进行一些工具包的上传下载,在网络不能拉取的情况下
如图:
- linux 系统中要其中共享文件夹的部分比较麻烦,试了很多次虽然虚拟机配置了,但在客户机不能访问/mnt/fgfs文件
- 安装也没能使用,文件拖拽
是通过网上提供的ISO 镜像文件进行的安装,不过没能使用
- 安装jdk
JDK安装好后,配置环境变量,
格式化hdfs namenode -format
- 进程号
运行案例PI
遇到异常: 配置hostname ,主机名称要和配置文件一致
这个问题是配置文件中没有修改为主机名称host160
此问题是配置文件
需要增加
最后成功的情况。
转载于:https://www.cnblogs.com/Soar-Pang/p/10451835.html
20190228 搭建Hadoop基础环境相关推荐
- Hadoop基础环境搭建完整版
Hadoop基础环境搭建(转载尚硅谷) 说明 个人学习记录 基于虚拟机搭建,需要提前准备虚拟机环境 搭建版本:hadoop-3.1.3 搭建HDFS和yarn 提前准备Hadoop安装包:hadoop ...
- 在ubuntu下使用Eclipse搭建Hadoop开发环境
一.安装准备 1.JDK版本:jdk1.7.0(jdk-7-linux-i586.tar.gz) 2.hadoop版本:hadoop-1.1.1(hadoop-1.1.1.tar.gz) 3.ecli ...
- hadoop启动_Mac OS X 上搭建 Hadoop 开发环境指南
Hadoop 的配置有些麻烦,目前没有一键配置的功能,虽然当时我在安装过程中也参考了有关教程,但还是遇到了很多坑,一些老版本的安装过程已不适用于 hadoop2.x,下面就介绍一下具体步骤. 安装 J ...
- java 工程新建ivy文件_Hadoop学习之路(八)在eclispe上搭建Hadoop开发环境
一.添加插件 将hadoop-eclipse-plugin-2.7.5.jar放入eclipse的plugins文件夹中 二.在Windows上安装Hadoop2.7.5 版本最好与Linux集群中的 ...
- Mac OS X 上搭建 Hadoop 开发环境指南
Hadoop 的配置有些麻烦,目前没有一键配置的功能,虽然当时我在安装过程中也参考了有关教程,但还是遇到了很多坑,一些老版本的安装过程已不适用于 hadoop2.x,下面就介绍一下具体步骤. 安装 J ...
- 干货丨零基础学习大数据,搭建Hadoop处理环境
由于Hadoop需要运行在Linux环境中,而且是分布式的,因此个人学习只能装虚拟机,本文都以VMware Workstation为准,安装CentOS7,具体的安装此处不作过多介绍,只作需要用到的知 ...
- hadoop 基础环境搭建(一)
1,Hadoop 主节点搭建安装 主节点 教程所有的环境都在 /app 目录下, 需要自己创建 百度云下载 链接:https://pan.baidu.com/s/1zjxkeMzRroLvectx0W ...
- Eclipse下搭建Hadoop开发环境,并运行第一个实例
有同学无法正常运行程序,这里将Eclipse下Hadoop环境配置进行一下说明: 1.新建Map/Reduce工程 2.设置Hadoop Locaiton,第一次使用的话,点击大象,新建配置. 3.设 ...
- 搭建hadoop开发环境--基于xp+cygwin
2019独角兽企业重金招聘Python工程师标准>>> 1.安装cygwin 参考博文:http://hi.baidu.com/%BD%AB%D6%AE%B7%E7_%BE%B2%D ...
最新文章
- golang重复声明变量
- 用定时中断来接收红外遥控信号
- 代码生成器1.0正式发布
- Mysql 5.5 编译参数
- gis数据与cad数据转换之间的关系
- java 在线参考手册
- ibm x240使用 server guide 9.41 安装server 2003 32bit的一些注意事项
- 天猫精灵使用体验之二——家用电器的智能化改造(借助天猫精灵实现家用电器的语音控制)
- R | Rstudio安装 |Rstudio空白及显示无法访问此网站
- SpiderMonkey 入门
- 前度字符串转数组_java中的hashcode 前度刘郎
- 做产品路线图规划用什么工具?
- Hopcroft-Carp(有点难)
- 【论文阅读】SCRDet++
- 隐私计算:数据脱敏、匿名化、假名化、差分隐私和同态加密
- 计算机组成原理第三次实验(静态随机存储器实验)
- C++多态到底是什么?
- 2019ICPC亚洲区域赛南京网络赛
- Prompt Learning-使用模板激发语言模型潜能
- python_爬虫基础学习
热门文章
- 如何编写一个d.ts文件
- IP头,TCP头,UDP头,MAC帧头定义(转)
- Android smartimageview网络图片查看器
- PHP Warning: date(): It is not safe to rely on the system’s timezone settings
- 吉隆坡强制所有餐馆明年必须设有无线上网服务
- LeetCode 892. 三维形体的表面积
- C++数据结构与算法(九) 树,优先级队列,最大堆的实现
- python字符串的10个常用方法总结
- linux vim修改字符串,Linux系统vi(vim)编辑器命令说明
- 图神经网络可解释性Slide:GNNExplainer: Generating Explanations for Graph Neural Networks