Hadoop集群搭建之Hadoop组件安装
兵马未动,粮草先行
——汉语成语
系列文章目录
Hadoop集群搭建之Linux系统安装
Hadoop集群搭建之Hadoop组件安装
文章目录
- 系列文章目录
- 前言
- 一、IP和主机名称配置
- (一)Hadoop服务器
- (二)VMware
- (三)Window
- 二、配置远程连接
- 总结
前言
记录自己在家用电脑利用虚拟机搭建Hadoop集群的具体过程,分享我遇到的坑,如有错误,请各位小伙伴指正,持续更新中。
一、IP和主机名称配置
(一)Hadoop服务器
- 启动虚拟机,打开终端
- su root进入配置文件
- 修改配置
- 补充主机名称映射
(二)VMware
- 选择编辑中的虚拟网络编辑器
- 网段改为10,或者非1的整数,避免和家庭网络冲突。
(三)Window
- 网络接连中同样选择VMnet8
- 右键单击选择属性,Internet协议版本4,同样修改IP地址。
二、配置远程连接
- 下载并安装Xshell和Xftp,我这里用的是社区版。
Xshell官网
- 新建连接,填写IP和用户名密码,连接我们的虚拟机hadoop。
- 修改hosts文件
- 如下图Xftp通过点击跳转,Xftp主要用于后续将文件导入到虚拟机。
总结
兵马未动,粮草先行。指行军打仗之前,粮草等后勤补给先出发提前安顿好。比喻要做好一件事,必须先做好前期的准备工作。
Hadoop集群的搭建就属于准备工作,为后续的大数据开发,数据分析等工作奠定工具的基础。
Hadoop集群搭建之Hadoop组件安装相关推荐
- 【大数据实战】Docker中Hadoop集群搭建
目录 Docker中Hadoop集群搭建 环境 网络设置 安装docker 安装OpenSSH免密登录 Ansible安装 软件环境配置 配置hadoop运行所需配置文件 Hadoop 启动 问题 D ...
- Hadoop-2.8.0集群搭建、hadoop源码编译和安装、host配置、ssh免密登录、hadoop配置文件中的参数配置参数总结、hadoop集群测试,安装过程中的常见错误
25. 集群搭建 25.1 HADOOP集群搭建 25.1.1集群简介 HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起 HDFS集群: 负责海量数据 ...
- mac搭建hadoop集群二之hadoop安装
上一篇我们已经准备好三台虚拟机,计划一主两从搭建hadoop集群.没安装的可以参考一下. 虚拟机安装传送门:mac搭建hadoop集群之虚拟机安装 集群规划 主机 角色 node1 NN DN RM ...
- 大数据Hadoop集群搭建
大数据Hadoop集群搭建 一.环境 服务器配置: CPU型号:Intel® Xeon® CPU E5-2620 v4 @ 2.10GHz CPU核数:16 内存:64GB 操作系统 版本:CentO ...
- 在Linux中进行hadoop集群搭建
在公网IP为x.x.x.x.y.y.y.y和z.z.z.z并装有Centos8的服务器上进行hadoop集群搭建,都安装hadoop-3.1.3和server-jre-8u202-linux-x64. ...
- 环境搭建-Hadoop集群搭建
环境搭建-Hadoop集群搭建 写在前面,前面我们快速搭建好了centos的集群环境,接下来,我们就来开始hadoop的集群的搭建工作 实验环境 Hadoop版本:CDH 5.7.0 这里,我想说一下 ...
- 好程序员大数据笔记之:Hadoop集群搭建
好程序员大数据笔记之:Hadoop集群搭建在学习大数据的过程中,我们接触了很多关于Hadoop的理论和操作性的知识点,尤其在近期学习的Hadoop集群的搭建问题上,小细节,小难点拼频频出现,所以,今天 ...
- linux hadoop集群搭建,hadoop集群搭建
hadoop集群搭建步骤 实验介绍 下面将要在三台linux虚拟机上搭建hadoop集群. 知识点 linux基本命令 集群安装 完成实验需要以下相关知识 解压命令 tar -zxvf XX.tar. ...
- Hadoop 集群搭建
Hadoop 集群搭建 2016-09-24 杜亦舒 目标 在3台服务器上搭建 Hadoop2.7.3 集群,然后测试验证,要能够向 HDFS 上传文件,并成功运行 mapreduce 示例程序 搭建 ...
最新文章
- 运行JBoss 5.1.0 GA时出现Error installing to Instantiated:name=AttachmentStore state=Described错误的解决办法...
- 精心挑选12款优秀的 JavaScript 日历和时间选择插件
- linux命令:grep
- 行波和驻波动画演示gif_新技能get√ | 语文课上的笔顺动画可以这么做
- 进小公司要先看看老板的人品
- nyoj 1216 整理图书(dp)
- 欧奈尔4个经典形态_股票K线图基础知识:图解4大经典K线组合形态
- 扩展单元格 == 报表
- [译] Facebook杯2013年编程挑战赛——预选赛题目及答案
- XML PULL SAX到底有什么区别?
- thinkphp 5.0 模块设计
- eigen一维向量_Eigen中的矩阵及向量运算
- 信息安全技术 实验四 木马及远程控制技术
- 腾讯撕开中国NFT的“遮羞布”
- HTTP请求数据格式及响应数据格式
- 131个经典面试题目+答案
- 物联网技能大赛-Ubuntu-(4)
- ubuntu16.04解决耳机没有声音
- 我是深圳南山的集体户口,要将我老婆的户口随迁入深圳 没有房产,可以办深圳人才中心的集体户口吗
- larvel 路由未生效_laravel 路由修改不起作用解决方案