（注意权限问题）

常见问题解决

ubantu16 手动设置ip后网络重启用：sudo service network-manager restart，不是sudo service network restart

2、SecureCRT安装：https://my.oschina.net/u/3477605/blog/1814586（win10上没有安装成功，不过在window server 2012 服务器上安装成功）

3、Linux vi编辑器常见命令的使：

http://c.biancheng.net/cpp/html/2735.html

4、能ping通，进行ssh连接时出现：ssh: connect to host xxx port 22: Connection refused

先查看一下ssh的状态：sudo service ssh status,

检查一下这个模块有没有装，特别说明（例如：用A电脑连接B电脑，要检查俩台电脑上的ssh有没有都安装，只检查A是没有用的，我一开始是检查A电脑的，A电脑是装了的，然后我就迷茫了，能哭死）

我的是因为ssh软件没有安装：运行sudo get-apt install ssh，如果报错如下

更新下apt-get，（sudo apt-get update)。

5、免密钥登陆

https://blog.csdn.net/wcx1293296315/article/details/82950311

自己和自己ssh时，需要将自己的 id_rsa.pub复制到authorized文件中

6、java jdk安装

文档虚拟机联网不方便，就直接windows上上下载好，在secureCRT中，按快捷键（alt+p），调出sftp

用put c：/XXX把C目录下的文件复制到对应的虚拟机

然后解压（tar -zxvf xxx），如果向移动到别的目录用（mv xxx ../aaa/bbb/）

在bin目录下运行（./java -version）检查是否在当前目录下成功

b、配置java全局环境变量

打开配置文件（sudo vi /etc/profile）

在文件后面（shift+g）添加

JAVA_HOME=/home/app/XXX (我把软件都放到了app文件夹下)

export PATH =$PATH:$JAVA_HOME/bin

配置完后并不会立即生效

执行（source /etc/profile）

7、hadoop安装（要下载binary版本的，别下载source版本的，要不然你会找不到需要配置的文件，说多了都是泪）

sudo tar -zxf ~/下载/hadoop-2.6.0.tar.gz -C /usr/local # 解压到/usr/local中
cd /usr/local/
sudo mv ./hadoop-2.6.0/ ./hadoop # 将文件夹名改为hadoop
sudo chown -R hadoop ./hadoop # 修改文件权限
配置jdk和hadoop的环境变量：（vi etc/profile）在最后添加如下代码：

JAVA_HOME=/usr/jdk-10.0.2

HADOOP_HOME=/usr/local/hadoop

export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

然后运行source /etc/profile生效

根据官网：http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html#Pseudo-Distributed_Operation

配置环境

8、linux 常用命令

tar -zxvf xxx

rm -rf xxx 删除多级文件夹及内容

mv xxx ../aaa/nnn/ 移动xxx到nnn文件夹下

安装hadoop伪分布式集群心得相关推荐

Hadoop伪分布式集群的安装部署
Hadoop伪分布式集群的安装部署Hadoop伪分布式集群的安装部署首先可以为Linux虚拟机搭建起来的最初状态做一个快照,方便后期搭建分布式集群时多台Linux虚拟机的准备. 一.如何为虚拟机做快 ...
HADOOP 伪分布式集群搭建
一 linux 环境的搭建由于笔者这里使用的是vmware 虚拟机采用centos7 linux 操作系统进行搭建,所以一下示例均以centos7进行示例 1. 搭建vmware 虚拟机 (1) ...
Linux 部署Hadoop伪分布式集群教程
首先:我们需要下载一些关于Hadoop伪分布式集群需要的工具与tar包链接: https://pan.baidu.com/s/1oUw1jDCxfghWsnaWauSHKg 提取码:6s5a 接下来 ...
Hadoop伪分布式集群的搭建
一.准备虚拟机 1.从网上将VMware下载下来 https://www.vmware.com/content/dam/digitalmarketing/vmware/en/images/galler ...
ZooKeeper伪分布式集群安装及使用
为什么80%的码农都做不了架构师?>>> ZooKeeper伪分布式集群安装及使用让Hadoop跑在云端系列文章,介绍了如何整合虚拟化和Hadoop,让Hadoop集群跑在V ...
Hadoop单机/伪分布式集群搭建（新手向）
此文已由作者朱笑笑授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. 本文主要参照官网的安装步骤实现了Hadoop伪分布式集群的搭建,希望能够为初识Hadoop的小伙伴带来借鉴意 ...
手把手教你搭建Hadoop生态系统伪分布式集群
Hello,我是 Alex 007,一个热爱计算机编程和硬件设计的小白,为啥是007呢?因为叫 Alex 的人太多了,再加上每天007的生活,Alex 007就诞生了. 手把手教你搭建Hadoop生态 ...
hadoop搭建伪分布式集群（centos7+hadoop-3.1.1）
原文地址:https://www.cnblogs.com/zhengna/p/9316424.html Hadoop三种安装模式搭建伪分布式集群准备条件第一部分安装前部署 1.查看虚拟机版本 2 ...
ZooKeeper伪分布式集群安装
为什么80%的码农都做不了架构师?>>> 获取ZooKeeper安装包下载地址:http://apache.dataguru.cn/zookeeper 选择一个稳定版本进行下 ...

安装hadoop伪分布式集群心得

1、hadoop安装：

https://www.cnblogs.com/news1997/p/9522717.html

https://blog.csdn.net/y12345678904/article/details/80743333

（注意权限问题）

常见问题解决

2、SecureCRT安装：https://my.oschina.net/u/3477605/blog/1814586（win10上没有安装成功，不过在window server 2012 服务器上安装成功）

3、Linux vi编辑器常见命令的使：

安装hadoop伪分布式集群心得相关推荐

最新文章

热门文章