linux环境下，集群中Hadoop版本更换

1.下载新版本的hadoop

https://archive.apache.org/dist/hadoop/common/

这里有各种版本的hadoop

wget .....

tar -xzf .....

将新版本的Hadoop解压在/usr/local/hadoop目录下

2.修改配置

vi $HOME/.bashrc

export HADOOP_HOME

source $HOME/.bashrc

vi hadoop-env.sh

vi core-site.xml

vi hdfs-site.xml

vi mapred-site.xml

vi slaves

3.复制到其它节点

scp -r local_folder remote_username@remote_ip:remote_folder

vi $HOME/.bashrc

export HADOOP_HOME

source $HOME/.bashrc

4.启动服务

$ bin/hdfs namenode -format

$ sbin/start-dfs.sh

$ sbin/start-all.sh

JPS

看到和之前一样的结果就是更换成功了

linux环境下，集群中Hadoop版本更换相关推荐

linux环境下安装多个任意版本的python环境
linux环境下安装多个任意版本的python环境安装方法可以归结为 [下载 + 编译 + 配置环境变量] 下载Python Windows下载发送到linux上 step1. 下载linux版本的 ...
Linux 环境 zookeeper集群安装、配置、测试
架构说明: Dubbo 建议使用 Zookeeper 作为服务的注册中心.Zookeeper 集群中只要有过半的节点是正常的情况下,那么整个集群对外就是可用的.正是基于这个特性, 要将 ZK 集群的节 ...
elasticsearch 在linux环境的集群搭建
搭建集群节点前,首先了解下节点的三个角色: 主结点:master节点主要用于集群的管理及索引比如新增结点.分片分配.索引的新增和删除等. 数据结点:data 节点上保存了数据分片,它负责索引和搜索操 ...
linux c控制进程并发量,浅谈Linux环境下并发编程中C语言fork()函数的使用
由fork创建的新进程被称为子进程(child process).fork函数被调用一次,但返回两次.子进程的返回值是0,而父进程的返回值则是新进程的进程ID.将子进程ID返回给父进程的理由是:因为一 ...
linux命令删除raid,甲秀之音-Linux环境下删除硬盘中残留的raid信息
如果你的硬盘曾经组过raid,而现在只剩下一个硬盘了,在装linux的时候,会找不到硬盘(提示类似raid信息错误),这时,你需要先清空硬盘中残留的raid信息才能继续安装.方法如下: 先用linux ...
cdh集群linux命令,CDH集群中，服务器启动spark2-shell命令行注意事项
1.环境 cdh5.12.3 spark2 2.3.0 2.需要本地地洞spark2-shell用于环境测试错误一:Error: A JNI error has occurred, please c ...
Linux环境下安装配置Hadoop教程
Linux环境下安装配置Hadoop教程在Linux环境下,安装配置Hadoop教程. 准备工作 1.VMware虚拟机 2.Linux环境:CentOS 7 3.远程登陆:Xshell 6 &am ...
16-kubernetes集群中ceph集群使用
<文章感谢 xingdian > 文章目录 kubernetes集群中ceph集群使用一:块设备创建和使用 1.storageclass 配置 2.查看配置结果 3.kubernetes ...
linux集群中mpi的并行计算环境简单配置,linux集群中MPI的并行计算环境简单配置...
MPI有多种实现版本,如MPICH, CHIMP以及OPENMPI.其中MPICH是一种最重要的MPI实现,它可以从网上免费获得Linux和Windows版本.它的开发和MPI规范的制定是同步的,因此 ...
linux集群中mpi的并行计算环境简单配置,linux集群中MPI的并行计算环境简单配置(转）...
一.集群和Linux上的集群解决方案集群计算机是指用一组联网的PC或工作站来搭建成的,提供比单个PC(节点)计算性能高得多的计算机.说其是计算机,其实是针对所提供出来的服务而言的,或者说是逻辑上来说 ...

linux环境下，集群中Hadoop版本更换

linux环境下，集群中Hadoop版本更换相关推荐

最新文章

热门文章