自动化脚本腾讯云配置集群（三）批量修改host

在搭建hadoop或者spark集群之前，可能需要对集群中节点的别名重新命名，方便集群的管理。例如hosts文件中，将节点的IP对应成master和slave1等。如下

# hosts
127.0.0.1  localhost  localhost.localdomain
10.135.72.89    master
10.135.82.197   slave1
10.104.73.51    slave2

类似于上述对hosts文件的修改。首先我们在master节点上创建一个新的hosts文件，用来记录更新的hosts文件，方便之后自动化替换各节点的系统hosts文件。

步骤介绍：
1. master节点上，根据集群IP信息，创建hosts文件。
2. 将该hosts文件分发到从节点。
3. 在各个从节点上，替换系统hosts文件为更新后的hosts文件

host文件
以下是笔者根据自己的集群创建的hosts文件

# 笔者的hosts
127.0.0.1  localhost  localhost.localdomain
10.135.72.89    VM-72-89-ubuntu
10.135.82.197   VM-82-197-ubuntu
10.104.73.51    VM-73-51-ubuntu
10.104.100.159  VM-100-159-ubuntu
10.104.67.69    VM-67-69-ubuntu
10.135.79.153   VM-79-153-ubuntu
10.104.45.59    VM-45-59-ubuntu
10.135.33.4 VM-33-4-ubuntu
10.135.145.94   VM-145-94-ubuntu
10.104.173.150  VM-173-150-ubuntu
10.135.69.201   VM-69-201-ubuntu
10.135.112.157  VM-112-157-ubuntu
10.135.165.54   VM-165-54-ubuntu
10.104.254.242  VM-254-242-ubuntu
10.135.117.148  VM-117-148-ubuntu

expect_host.sh脚本

主要功能：通过命令登录到从节点机器，并切换至从节点的root用户，在使用root权限替换hosts文件。该脚本将作为功能模块在root_hosts.sh文件中执行。

#!/usr/bin/expect
# expect expect_hosts.sh 10.135.82.197 ubuntu ubuntu123456 #执行命令与参数样例set timeout 1
#set host "10.186.2.84"
#set username "ubuntu"
#set password "ubuntu123456"
set host [lindex $argv 0]
set username [lindex $argv 1]
set password [lindex $argv 2]spawn ssh $username@$host
expect {"Are you sure you want to continue connecting (yes/no)?" {send "yes\r"; exp_continue}"*password*" {send "$password\r"}
}expect "*$"
send "sudo passwd root\r"
expect "*password*" {send "123456\r"}
expect "*password*" {send "123456\r"}expect "*$"
send "su - root\r"
expect "Password:" {send "123456\r"}expect "*#"
send "cat /home/ubuntu/myscript/hosts > /etc/hosts\r"expect interactexpect EOF

root_hosts.sh脚本

主要功能：在master上直接运行该脚本，并能完成登录到各个从节点，并替换从节点系统的hosts文件。

#!/bin/bash

nodes=($(awk "{print \$1}" slavenodes))
for node in ${nodes[*]}
dossh ubuntu@$node "mkdir -p /home/ubuntu/myscript/"rsync -r --progress ~/myscript/hosts ubuntu@$node:/home/ubuntu/myscript/hostsexpect expect_hosts.sh $node ubuntu ubuntu123456
done

自动化脚本腾讯云配置集群（三）批量修改host相关推荐

腾讯云Elasticsearch集群多可用区容灾实现原理及最佳实践
导语 | 为了进一步满足腾讯云 Elasticsearch 客户对服务稳定性.集群高可用性等容灾能力的要求.腾讯云 ES 产品提供了跨可用区部署的解决方案,本文将为大家介绍实现原理与实践案例.文章作者 ...
阿里云注册集群+Prometheus 解决多云容器集群运维痛点
作者:左知容器集群可观测现状随着 Kubernetes(K8s)容器编排工具已经成为事实上行业通用技术底座,容器集群监控经历多种方案实践后,Prometheus 最终成为容器集群监控的事实标准. ...
Openstack云平台脚本部署之Ceph存储集群配置（十四）
目录一.简介二.部署脚本三.参考文档四.源码五.系列文章一.简介 Openstack的后端存储对接Ceph分布式统一存储,将Glance镜像.Nova虚拟机及快照.Cinder-Volum ...
灵活、高效的云原生集群管理经验：用 K8s 管理 K8s
作者 | 淮右.临石 **导读:**单 K8s 集群为用户提供了 Namespace 级别的隔离能力,理论上支持不超过 5K Node.15W Pod.多 K8s 集群则解决了单集群的资源隔离.故障隔 ...
自动化运维之k8s——Kubernetes集群部署、pod、service微服务、kubernetes网络通信
目录一.Kubernetes简介 1.Kubernetes简介 2.kubernetes设计架构 3.Kubernetes核心组件 4.kubernetes设计结构二.Kubernetes部署 1 ...
Nacos 快速开始、版本选择、预备环境准备、下载源码或者安装包、从 Github 上下载源码方式、下载编译后压缩包方式、配置nacos、配置集群、启动服务器、服务注册发现和配置管理、关闭服务器
1.Nacos 快速开始 1.1.版本选择 1.2.预备环境准备 1.3.下载源码或者安装包 1.3.1.从 Github 上下载源码方式 1.3.2.下载编译后压缩包方式 1.3.3.配置nacos ...
京东云Kubernetes集群+Traefik实战
Traefik支持丰富的annotations配置,可配置众多出色的特性,例如:自动熔断.负载均衡策略.黑名单.白名单.所以Traefik对于微服务来说简直就是一神器. 利用Traefik,并结合京东 ...
图文解说：Nginx+tomcat配置集群负载均衡
图文解说:Nginx+tomcat配置集群负载均衡博客分类: appserver nginxTomcatUbuntuLinux网络应用作者:niumd Blog:http://ari.iteye ...
基于京东云Kubernetes集群的 SpringBoot+MySQL 应用示例
Kubernetes 是目前最主流的开源容器编排技术,用于自动部署,扩展和管理容器化应用程序,其提供应用部署.维护. 扩展机制等一系列完整功能,极大提高了容器集群管理的便捷性. 京东早在2016年年底 ...

自动化脚本腾讯云配置集群（三）批量修改host

自动化脚本腾讯云配置集群（三）批量修改host相关推荐

最新文章

热门文章