【elasticsearch】elasticsearch 升级
elasticsearch通常可以使用滚动升级,在升级中不会中断服务。下面是支持滚动升级的情况:
- 小版本之间的升级
- 从5.6到6.8
- 从6.8到7.2.0
对于不支持滚动升级的情况,必须关闭群集,安装7.2.0,然后重新启动。
Elasticsearch可以读取在先前主要版本中创建的索引。如果您在5.x或之前创建了索引,则必须在升级到7.2.0之前重新索引或删除它们。如果存在不兼容的索引,Elasticsearch节点将无法启动。即使它们是由6.x群集创建的,5.x或更早索引的快照也无法还原到7.x群集。解决这一问题的办法是使用 reindex api 重建索引。
有两种方法可以重新索引旧索引:
- 在升级之前,在6.x群集上重新编制索引。
- 从远程创建一个新的7.2.0集群然后Reindex。
那么如何知道index的创建版本呢?
GET {index}?human=true"settings": {"index": {..."version": {"created_string": "6.3.0","created": "6030099"}}}
version.created 的参数转换
升级前准备工作
- 检查弃用日志以查看您是否使用任何已弃用的功能并相应地更新代码。默认情况下,日志级别设置为WARN时会记录弃用警告。
- 查看重大更改,并对要升级版本的代码和配置进行必要的更改。
- 如果使用自定义插件,请确保兼容版本可用。
- 在升级生产群集之前,在开发环境中测试升级。
- 备份数据!必须拥有数据快照才能回滚到早期版本。
完全集群重启升级
禁用分片分配
关闭节点时,分配进程会等待 index.unassigned.node_left.delayed_timeout(默认情况下为1分钟),然后再开始将该节点上的分片复制到群集中的其他节点,这可能涉及大量I / O. 由于节点很快将重新启动,因此可以通过在关闭节点之前禁用副本分配来避免这个问题:
PUT _cluster/settings
{"persistent": {"cluster.routing.allocation.enable": "primaries"}
}
停止索引并执行同步刷新
执行同步刷新可以加快碎片恢复速度。
POST _flush/synced
关闭所有节点
# systemd 运行的 elasticsearch
sudo systemctl stop elasticsearch.service
# service 运行的 elasticsearch
sudo -i service elasticsearch stop
# 守护进程运行的 elasticsearch
kill $(cat pid)
升级所有的节点
- 安装升级的elasticsearch
- config和data目录
- 需要修改ES_PATH_CONF参数来指定外部config目录和jvm.options文件的位置。如果未使用外部config目录,请将旧配置复制到新安装。
- 在config/elasticsearch.yml中设置path.data指向外部数据目录。如果未使用外部data目录,请将旧数据目录复制到新安装。
- 在config/elasticsearch.yml中设置path.logs指向要保存你的日志的位置。如果未指定此设置,则日志将存储在您将存档解压缩到的目录中。
- 使用elasticsearch-plugin脚本安装每个已安装的Elasticsearch插件的升级版本。升级节点时,必须升级所有插件。
- 启动所有升级的节点。如果从6.x群集升级,则必须通过设置cluster.initial_master_nodes来配置群集引导。只要有足够的符合主节点的节点相互发现,它们就会形成一个集群并选出一个主节点。
- 等待所有节点加入群集并恢复主分片。一旦节点恢复其本地分片,群集status将切换到yellow,表示已恢复所有主分片,但并未分配所有副本分片。这是预料之中的,因为您还没有重新启用分配。
重新启用分配
当所有节点都已加入群集并恢复其主分片时,请通过恢复cluster.routing.allocation.enable其默认值来重新启用分配:
PUT _cluster/settings
{"persistent": {"cluster.routing.allocation.enable": null}
}
滚动升级
滚动升级允许Elasticsearch集群一次升级一个节点,因此升级不会中断服务。不支持在升级期间在同一群集中运行多个版本的Elasticsearch。
禁用分片分配
关闭节点时,分配进程会等待 index.unassigned.node_left.delayed_timeout(默认情况下为1分钟),然后再开始将该节点上的分片复制到群集中的其他节点,这可能涉及大量I / O. 由于节点很快将重新启动,因此不需要此I / O. 您可以通过在关闭节点之前禁用副本分配来避免这个问题:
PUT _cluster/settings
{"persistent": {"cluster.routing.allocation.enable": "primaries"}
}
停止非必要索引并执行同步刷新
虽然可以在升级期间继续索引,但如果暂时停止非必要索引并执行同步刷新,则碎片恢复会快得多 。
POST _flush/synced
关闭单个节点并升级
# systemd 运行的 elasticsearch
sudo systemctl stop elasticsearch.service
# service 运行的 elasticsearch
sudo -i service elasticsearch stop
# 守护进程运行的 elasticsearch
kill $(cat pid)
- 安装升级的elasticsearch
- config和data目录
- 需要修改ES_PATH_CONF参数来指定外部config目录和jvm.options文件的位置。如果未使用外部config目录,请将旧配置复制到新安装。
- 在config/elasticsearch.yml中设置path.data指向外部数据目录。如果未使用外部data目录,请将旧数据目录复制到新安装。
- 在config/elasticsearch.yml中设置path.logs指向要保存你的日志的位置。如果未指定此设置,则日志将存储在您将存档解压缩到的目录中。
- 使用elasticsearch-plugin脚本安装每个已安装的Elasticsearch插件的升级版本。升级节点时,必须升级所有插件。
- 启动已升级的节点。可以通过日志或下面的命令来确认:
GET _cat/nodes
。
重新打开分片再平衡
PUT /_cluster/settings
{"transient": {"cluster.routing.allocation.enable": null}
}
在处理完一个节点后,需要开启这个设置。
等待节点恢复正常
等待集群分片平衡结束后,再升级下一个节点。这一过程可以使用_cat/health命令检查:
GET _cat/health
等到 status 这一列由 yellow 变成 green,Green 表示主分片和副本都分配完了。
滚动升级过程中,高版本上的主分片不会把副本分配到低版本的节点,因为高版本的数据格式老版本不认识。如果高版本的主分片没法分配副本,换句话说如果集群中只剩下了一个高版本节点,那么节点就保持未分配的状态,集群健康会保持 yellow。这种情况下,检查下有没有初始化或分片分配在执行。一旦另一个节点升级结束后,分片将会被分配,然后集群状态会恢复到 green 。
没有使用同步刷新的分片恢复时间会慢一点。分片的状态可以通过_cat/recovery请求监控:
GET _cat/recovery
如果你在这之前停止索引操作,那么在节点恢复完成之后重启也是安全的。当集群稳定并且节点恢复后,对剩下的节点重复上述过程。
在滚动升级期间,群集继续正常运行。但是,任何新功能都将被禁用或以向后兼容模式运行,直到群集中的所有节点都升级为止。升级完成且所有节点都运行新版本后,新功能即可运行。一旦发生这种情况,就无法返回以向后兼容模式运行。运行先前主要版本的节点将不被允许加入完全更新的群集。
如果在升级过程中网络出现故障,将所有剩余的旧节点与群集隔离,则必须使旧节点脱机并升级它们以使其能够加入群集。
如果在升级期间同时停止一半或更多符合主节点的节点,则群集将变为不可用,这意味着升级不再是滚动升级。如果发生这种情况,您应升级并重新启动所有已停止的符合主节点的节点,以允许再次形成群集,就像执行完全群集重新启动升级一样。可能还需要升级所有剩余的旧节点,然后才能在重新形成后加入群集。
- restart-upgrade
- rolling-upgrades
【elasticsearch】elasticsearch 升级相关推荐
- html显示elasticsearch,ElasticSearch查询:高亮显示(10)
什么是高亮显示 根据关键字搜索时,搜索出的内容中的关键字会显示不同的颜色,称之为高亮百度搜索关键字"elasticsearch" 京东商城搜索"iphone xs max ...
- ElasticSearch --- elasticsearch.yml配置详解
一.Cluster 代表一个集群,集群中有多个节点,其中有一个为主节点,这个主节点是可以通过选举产生的,主从节点是对于集群内部来说的. es的一个概念就是去中心化,字面上理解就是无中心节点,这是对于集 ...
- [Elasticsearch] Elasticsearch权威指南翻译目录
为了方便大家能够更加快速地找到自己需要参考的那部分,对已经翻译完成的部分根据权威指南的目录做了相应目录,希望能够有所帮助. 起步(Getting Started) 1. 你懂的,为了搜索 英文原文链接 ...
- Elasticsearch - Elasticsearch集群Cluster(三)
阅读本文前可先参考 https://blog.csdn.net/MinggeQingchun/article/details/126618387 一.单机 & 集群 1.单机 单台 Elast ...
- Elasticsearch - Elasticsearch 优化(十五)
一.硬件选择 Elasticsearch 的基础是 Lucene,所有的索引和文档数据是存储在本地的磁盘中 具体的路径可在 ES 的配置文件../config/elasticsearch.yml 中配 ...
- ElasticSearch~ElasticSearch启动成功,但是无法访问
一.报错截图 二.报错原因 配置文件配置错误 三.解决方案 vim config/elasticsearch.yml # 修改的内容 xpack.security.enabled: false# 修改 ...
- Elasticsearch升级1.5版本暴露jdk的bug
把测试环境的Elasticsearch升级到1.5.1版本,启动的时候报错: [root@node2 elasticsearch-1.5.1]# bin/service/elasticsearch s ...
- Elasticsearch Top 51 重中之重面试题及答案
点击上方蓝色"程序猿DD",选择"设为星标" 回复"资源"获取独家整理的学习资料! 作者 | 铭毅天下 来源 | https://mp.we ...
- Elasticsearch 7.0中引入的新集群协调子系统如何使用?
Elasticsearch之所以如此流行,其中一个原因是它可以从只有几个节点的小集群扩展到拥有数百个节点的大集群.它的核心是集群协调子系统.Elasticsearch 7提供了一个新的集群协调子系统, ...
- php elasticsearch ik,elasticsearch和analysis-ik的安装使用
全文搜索和中文分词主要介绍了两组全文搜索加中文分词方案: TNTSearch+jieba-php这套组合对于博客这类的小项目基本够用了: 但是如果最求性能追求更强大的功能的话: 那更优的选择就非 el ...
最新文章
- 【玩转数据】让您的PPT数据图表炫酷起来吧!
- CentOS内核优化提示:cannot stat /proc/sys/net/bridge/bridge-nf-call-ip6tables: 没有那个文件或目录...
- 编写安装配置DHCP服务脚本
- 怎样在vue单页面中引入其他组件
- arm java 性能怎么样,ARM v6上使用java的Number to String转换性能
- MySQL慢查询之慢SQL定位、日志分析与优化方案
- java生成缩略图,旋转,水印,截图
- 【前端基础】querySelector
- 计算机如何用vb文本加密,VB 实现中文文本的加密方法
- windows11 任务栏 wifi、音量、电源还有通知无法左击弹出内容框
- seo入门级教程!再看不懂就放弃做互联网吧!
- Ubuntu系统中各文件夹的作用
- 我是如何揭穿“娱乐圈”大佬
- 将用户需求转化为产品需求-质量屋
- 关于Java中的WeakReference类的笔记(弱引用)
- python把汉字变成拼音英文_利用python将表格中的汉字转化为拼音
- 如何实现受管控的安全文件传输MFT?
- Oracle 如何删除控制文件中rman备份到磁带的备份集信息(RMAN-06091)
- Photo Eraser图片擦除工具:轻松擦除路人甲!
- 终端类型 xterm linux,Linux的终端类型