事中排查处理（并行）

变更排查，变更包括代码发布、配置参数变更、机器配置变更、业务配置变更、SQL提交等。如果Redis CPU 持续飙高，立即回滚变更。
流量排查，排查流量是否有变更包括接口流量，消息队列流量，定时任务流量。如果有流量突增，增加的流量入口进行限流，并通知流量发起方下线该部分功能。
通过redis监控找到执行耗时长的命令，根据命令排查提交命令入口，将该部分功能临时下线。
Redis 关闭 AOF持久化操作
Redis 禁用高耗时命令

原因排查

redis cpu 100% 有哪些原因可以导致。如下：
1.redis连接数过高

2.数据持久化导致的阻塞

3.主从存在频繁全量同步

4.value值过大

5.redis慢查询

事后（预防）

1. 使用redis连接池

2. 添加连接数告警

3. 根据不同的宕机数据丢失容忍性配置不同的持久化策略

4. 主从架构调整为级联集群

5. 添加大key请求监控

6. 禁用部分慢查询命令如：keys *

7. 添加慢查询监控

8. 核心非核心业务redis集群隔离部署，使用不同的集群

9. 核心业务redis集群出问题后支持降级和熔断

生产环境RedisCPU飙高怎么办相关推荐

生产环境CPU飙高问题解决，记一次完整解决过程
一.发现问题前段时间我们新上了一个新的应用,因为流量一直不大,集群QPS大概只有5左右,写接口的rt在30ms左右. 因为最近接入了新的业务,业务方给出的数据是日常QPS可以达到2000,大促峰值Q ...
生产环境：Nginx高可用方案
准备工作: 192.168.16.128 192.168.16.129 两条虚拟机.安装好Nginx 安装Nginx 更新yum 源文件: 安装Nginx: 操作命令: 什么是高可用? 高可用HA(H ...
Arthas排查生产环境CPU飚高问题
启动Arthas java -jar arthas-boot.jar 执行dashboard dashboard 线程 35 和 12042 不正常 CUP 占用 49% 定位代码行 thread 3 ...
生产环境遇到难题，你是如何解决的？
文章目录 1. 生产环境 cpu 飙高产生的原因? 2. 生产环境如何排查cpu 飙高问题? 3. 生产环境遇到了报错,你是如何定位解决的呢? 4. 调用接口如果服务器端一直没有响应怎么解决? 5. ...
java生产问题快速定位_生产环境如何快速跟踪、分析、定位问题-Java
我相信做技术的都会遇到过这样的问题,生产环境服务遇到宕机的情况下如何去分析问题?比如说JVM内存爆掉.CPU持续高位运行.线程被夯住或线程deadlocks,面对这样的问题,如何在生产环境第一时间跟踪 ...
java开发的微信公众号服务端生产环境中的两个大坑
摘要: 我们开发的公众号,由于将功能开发完毕后,未对服务进行压力测试,因此用到的组件中的参数值全是默认的,服务上线后一段时间运行得倒没什么问题,随着服务得访问量增加,一些多线程并发的问题就逐步暴露出来 ...
一次nacos 导致的 CPU 飙高问题
序今天下午突然出现测试环境 cpu飙高,干到了 60%,其他项目响应时间明显变长...有点吓人,不想背锅项目背景出问题的项目是需要连接各个不同nacos 和不同的 namespace 进 ...
Nacos 单机集群搭建及常用生产环境配置 | Spring Cloud 3
一.Nacos 概览 Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service的首字母简称,一个更易于构建云原生应用的动态服务发现.配置管理 ...
生产环境10分钟黄金时间快速排障：CPU不定时飙高怎么排查？
" 1分钟发现-5分钟响应-10分钟恢复,是定义故障处理的时效性目标.在阿里巴巴内部经过多年的实践,这也早已成为各个业务稳定性.基础设施稳定性以及大促保障的重要牵引指标.对于故障,最难的往往 ...

生产环境RedisCPU飙高怎么办

事中排查处理（并行）

原因排查

事后（预防）

生产环境RedisCPU飙高怎么办相关推荐

最新文章

热门文章