服务器cpu和磁盘规律毛刺问题排查

问题现象：

每天凌晨2点，CPU和磁盘读写，都有一波毛刺。

每天固定时间点，首先想到的是定时任务。

但是生产环境将近10台机器，每一台都是这样，可以排除是分布式调度job，而我们业务代码的任务都是xxl job，可以排除。

那么有可能是别的地方的调度任务，调用这个服务，请求分散到每一台。

查询2点15分左右的ELK日志量：

跟其他时间没有明显的异常。

日志量没有明显问题。

那么读写的是什么呢？

查看云后台，有两块硬盘：

点进去查看

磁盘IO异常高是60G的这块。

进去到60G硬盘挂载的位置

查看临时目录tmp ，发现有猫腻

最后发现是每天凌晨2点，归档业务日志到文件服务（oss、obs），运维加的，没有告知业务开发。

服务器cpu和磁盘规律毛刺问题排查相关推荐

linux cpu不足处理运维,Linux运维知识之Linux服务器CPU占用率较高问题排查思路
本文主要向大家介绍了Linux运维知识之Linux服务器CPU占用率较高问题排查思路,通过具体的内容向大家展现,希望对大家学习Linux运维知识有所帮助. 注意:本文相关配置及说明已在 CentOS ...
用python监控磁盘_使用python怎么对服务器cpu和磁盘空间进行监控
使用python怎么对服务器cpu和磁盘空间进行监控发布时间:2021-01-29 17:16:55 来源:亿速云阅读:82 作者:Leah 这期内容当中小编将会给大家带来有关使用python怎么 ...
云服务器CPU一直高占用，病毒排查，服务器被黑，服务器中挖矿病毒，挖矿机xmrig病毒排查及解决
收到阿里云发来的通知"[挖矿处置通知]请尽快整改云服务挖矿活动","经检测您的阿里云服务器上存在疑似挖矿活动--";盖帽的话不说了,直接上排查思路及解决方法: ...
一次简单的服务器 cpu 占用率高的快速排查实战
前两天,朋友遇到一个线上 cpu 占用率很高的问题,我们俩一起快速定位并解决了这个问题.在征求朋友同意后,特发此文分享整个过程.本文以对话的形式展开,加上我的内心独白.文中对话与实际对话略有出入. 友 ...
服务器CPU占用率高，如何排查？
1.定位进程登录服务器,执行top命令,查看CPU占用情况: $top 2.定位线程如果进程23456占用率高: $top -Hp23456 进行定位线程 3.定位代码通过top命令,我们目前已 ...
0基础搭建Prometheus+Grafana监控服务器CPU、磁盘、内存等信息
这里写自定义目录标题 0基础搭建Prometheus+Grafana监控服务器CPU.磁盘.内存等信息 1.实验环境准备 2.基础环境配置 3.部署prometheus 4.部署Grafana可视化图 ...
一次线上服务器cpu使用率超过1250%的排查与优化
项目背景: 将35家海外酒店的房型数据通过40个定时任务同步到本地mongodb,这里用了5台服务器来部署项目,mongodb采用分片集群部署.定时任务采用lts,一个小时同步一次所有数据.项目中用多 ...
JAVA 线上故障排查套路，从 CPU、磁盘、内存、网络到GC 一条龙！
点击上方蓝色"方志朋",选择"设为星标" 回复"666"获取独家整理的学习资料! 线上故障主要会包括cpu.磁盘.内存以及网络问题,而大多数 ...
JAVA 线上故障排查完整套路，从 CPU、磁盘、内存、网络、GC 一条龙！
点击上方"方志朋",选择"设为星标" 回复"666"获取新整理的面试文章作者:fredal https://fredal.xin/java ...

服务器cpu和磁盘规律毛刺问题排查

服务器cpu和磁盘规律毛刺问题排查相关推荐

最新文章

热门文章