一桩VIM引发的血案
vim国之利器,使用的多了就越来越顺手了。
for循环用多了,也是那么的顺手,但是总是有风险的。
1 概述
在使用vim的时候,如果打开的小文件,没啥问题,如果打开的超大类型的文件,那么就会引发巨大的风险,轻则内存使用爆炸,重则引发操作系统oom。
在使用for循环的时候,循环的少,cpu的使用率不高,循环的多,那么会引起cpu飙高,轻则引发cpu load告警,重则应用的延迟增高。
查看oom的使用日志,请使用dmesg:
2 使用vim
场景中使用vi/vim打开一个文件,大小约900M,那么可以查看到如下现象:
在一个终端打开vim打开文件,另外一个终端查看messages文件:
当vim不断的加载内容到内存中时,发现内存不足,从而触发了操作系统的oom,从而杀掉了其他的进程。。。这是误杀
dashboard说,和我有什么关系,我就不过使用的内存多了点,评分高了点,比别人优秀了点,为什么要杀我。。。木秀于林风必摧之。。。辣手摧花
当使用vim进行打开大文件的时候,也会出现io告警,如下:
上图表示使用iostat -xd 3,-x表示输出扩展信息,-d表示输出所有的设备,3表示没3秒输出一次结果,也就可以看到磁盘的util飙升,会引发io告警。
在io进行告警的时候,一般是有大量的文件写入写出的结果。
3 使用python
在使用python的时候,有的时候需要读取文件,所以呢,会有各种各样的写法,经常会有个面试的题目,使用什么样的方法读取大文件。
使用read方法,会把文件的所有内容都加载进内存,最后发现内存不够,直接被杀了。。。
java的oom只是玩玩,而操作系统oom killer才是真正的毫无感情的杀手,只要触碰到了内存的底线,毫不犹豫的杀。。。
4 如何改进
被人误杀,还是可以补救的:
a 重量级的系统应该都有保活,也就是说,即使被人杀了,也能自动拉起,毕竟是重要的系统,这个时候就用到了supervisord程序;
b 运维规范:对于大文件,禁止使用vim/vi全部加载进内存的命令,应该使用more/less/tail/head/grep等命令,毕竟只有部分内存。
批量操作总是可怕的,量变到了一定程度也就变成了质变,从而会引发一系列的问题,在你平时看不到啥问题,但是一旦出现问题,那就麻烦了,当然。。。出现问题也是好的,要不然都不知道这种场景的存在。
为什么要少使用for循环,有个场景是对于docker的本地镜像太多,使用for循环来删除,从而导致出现告警:docker命令使用的时候hang住,docker进行健康检查hang住(使用的是docker exec id checkhealthy检查),在删除的时候,删除的时间越来越长,cpu load飙升,其实也就是io争抢,导致了所有cpu在等待不可中断睡眠。。。我睡了,谁也叫不醒我。。。
行车千万条,安全第一条。
很多人问我,做了之后感觉效果如何?是否存在效果,还是说是否有效果,其实我也不知道。。。别人问了,那说明我做错了,要么就是我考虑不清楚,要么就是我描述不清楚。。。
那么问题来了,做了那么多,解决了什么问题?达到了什么效果?起了什么作用?有什么价值?
还是说只是预防了一种极端情况下的错误。。。能力越大,破坏性越强。。。懂的越多,死的也快。。。反正我什么都不知道。
一桩VIM引发的血案相关推荐
- 波涛汹涌的黄金甲,一碗中药引发的血案!
严重声明:网路转载 主要情节: 父王(周润发)说母后(巩利)身体虚寒,需要每天定时服用亲自配置的中药,已服用了几十年.而父王早就知道了母后和太子元祥(刘烨)之间的苟且之事,远征回宫后在其中药中加入一味 ...
- mysql backlog_一次优化引发的血案
前些天一个Nginx+PHP项目上线后遭遇了性能问题,于是打算练练手,因为代码并不是我亲自写的,所以决定从系统层面入手看看能否做一些粗线条的优化. 首先,我发现服务的Backlog设置过小,可以通过s ...
- 第三方账号登陆的过程及由此引发的血案
72agency · 2014/03/19 10:40 0x00 前言 第三方账号登陆也就是当你没有A网站的注册账号时,你可以使用该与A网站合作的第三方账号登陆A,在大多数情况下你会立即拥有与你第三方 ...
- 一个普通ERROR 1135 (HY000)错误引发的血案:
一个普通ERROR 1135 (HY000)错误引发的血案: 今天接到测试人员反应,测试环境前端应用程序无连接mysql数据库,登录mysql服务器,查看错误日志,发现有如下报错: 点击(此处)折叠或 ...
- 一次 Druid 连接池泄露引发的血案!
最近某个应用程序老是卡,需要重启才能解决问题,导致被各种投诉,排查问题是 Druid 连接池泄露引发的血案.. 异常日志如下: ERROR - com.alibaba.druid.pool.GetCo ...
- 线上 CPU100% 异常案例:一个正则表达式引发的血案
前几天线上一个项目监控信息突然报告异常,上到机器上后查看相关资源的使用情况,发现 CPU 利用率将近 100%.通过 Java 自带的线程 Dump 工具,我们导出了出问题的堆栈信息. 我们可以看到所 ...
- 一场由过滤器Filter引发的血案
一场由过滤器Filter引发的血案 事件起因 本来应该是下图的登录界面 变成了这样 What's the fuck????? 抓狂 原因 解决方法: 在过滤器中给资源文件开个绿色通道
- 一个由正则表达式引发的血案
阿里妹导读:周末快到了,今天为大家送上一篇很有意思的小文章,具有提神醒脑之功效.作者是来自阿里巴巴LAZADA产品技术部的申徒童鞋. 血案由来 近期我在为Lazada卖家中心做一个自助注册的项目,其中 ...
- silverlight Image Source URI : 一个反斜杠引发的血案
silverlight Image Source URI : 一个反斜杠引发的血案 Silverlight2 现在支持的Image格式有jpg和png,部分png编码也不支持,同时有些png在xaml ...
最新文章
- Netty详解(四):Netty 整体架构
- 【NOIP2011 Day 2】观光公交
- thttpd源码解析 定时器模块
- 多线程调用同一个对象的方法_这一次,让我们完全掌握Java多线程(2/10)
- 用java语言编写石头剪刀布获胜法_石头剪刀布Java实现
- java内功 ---- jvm虚拟机原理总结,侧重于虚拟机类加载执行系统
- 小程序版聊天室|聊天小程序|仿微信聊天界面小程序
- VSCode安装插件,使用本地下载vsix文件
- 关于flash跨域问题
- 系统文件损坏无法正常启动--记一次荡气回肠的自己挖坑自己跳然后爬出来的开心事...
- 图的二种遍历-广度优先遍历和深度优先遍历
- struts2类型转换和验证
- BeautifulSoup 与 Xpath
- 服务器虚拟化和网络虚拟化关系,数据中心网络如何应对服务器虚拟化?
- FGMap学习之--天气预报
- 《棒球大联盟2nd》:致敬青春·棒球1号位
- CRM软件哪个好?国内外6大顶级CRM软件盘点
- 【云计算与虚拟化】第二章 实验一 VMware Workstation的使用
- Spark源码之-CDH6下Spark2.4写Hive分区表异常
- SSM实现的酒店管理系统
热门文章
- 让ambarella s2l 支持32M SPI Flash(W25Q256)
- Censored! POJ - 1625
- 利用js脚本自动删除微博
- 一种提升多分类准确性的Trick
- 2020版熊猫金币解读及购买方式
- 服务器开机必须要按f1才能进系统,为什么开机要按f1才能进系统
- Unity 的 Scroll View组件
- Elasticsearch 6.4 ingest-attachment对office文件IK分词器全文检索(1) HttpAPI使用
- 【JavaScript】DOM 操作元素样式和元素类名
- C# 超市满减打折优惠