线上的mongodb是复制集模式的。为了便于监控mongodb的慢查询等状态,在3台机器上都部署了packetbeat,通过抓取27017端口的流量发送到ES集群。

但是第二天发现zabbix告警,显示某一台机器A(从节点)上的mongod进程宕了。日志显示是OOM导致的。

再一想到,我们每天的mongodb的备份脚本是通过远程主机连接到机器A的27017端口进行dump数据的,通过对比zabbix的网卡流量趋势图、备份脚本的执行时间、message日志中OOM的时间点,可以分析出就是因为mongodump时候产生的大量的数据包被packetbeat抓取到并缓存住,造成服务器的内存被吃光了。

解决方法:

关闭这个机器A(从节点)上面的packetbeat进程,或者配置计划任务以确保备份数据的时候,packetbeat进程不要开启。

当然,这里我们还可以用cgroup限制住packetbeat使用的内存大小,这样的话,最多导致packetbeat宕掉,不会影响到mongod进程的正常工作。

############################################

具体配置步骤如下:

/etc/init.d/cgconfig start

自动会在/cgroup/下生成一堆文件。

mkdir /cgroup/memory/packetbeat/

echo 1024M > /cgroup/memory/packetbeat/memory.limit_in_bytes     ## 限制物理内存总量不超过1024M

echo 1050M > /cgroup/memory/packetbeat/memory.memsw.limit_in_bytes    ## 限制虚拟内存总量不超过1024M

## 带 memsw 的表示虚拟内存,即物理内存加交换区。不带 memsw 的那组仅包括物理内存。其中, limit_in_bytes 是用来限制内存使用的,其他的则是统计报告。

cgexec -g memory:packetbeat /etc/init.d/packetbeat start  即可启动packetbeat

通过cgroup限制后,当packetbeat使用的内存达到限额,进程会被kill。

参考:

http://www.topjishu.com/5898.html

###############

补充:CentOS7上使用cgroup的方法:

yum install libcgroup-tools -y

systemctl start cgconfig

cgcreate -g  memory:/packetbeat

echo 2048M > /sys/fs/cgroup/memory/packetbeat/memory.limit_in_bytes

echo 2048M > /sys/fs/cgroup/memory/packetbeat/memory.memsw.limit_in_bytes

cgexec -g memory:packetbeat /etc/init.d/packetbeat start

转载于:https://blog.51cto.com/lee90/1961522

使用cgroup限制某个程序对内存的使用相关推荐

  1. 程序在内存中运行的奥秘

    简介 当丰富多彩的应用程序在计算机上运行,为你每天的工作和生活带来便利时,你是否知道它们是如何在计算机中工作呢?本文用形象的图表与生动的解释,揭示了程序在计算机中运行的奥秘. 内存管理是操作系统的核心 ...

  2. 如何优化cocos2d程序的内存使用和程序大小:第一部分

    译者: 在我完成第一个游戏项目的时候,我深切地意识到"使用cocos2d来制作游戏的开发者们,他们大多会被cocos2d的内存问题所困扰".而我刚开始接触cocos2d的时候,社区 ...

  3. Linux下的十个好用的命令工具:查看系统版本,显示目录的大小,查看硬盘HDD/SSD,硬盘测速,ssh时自动输入密码,查看程序的内存使用情况,查看I/O的速度,查看ssh密码错误日志,查找文件

    文章目录 1.查看系统版本 2.显示目录的大小 3.查看硬盘是HDD还是SSD 4.硬盘测速 5.在ssh的时候自动输入密码 6.查看程序的内存使用情况 7.查看I/O的速度 8.查看ssh密码错误日 ...

  4. iis多进程下的全局变量_Linux下c程序的内存映像

    前言   -----今天开始分享C语言里面的存储类型.作用域.生命周期.链接属性等知识点,我们写完一个程序,不只说知其,更要知其所以然.    概念简介: - 存储类 - (1)存储类就是存储类型,也 ...

  5. [转]预备知识—程序的内存分配

    因为经典,所以转发. 一.预备知识-程序的内存分配 一个由C/C++编译的程序占用的内存分为以下几个部分 栈区(stack)  -   由编译器自动分配释放,存放函数的参数值,局部变量的值等.其操作方 ...

  6. 一、预备知识―程序的内存分配

    2019独角兽企业重金招聘Python工程师标准>>> 一个由c/C++编译的程序占用的内存分为以下几个部分  1.栈区(stack)―   由编译器自动分配释放 ,存放函数的参数值 ...

  7. VS C/C++控制台程序添加内存泄漏自动检测功能

    基于MFC框架的应用程序由模板生成时,已经自动添加了内存泄漏自动检测功能,当你的程序有内存泄漏,在Debug调式模式下运行就会在vc的输出窗口里显示出来,容易发现并及时解决.但是我们在写一些测试程序时 ...

  8. 给.net程序打内存补丁-转

    标 题: [原创]给.net程序打内存补丁(1) 作 者: tankaiha 时 间: 2006-08-23,22:37:54 链 接: http://bbs.pediy.com/showthread ...

  9. C# Winform应用程序占用内存较大解决方法整理(转)

    C# Winform应用程序占用内存较大解决方法整理(转) 参考文章: (1)C# Winform应用程序占用内存较大解决方法整理(转) (2)https://www.cnblogs.com/xcsn ...

  10. android app增加内存大小,android – 增加分配给应用程序的内存

    我尝试显示相机拍摄的图像并将其显示在应用程序中.当我拍摄低分辨率图像(比如说大小为100kB)时,我没有切换到位图显示的问题,当我以高分辨率(1.5MB)拍摄时,应用程序崩溃,异常 Error jav ...

最新文章

  1. oracle 监听数据交互
  2. 洛谷 P1209 修理牛棚== Codevs 2079 修理牛棚
  3. 数据采集与网站统计实现全过程
  4. 挂机脚本_叠猫猫逛店铺挂机脚本,每天稳定50次
  5. 【转】Java内存与垃圾回收调优
  6. Boost:异步操作,涉及重新打包多个操作,但选择仅调用其中一个的测试程序
  7. pingfangsc字体_2020-iOS GUI-字体规范
  8. java rx.observable_Rxjava2 Observable的条件操作符详解及实例
  9. bootstrap table 分页_Java入门007~springboot+freemarker+bootstrap快速实现分页功能
  10. [Winform]只允许运行一个exe,如果已运行则将窗口置前
  11. linux 统计TCP 连接各状态总数
  12. 三星5G商用关键设备开发完成;施耐德布局物联网│IoT黑板报
  13. DM9601 USB网卡驱动
  14. 三维分子图的球面信息传递
  15. ajax json destoon,destoon数据如何生成json
  16. Android--高德地图,显示地图,并定位当前的位置
  17. oracle 企业管理器网页打不开 解决https://localhost:1158/em问题
  18. 删除yum.repos.d
  19. 100+实用功能合集,手机中的神器,黑科技中的战斗鸡!
  20. 智能养老手环能够防止老年人出现安全意外

热门文章

  1. Java设计模式应用——工厂模式
  2. (一)网络编程基础之套接字入门
  3. Android内存优化之——static使用篇
  4. 此页的状态信息无效,可能已损坏。”的解决办法
  5. 游戏及开发人员的认识
  6. 学习EXT第八天:EXT的布局(Layout)Part 1
  7. 【Android笔记】Android引用第三方依赖包library报错解决方法
  8. 我的if else代码纯净无暇,一个字也不能简化
  9. Sass--占位符 %placeholder
  10. 李洪强iOS开发之OC[011] - 有参方法的声明实现以及调用练习