mongodb最大连接数是20000。所以业界流传一段话,千万级以下的用mysql、千万级以上的用mongodb,亿级以上的用hadoop。下面这篇文章主要给大家介绍了关于MongoDB最大连接数设置失效的异常分析过程,需要的朋友可以参考下

背景介绍:

查询MongoDB配置参数,可以知道关于最大连接数的参数是maxConns。但是连接实例后,查看支持的最大连接数,还是默认的819。

说明:最大连接数是由maxConn (maxIncomingConnections)和操作系统单个进程能打开的最大文件描述符数总量的80%决定的,取两个之间的最小值。默认单个进程能打开的最大文件描述符数为1024,1024*80% = 819.2 取整数819。所以最大可以支持的并发连接数为819。

案例重现

以下为本次测试MongoDB案例配置的参数。

启动后查看最大连接数。

运行命令:db.serverStatus().connections

Current表示当前到实例上正在运行的连接数。

Available表示当前实例还可以支持的并发连接数。

也就是说此实例最大能支持的并发连接数为:Current+available=3+816=819.

所以设置的maxConns参数无效。所以设置的maxConns参数无效!所以设置的maxConns参数无效!所以设置的maxConns参数无效!

答案求索

此时查看查看网上相关资料,大部分集中在 Linux系统最大文件描述符数。查看我们系统配置,此时已经是65535了。不是系统最大文件描述符数限制的了。

转个弯,因为我们是为操作系统是 centos 7 ,所以我们的mongodb服务是透过systemctl来管理的。那如果是通过service 命令来管理此服务呢?

测试1 测试用service来管理mongodb 服务 对最大连接数的影响

(1) 在/etc/init.d目录下创建名为mongodbtest0903的服务;

(2) 服务的配置如下:

(3) 赋予执行权限,然后开启服务

(4) 此时查看连接数为2500(为maxConns参数值)

(5) 关闭 mongodb 服务

以上说明用service 来管理服务,最大连接数参数起作用了。

测试2 如果直接用Mongodb command打开呢?

(1) 直接开启

(2)此时查看连接数为2500(为maxConns参数值)

(3)关闭此服务

以上说明直接开启Mongodb服务,最大连接数参数起作用了。

通过service和 mongodb命令启动服务,最大连接数都是设置的参数,而通过systemctl来开启此服务就变成了默认的819.

探究

我们来具体分析下systemctl 开启的 mongodb 服务(此服务定义为mongodbtest0903)。

(1)查看此服务的所有配置细节的命令

部分细节如下

此时LimitNOFILE=4096

(2) 查看此服务的进程,以及此进程下的资源限制

进程的资源限制

终于看到了 资源限制是1024。

问题1:为什么经过systemctl 启动的mongodb服务变成了默认的819.

回答:因为systemctl 启动的服务进程其最大文件描述符数变成了1024. 1024*80% = 819.2 取整数819.

问题2:为什么系统设置的最大是65525 而 systemctl 变成了1024.

在Centos7系统中,使用Systemd替代了之前的SysV。/etc/security/limits.conf文件的配置作用域缩小了。/etc/security/limits.conf的配置,只适用于通过PAM认证登录用户的资源限制,它对systemd的service的资源限制不生效。

其实仔细查看/etc/security/limits.conf文件的注释,说明了对系统服务不生效。

解决方案

解决方案,知道了问题所在,针对此问题寻找解决方案相对容易了。

解决方案1:针对单个 systemctl 管理的服务。

在/lib/systemd/system中找到具体的服务,增加

命令。 修改后为:

重启服务,此时连接查看最大连接数为2500,到达设置的参数。

解决方案2 网上有种方案是对systemd全局修改。此方案本作者没有验证,转述如下,意思是修改/etc/systemd/system.conf 即可:

全局的配置,放在文件/etc/systemd/system.conf和/etc/systemd/user.conf。 同时,也会加载两个对应的目录中的所有.conf文件/etc/systemd/system.conf.d/*.conf和/etc/systemd/user.conf.d/*.conf

其中,system.conf是系统实例使用的,user.conf用户实例使用的。一般的sevice,使用system.conf中的配置即可。systemd.conf.d/*.conf中配置会覆盖system.conf。

DefaultLimitCORE=infinity

DefaultLimitNOFILE=100000

DefaultLimitNPROC=100000

注意:修改了system.conf后,需要重启系统才会生效。

因为服务器上systemctl会管理多种服务,为减少对其它服务的影响,建议在单个服务上修改,集采用第一种方案。

其他相关知识

(1)mysql 服务也会遇到类似问题;

(2)* nofiles - soft limit on the number of file descriptors a process may have;

(3)*soft limit与hard limit的不同:soft limit是真正生效的限制值,而hard limit仅仅是soft limit调整范围的一个上限。

连接数优化:

通过serverStatus查询连接数:

每个连接都是一个线程,需要一个Stack,Linux下缺省的Stack设置一般比较大:

至于MongoDB实际使用的Stack大小,可以用如下命令确认(单位:K):

如果Stack过大(比如:10240K)的话没有意义,简单对照命令结果中的Size和Rss:

所有连接消耗的内存加起来会相当惊人,推荐把Stack设置小一点,比如说1024:

注:从MongoDB1.8.3开始,MongoDB会在启动时自动设置Stack。

7 centos 查看程序文件数量_MongoDB最大连接数(centos7应用程序最大打开文件数)设置失效的异常分析过程与解决方法...相关推荐

  1. python程序文件的扩展名称是什么_python程序文件的扩展名称是什么_Python教程,python,扩展名...

    python绘制正方形螺旋线_Python教程 python绘制正方形螺旋线的方法:1.使用import turtle as t导入绘图库,并设置别名为t:2.使用t.goto(x,y)方法以某一点为 ...

  2. 微信小程序 调取云函数 信息推送失败response out of time limit or subscription is canceled hint的具体解决方法

    微信小程序 调云函数 信息推送失败,提示errcode":45015,"errmsg":"response out of time limit or subsc ...

  3. VS2017 启动调试出现 无法启动程序“http://localhost:15613” 操作在当前状态中是非法的。 同时附加进程也是错误的解决方法

    VS2017 启动调试出现 无法启动程序"http://localhost:15613" 操作在当前状态中是非法的. 同时附加进程也是错误的解决方法 参考文章: (1)VS2017 ...

  4. 7 centos 查看程序文件数量_解析CentOS 7中系统文件与目录管理

    LINUX Linux操作系统 解析CentOS 7中系统文件与目录管理 Linux目录结构 Linux目录结构是树形的目录结构 根目录 所有分区.目录.文件等的位置起点 整个树形目录结构中,使用独立 ...

  5. 7 centos 查看程序文件数量_CentOS之使用Systemd添加自定义系统服务

    文章引言 Systemd 就是为了解决Linux 的启动一直采用init进程问题而诞生的.它的设计目标是,为系统的启动和管理提供一套完整的解决方案. 根据 Linux 惯例,字母d是守护进程(daem ...

  6. 7 centos 查看程序文件数量_「动手打造家庭媒体网络平台」安装篇-centos搭建DLNA媒体服务...

    大家好,我是路程lucky,热爱开发.设计.学习.生活.爱捣鼓的web前后端工程师~ 本文的重点是在之前文章提到创建的centos基础上继续搭建DLNA媒体服务.由于centos的系统是从零开始初步安 ...

  7. 补丁程序正在运行_针对微软4月14日更新补丁会导致蓝屏问题的检测及解决方法...

    近期,我们接连收到用户求助,在使用电脑过程中会突然出现蓝屏问题,经火绒工程师分析发现,大部分用户出现蓝屏问题,是因为安装了微软于4月14日推送的补丁所致(详见下图).目前微软方面表示正在调查相关问题. ...

  8. yii不能没有提示验证错误信息_安装Mac系统时提示”应用程序副本不能验证 它在下载过程...”的解决方法...

    在安装旧版本macOS系统时,比如macOS Mojave 10.14.macOS Sierra.OS X El Capitan.OS X Yosemite.OS X Mavericks等系统,会出现 ...

  9. vue : 无法加载文件 C:\Users\lenovo\AppData\Roaming\npm\vue.ps1,因为在此系统上禁止运行脚本。解决方法

    vue : 无法加载文件 C:\Users\lenovo\AppData\Roaming\npm\vue.ps1,因为在此系统上禁止运行脚本. 在安装vue-cli工具时安装失败如图: 解决方法,以管 ...

  10. win10的c语言程序闪退,win10内置应用出现闪退怎么回事? win10打开应用总闪退的解决方法...

    Windows10操作系统新增加很多实用的功能,对大家操作电脑有很大帮助.Win10专业版系统自带有相机功能.地图功能.时钟功能,同时还有一个应用商店功能,有的小伙伴说打开内置应用时出现闪退,究竟是哪 ...

最新文章

  1. Sql2000命名中的’_’好象会引发问题
  2. SAP系统中在发布了webservice,获得了WSDN地址后,外部系统怎么传数据到SAP?
  3. lsnrctl status区分静态注册与动态注册
  4. Java 7:完整的invokedynamic示例
  5. Comsenz 核心产品 Discuz! X3.3 正式版【2017-07-01】 -论坛搭建
  6. 离线环境安装dotnet framework nuget包
  7. mac securecrt无法记住密码的解决方法
  8. Android使用本地广播
  9. 微型计算机任务名称,任务五微型计算机的硬件组成.ppt
  10. S5p4418平台AP6212 WIFI稳定性的解决过程
  11. 非常新能源铝电池项目的产业化展开的分析报告v1.1
  12. DiMP:Learning Discriminative Model Prediction for Tracking
  13. 1099:零起点学算法06——再来一题除法算术题
  14. PAT 甲级 1040 Longest Symmetric String
  15. 用Win10中自带的CHKDSK来扫描和修复硬盘
  16. Java编程思想第四版读书笔记——第九章 接口
  17. 【8大编程语言的适用领域】先别着急选语言学编程,先看它们能干嘛
  18. 企业中Linux下软件的管理(yum仓库的搭建以及软件的控制)
  19. QT小项目---2048小游戏
  20. Grub2的一些典型菜单写法

热门文章

  1. matlab符号运算实验,数学实验6--Matlab符号运算.pptx
  2. Flutter进阶第4篇: 实现简单的新闻系统渲染新闻详情数据以及用flutter_html解析html
  3. L1-029 是不是太胖了 (5 分)—团体程序设计天梯赛
  4. 定义工作,解读自我——IT帮2019年2月线下活动回顾
  5. bzoj 2152 聪聪可可
  6. 【学习笔记】深入理解Linux内核第三版 ——第二章 内存寻址
  7. 20145302张薇 《信息安全系统设计基础》第0周学习总结
  8. iOS CocoaPods自动管理第三方开源库
  9. 使用 JSONModel
  10. java设置全选_[Java教程]jQuery设置checkbox全选(区别jQuery版本)