2019独角兽企业重金招聘Python工程师标准>>>

mongodb可以通过profile来监控数据,进行优化。

查看当前是否开启profile功能用命令

db.getProfilingLevel()  返回level等级,值为0|1|2,分别代表意思:0代表关闭,1代表记录慢命令,2代表全部

开始profile功能为

db.setProfilingLevel(level);  #level等级,值同上

level为1的时候,慢命令默认值为100ms,更改为db.setProfilingLevel(level,slowms)如db.setProfilingLevel(1,50)这样就更改为50毫秒

通过db.system.profile.find() 查看当前的监控日志。

如:

> db.system.profile.find({millis:{$gt:500}})
{ "ts" : ISODate("2011-07-23T02:50:13.941Z"), "info" : "query order.order reslen:11022 nscanned:672230  \nquery: { status: 1.0 } nreturned:101 bytes:11006 640ms", "millis" : 640 }
{ "ts" : ISODate("2011-07-23T02:51:00.096Z"), "info" : "query order.order reslen:11146 nscanned:672302  \nquery: { status: 1.0, user.uid: { $gt: 1663199.0 } }  nreturned:101 bytes:11130 647ms", "millis" : 647 }

这里值的含义是

ts:命令执行时间

info:命令的内容

query:代表查询

order.order: 代表查询的库与集合

reslen:返回的结果集大小,byte数

nscanned:扫描记录数量

nquery:后面是查询条件

nreturned:返回记录数及用时

millis:所花时间

如果发现时间比较长,那么就需要作优化。

比如nscanned数很大,或者接近记录总数,那么可能没有用到索引查询。

reslen很大,有可能返回没必要的字段。

nreturned很大,那么有可能查询的时候没有加限制。

mongo可以通过db.serverStatus()查看mongod的运行状态

> db.serverStatus()
{"host" : "baobao-laptop",#主机名"version" : "1.8.2",#版本号"process" : "mongod",#进程名"uptime" : 15549,#运行时间"uptimeEstimate" : 15351,"localTime" : ISODate("2011-07-23T06:07:31.220Z"),当前时间"globalLock" : {"totalTime" : 15548525410,#总运行时间(ns)"lockTime" : 89206633,  #总的锁时间(ns)"ratio" : 0.005737305027178137,#锁比值"currentQueue" : {"total" : 0,#当前需要执行的队列"readers" : 0,#读队列"writers" : 0#写队列},"activeClients" : {"total" : 0,#当前客户端执行的链接数"readers" : 0,#读链接数"writers" : 0#写链接数}},"mem" : {#内存情况"bits" : 32,#32位系统"resident" : 337,#占有物理内存数"virtual" : 599,#占有虚拟内存"supported" : true,#是否支持扩展内存"mapped" : 512},"connections" : {"current" : 2,#当前链接数"available" : 817#可用链接数},"extra_info" : {"note" : "fields vary by platform","heap_usage_bytes" : 159008,#堆使用情况字节"page_faults" : 907 #页面故作},"indexCounters" : {"btree" : {"accesses" : 59963, #索引被访问数"hits" : 59963, #所以命中数"misses" : 0,#索引偏差数"resets" : 0,#复位数"missRatio" : 0#未命中率}},"backgroundFlushing" : { "flushes" : 259,  #刷新次数"total_ms" : 3395, #刷新总花费时长"average_ms" : 13.108108108108109, #平均时长"last_ms" : 1, #最后一次时长"last_finished" : ISODate("2011-07-23T06:07:22.725Z")#最后刷新时间},"cursors" : {"totalOpen" : 0,#打开游标数"clientCursors_size" : 0,#客户端游标大小"timedOut" : 16#超时时间},"network" : {"bytesIn" : 285676177,#输入数据(byte)"bytesOut" : 286564,#输出数据(byte)"numRequests" : 2012348#请求数},"opcounters" : {"insert" : 2010000, #插入操作数"query" : 51,#查询操作数"update" : 5,#更新操作数"delete" : 0,#删除操作数"getmore" : 0,#获取更多的操作数"command" : 148#其他命令操作数},"asserts" : {#各个断言的数量"regular" : 0,"warning" : 0,"msg" : 0,"user" : 2131,"rollovers" : 0},"writeBacksQueued" : false,"ok" : 1
}

db.stats()查看某一个库的原先状况

> db.stats()
{"db" : "order",#库名"collections" : 4,#集合数"objects" : 2011622,#记录数"avgObjSize" : 111.92214441878245,#每条记录的平均值"dataSize" : 225145048,#记录的总大小"storageSize" : 307323392,#预分配的存储空间"numExtents" : 21,#事件数"indexes" : 1,#索引数"indexSize" : 74187744,#所以大小"fileSize" : 1056702464,#文件大小"ok" : 1
}

查看集合记录用

> db.order.stats()
{"ns" : "order.order",#命名空间"count" : 2010000,#记录数"size" : 225039600,#大小"avgObjSize" : 111.96,"storageSize" : 307186944,"numExtents" : 18,"nindexes" : 1,"lastExtentSize" : 56089856,"paddingFactor" : 1,"flags" : 1,"totalIndexSize" : 74187744,"indexSizes" : {"_id_" : 74187744#索引为_id_的索引大小},"ok" : 1
}

mongostat命令查看运行中的实时统计,表示每秒实时执行的次数

mongodb还提供了一个机遇http的监控页面,可以访问http://ip:28017来查看,这个页面基本上是对上面的这些命令做了一下综合,所以这里不细述了。

二.mongodb的优化

根据上面这些监控手段,找到问题后,我们可以进行优化

上面找到了某一下慢的命令,现在我们可以通过执行计划跟踪一下,如

> db.order.find({ "status": 1.0, "user.uid": { $gt: 2663199.0 } }).explain()
{"cursor" : "BasicCursor",#游标类型"nscanned" : 2010000,#扫描数量"nscannedObjects" : 2010000,#扫描对象"n" : 337800,#返回数据"millis" : 2838,#耗时"nYields" : 0,"nChunkSkips" : 0,"isMultiKey" : false,"indexOnly" : false,"indexBounds" : {#使用索引(这里没有)}
}

对于这样的,我们可以创建索引

可以通过  db.collection.ensureIndex({"字段名":1}) 来创建索引,1为升序,-1为降序,在已经有多数据的情况下,可用后台来执行,语句db.collection.ensureIndex({"字段名":1} , {backgroud:true})

获取索引用db.collection.getIndexes() 查看

这里我们创建一个user.uid的索引 >db.order.ensureIndex({"user.uid":1})

创建后重新执行

db.order.find({ "status": 1.0, "user.uid": { $gt: 2663199.0 } }).explain()
{"cursor" : "BtreeCursor user.uid_1","nscanned" : 337800,"nscannedObjects" : 337800,"n" : 337800,"millis" : 1371,"nYields" : 0,"nChunkSkips" : 0,"isMultiKey" : false,"indexOnly" : false,"indexBounds" : {"user.uid" : [[2663199,1.7976931348623157e+308]]}
}

扫描数量减少,速度提高。mongodb的索引设计类似与关系数据库,按索引查找加快书读,但是多了会对写有压力,所以这里就不再叙述了。

2.其他优化可以用hint强制索引查找,返回只是需要的数据,对数据分页等。

转载于:https://my.oschina.net/baowenke/blog/97756

mongodb的监控与性能优化相关推荐

  1. MongoDB 教程五: MongoDB固定集合和性能优化 (索引Indexes, 优化器, 慢查询profile)

    mongodb索引详解(Indexes) 索引介绍 索引在mongodb中被支持,如果没有索引,mongodb必须扫描每一个文档集合选择匹配的查询记录.这样扫描集合效率并不高,因为它需要mongod进 ...

  2. MongoDB 教程五: MongoDB固定集合和性能优化

    MongoDB 固定集合(Capped Collections) MongoDB 固定集合(Capped Collections)是性能出色且有着固定大小的集合,对于大小固定,我们可以想象其就像一个环 ...

  3. iOS 性能优化总结

    原文链接:https://github.com/skyming/iOS-Performance-Optimization 关于 iOS 性能优化梳理: 基本工具.业务优化.内存优化.卡顿优化.布局优化 ...

  4. 【推荐】 RAC 性能优化全攻略与经典案例剖析

    ORACLE RAC凭借其卓越的容错能力和可扩展性以及对应用透明的切换能力引领了数据库高可用架构的潮流,但在实际的生产环境中,出现的性能问题非常多,对数据库的稳定性产生很大的影响,有一些甚至影响到了业 ...

  5. 实战java虚拟机 百度云_《实战JAVA虚拟机 JVM故障诊断与性能优化》pdf百度云下载...

    内容简介· · · · · · 随着越来越多的第三方语言(Groovy.Scala.JRuby等)在Java虚拟机上运行,Java也俨然成为了一个充满活力的生态圈.<实战Java虚拟机--JVM ...

  6. 前端重构实践(一) —— 性能优化

    前言: 最近一直在做性能优化和模块化改造的工作,并完成了一次前端重构.在这里总结出一些经验和得失来帮助大家思考.共两篇文章,第一篇讨论性能优化,第二篇讨论模块化框架.而之所以把这两个话题放到一起,是因 ...

  7. 史上最全Android性能优化方案解析

    Android中的性能优分为以下几个方面: 布局优化 网络优化 安装包优化 内存优化 卡顿优化 启动优化 -- 一.布局优化 布局优化的本质就是减少View的层级.常见的布局优化方案如下: 在Line ...

  8. MongoDB学习笔记(四)--索引 性能优化

    索引                                                                                             基础索引 ...

  9. 优化Linux内核参数/etc/sysctl.conf sysctl 《高性能Linux服务器构建实战:运维监控、性能调优与集群应用》...

    优化Linux内核参数/etc/sysctl.conf  sysctl  <高性能Linux服务器构建实战:运维监控.性能调优与集群应用> http://book.51cto.com/ar ...

最新文章

  1. Go 系列教程 —— 20. 并发入门
  2. JDBC驱动程序的四种方式
  3. kdj指标主要看哪个值_什么是KDJ?KDJ指标如何使用
  4. mugen4g补丁如何使用_CAD如何去除教育版戳记?
  5. 拼多多出手了,iPhone 12系列最高降价800元!
  6. MySQL重做日志(redo log)总结
  7. 【电脑讲解】硬件知识
  8. linux查看cpu与内存
  9. C# socket 局域网聊天程序的一点心得
  10. 如何低成本减少企业知识流失?天翎知识文档系统+群晖NAS值得一试
  11. 遗传算法(Genetic Algorithm)之deap学习笔记(一): 基础概念
  12. IPFS系列 - 默克有向无环图(Merkle DAG)
  13. PHP的strtotime()
  14. qtcreator-ros环境构建及编译ros工程
  15. Manjaro 自动化部署
  16. HTML罕见的冷门标签
  17. LeetCode179:最大数
  18. curl wget 不验证证书进行https请求
  19. [Flink on yarn]Please check if you store classloaders directly or indirectly in static fields.
  20. 智慧水务解决方案-最新全套文件

热门文章

  1. python3.6使用pygal模块不具交互性,图片不能显示数据
  2. 11.18 Apache用户认证 11.19/11.20 域名跳转 11.21 Apache访问日志
  3. 你真正了解什么是 Cloud Native 吗?
  4. 分布式内存数据库 Geode
  5. 录制声音并且播放录取的声音
  6. Oracle数据删除后恢复
  7. cisco路由器EIGRP配置实例
  8. Base64编码和解码
  9. 关于MySQL内核,一定要知道的!
  10. Linux下利用backtrace追踪函数调用堆栈以及定位段错误【转】