MongoDB运行状态、性能监控，分析

转自http://tech.lezi.com/archives/290

MongoDB运行状态、性能监控，分析

Posted by neilxp on 十月 26, 2011Leave a comment (2)Go to comments

这篇文章的目的是让你知道怎么了解你正在运行的Mongdb是否健康。

mongostat详解

mongostat是mongdb自带的状态检测工具，在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态，并输出。如果你发现数据库突然变慢或者有其他问题的话，你第一手的操作就考虑采用mongostat来查看mongo的状态。

它的输出有以下几列：

  • inserts/s 每秒插入次数
  • query/s 每秒查询次数
  • update/s 每秒更新次数
  • delete/s 每秒删除次数
  • getmore/s 每秒执行getmore次数
  • command/s 每秒的命令数，比以上插入、查找、更新、删除的综合还多，还统计了别的命令
  • flushs/s 每秒执行fsync将数据写入硬盘的次数。
  • mapped/s 所有的被mmap的数据量，单位是MB，
  • vsize 虚拟内存使用量，单位MB
  • res 物理内存使用量，单位MB
  • faults/s 每秒访问失败数（只有Linux有），数据被交换出物理内存，放到swap。不要超过100，否则就是机器内存太小，造成频繁swap写入。此时要升级内存或者扩展
  • locked % 被锁的时间百分比，尽量控制在50%以下吧
  • idx miss % 索引不命中所占百分比。如果太高的话就要考虑索引是不是少了
  • q t|r|w 当Mongodb接收到太多的命令而数据库被锁住无法执行完成，它会将命令加入队列。这一栏显示了总共、读、写3个队列的长度，都为0的话表示mongo毫无压力。高并发时，一般队列值会升高。
  • conn 当前连接数
  • time 时间戳

使用profiler

类似于MySQL的slow log, MongoDB可以监控所有慢的以及不慢的查询。

Profiler默认是关闭的，你可以选择全部开启，或者有慢查询的时候开启。

1 > use test
2 switched to db test
3 > db.setProfilingLevel(2);
4 {"was" : 0 , "slowms" : 100, "ok" : 1} // "was" is the old setting
5 > db.getProfilingLevel()
6 2

查看Profile日志

1 > db.system.profile.find().sort({$natural:-1})
2 {"ts" : "Thu Jan 29 2009 15:19:32 GMT-0500 (EST)" , "info" :
3 "query test.$cmd ntoreturn:1 reslen:66 nscanned:0 query: { profile: 2 } nreturned:1 bytes:50" ,
4 "millis" : 0} ...

3个字段的意义

  • ts：时间戳
  • info：具体的操作
  • millis：操作所花时间，毫秒

不多说，此处有官方文档。注意，造成满查询可能是索引的问题，也可能是数据不在内存造成因此磁盘读入造成。

使用Web控制台

Mongodb自带了Web控制台，默认和数据服务一同开启。他的端口在Mongodb数据库服务器端口的基础上加1000，如果是默认的Mongodb数据服务端口(Which is 27017)，则相应的Web端口为28017

这个页面可以看到

  • 当前Mongodb的所有连接
  • 各个数据库和Collection的访问统计，包括：Reads, Writes, Queries, GetMores ,Inserts, Updates, Removes
  • 写锁的状态
  • 以及日志文件的最后几百行（CentOS+10gen yum 安装的mongodb默认的日志文件位于/var/log/mongo/mongod.log)

可以参考右边的截图

db.stat()

获取当前数据库的信息，比如Obj总数、数据库总大小、平均Obj大小等

01 > use test
02 switched to db test
03 > db.stats()
04 {
05     "collections" : 9,
06     "objects" : 4278845,
07     "avgObjSize" : 224.56603031892953,
08     "dataSize" : 960883236,
09     "storageSize" : 1195438080,
10     "numExtents" : 59,
11     "indexes" : 13,
12     "indexSize" : 801931264,
13     "fileSize" : 6373244928,
14     "ok" : 1
15 }

db.serverStatus()

获取服务器的状态

01 {
02     "version" : "1.6.5",
03     "uptime" : 7208469,
04     "uptimeEstimate" : 7138829,
05     "localTime" : "Wed Oct 26 2011 22:23:07 GMT+0800 (CST)",
06     "globalLock" : {
07         "totalTime" : 7208469556704,
08         "lockTime" : 4959693717,
09         "ratio" : 0.000688036992871448,
10         "currentQueue" : {
11             "total" : 0,
12             "readers" : 0,
13             "writers" : 0
14         }
15     },
16     "mem" : {
17         "bits" : 64,
18         "resident" : 3131,
19         "virtual" : 6172,
20         "supported" : true,
21         "mapped" : 4927
22     },
23     "connections" : {
24         "current" : 402,
25         "available" : 2599
26     },
27     "extra_info" : {
28         "note" : "fields vary by platform",
29         "heap_usage_bytes" : 832531920,
30         "page_faults" : 8757
31     },
32     "indexCounters" : {
33         "btree" : {
34             "accesses" : 2821726,
35             "hits" : 2821725,
36             "misses" : 1,
37             "resets" : 0,
38             "missRatio" : 3.543930204420982e-7
39         }
40     },
41     "backgroundFlushing" : {
42         "flushes" : 120133,
43         "total_ms" : 73235923,
44         "average_ms" : 609.6236920746173,
45         "last_ms" : 1332,
46         "last_finished" : "Wed Oct 26 2011 22:22:23 GMT+0800 (CST)"
47     },
48     "cursors" : {
49         "totalOpen" : 0,
50         "clientCursors_size" : 0,
51         "timedOut" : 238392
52     },
53     "repl" : {
54         "ismaster" : true
55     },
56     "opcounters" : {
57         "insert" : 269351,
58         "query" : 19331151,
59         "update" : 14199331,
60         "delete" : 1,
61         "getmore" : 145575,
62         "command" : 55982302
63     },
64     "asserts" : {
65         "regular" : 0,
66         "warning" : 0,
67         "msg" : 0,
68         "user" : 27,
69         "rollovers" : 0
70     },
71     "ok" : 1
72 }

需要关心的地方：

  • connections 当前连接和可用连接数，听过一个同行介绍过，mongodb最大处理到2000个连接就不行了（要根据你的机器性能和业务来设定），所以设大了没意义。设个合理值的话，到达这个值mongodb就拒绝新的连接请求，避免被太多的连接拖垮。
  • indexCounters:btree:misses 索引的不命中数，和hits的比例高就要考虑索引是否正确建立。你看我的”missRatio” : 3.543930204420982e-7，很健康吧。所以miss率在mongostat里面也可以看
  • 其他的都能自解释，也不是查看mongo健康状况的关键，就不说明了。

db.currentOp()

Mongodb 的命令一般很快就完成，但是在一台繁忙的机器或者有比较慢的命令时，你可以通过db.currentOp()获取当前正在执行的操作。

在没有负载的机器上，该命令基本上都是返回空的

1 >  db.currentOp()
2 { "inprog" : [ ] }

以下是一个有负载的机器上得到的返回值样例：

1 { "opid" : "shard3:466404288", "active" : false, "waitingForLock" : false, "op": "query", "ns" : "sd.usersEmails", "query" : { }, "client_s" :"10.121.13.8:34473", "desc" : "conn" },

字段名字都能自解释。如果你发现一个操作太长，把数据库卡死的话，可以用这个命令杀死他

1 > db.killOp("shard3:466404288")

MongoDB Monitoring Service

MongoDB Monitoring Service(MMS)是Mongodb厂商提供的监控服务，可以在网页和Android客户端上监控你的MongoDB状况。请参考

时间： 2024-08-12 12:08:19

MongoDB运行状态、性能监控，分析的相关文章

Linux性能监控分析命令（五）—free命令介绍

性能监控分析的命令包括如下:1.vmstat2.sar3.iostat4.top5.free6.uptime7.netstat8.ps9.strace10.lsof 命令介绍:free命令是监控Linux内存使用最常用的命令语法格式: free [options] 参数说明: -m:以M为单位查看内容使用情况(默认为kb) -b:以字节为单位查看内存使用情况 -s:可以在指定时间段内不间断监控内存使用情况 -k:以KB为单位显示内存使用情况 -g:以GB为单位显示内存使用情况 -o:不显示缓冲区

Linux命令性能监控分析

Linux性能监控分析   Linux性能测试指标评估 https://blog.51cto.com/364879551/2095709 超全整理!Linux性能分析工具汇总合集 https://www.cnblogs.com/tcicy/p/8461807.html Linux系统性能10条命令监控 https://www.cnblogs.com/qmfsun/p/5729442.html 18个监控网络带宽的工具 https://mp.weixin.qq.com/s?__biz=MzI0MD

Linux性能监控分析命令

vmstat sar iostat top free uptime netstat ps strace lsof

监控宝服务性能监控配置（完整版）

继上篇监控宝服务器监控后,此篇博文详细记录下项目中对常用服务监控的配置不熟 服务器监控可参考:http://blog.51cto.com/kaliarch/2044977 监控宝服务性能监控配置(完整版) 一.目的 2 二.理论基础 2 2.1 相关理论 2 2.2 监控项目 2 三.服务性能监控部署 2 3.1 Nginx 服务性能监控 2 3.2 Apache 服务性能监控 6 3.3 Mysql 服务性能监控 9 3.4 IIS 服务性能监控 14 3.5 Tomcat 服务性能监控 16

011.MongoDB性能监控

一 MongoDB 监控 1.1 监控概述 MongoDB自带了mongostat 和 mongotop 这两个命令来监控MongoDB的运行情况.这两个命令用于处理MongoDB数据库变慢等等问题非常有用,能详细的统计MongoDB当前的状态信息.除此之外,还可以用db.serverStatus().db.stats().开启profile功能通过查看日志进行监控分析. 1.2 模拟插入数据 1 [[email protected] ~]# mongo --host 172.24.8.71 -

MongoDB性能监控

1.mongostat 查看运行中的mongodb实例的统计信息 2.MMS(MongoDB Monitoring Service) 1)安装 rpm -U mongodb-mms-monitoring-agent-2.1.4.51-1.i386.rpm 2)配置 访问https://mms.mongodb.com/settings 选择monitoring agent下对应的os ,按照说明配置即可 完成后启动mms:service mongodb-mms-monitoring-agent s

web性能监控与分析

性能测试需要使用不同的工具,结合系统日志,监控服务器.应用等方面的多项指标.以下阐述监控指标.监控工具.瓶颈分析. 服务端监控指标 性能测试通常需要监控的指标包括: 服务器 Linux(包括CPU.Memory.Load.I/O). 数据库:MySQL(缓存命中.索引.单条SQL性能.数据库线程数.数据池连接数). 中间件:1.tomcat 2.nginx   3.memcache(包括线程数.连接数.日志). 网络: 吞吐量.吞吐率. 应用: jvm内存.日志.Full GC频率. 客户端监控

全球顶级应用性能监控管理服务商分析

  在过去几年里,APM一改传统服务于大型企业的昂贵.复杂.耗费大量时间的IT管理部署方式,以低廉的价格.先试后买的灵活消费方式.以及不依赖专业销售和服务人员的SaaS交付模式,为各路服务商赢得了大量用户.基于此,我们对行业中几家领军企业的市场和竞争策略进行全面剖析. 在<2014年全球应用性能管理市场份额分析>一文中我们提到,新兴APM服务商在2014年的业绩表现远超传统服务商,接下来,我们看看APM业绩排行前五,占据43.4%市场份额,平均增速达到16.1%的APM企业和Newrelic等

Linux性能监控与分析之

Linux性能监控与分析之---CPU CPU性能指标 1. 用户进程使用CPU的比率 2. 系统进程使用CPU的比率 3. WIO, 等待I/O 而是CPU处于空闲状态的比率. 4. CPU的空闲率 5. CPU用于上下文交换的比率 6,nice 7,real-time 8,运行进程队列的长度 9,平均负载 Linux下常用监控CPU性能的工具有 1. iostat  www.ahlinux.com 只能查看所有CPU的平均信息 2. vmstat 能查看所有CPU的平均信息, 能查看CPU队