Tsar 服务器系统和应用信息的采集报告工具

Tsar介绍

Tsar是淘宝的一个用来收集服务器系统和应用信息的采集报告工具，如收集服务器的系统信息（cpu，mem等），以及应用数据（nginx、swift等），收集到的数据存储在服务器磁盘上，可以随时查询历史信息，也可以将数据发送到nagios报警。

Tsar能够比较方便的增加模块，只需要按照tsar的要求编写数据的采集函数和展现函数，就可以把自定义的模块加入到tsar中。

Tsar安装

Tsar目前托管在github上，下载编译安装步骤:

$git clone git://github.com/kongjian/tsar.git
$cd tsar
$make
$make install

安装后：

  1. 定时任务配置:/etc/cron.d/tsar，负责每分钟调用tsar执行采集任务；
  2. 日志文件轮转配置:/etc/logrotate.d/tsar，每个月会把tsar的本地存储进行轮转；
  3. Tsar配置文件路径：/etc/tsar/tsar.conf，tsar的采集模块和输出的具体配置；
  4. 模块路径：/usr/local/tsar/modules，各个模块的动态库so文件；

Tsar配置

Tsar刚安装完，还没有历史数据，想要check是否正常，执行tsar -l，查看是否有实时信息输出：

Tsar的配置主要都在/etc/tsar/tsar.conf中，常用的有：

  • 增加一个模块,添加 mod_<yourmodname> on 到配置文件中
  • 打开或者关闭一个模块,修改mod_<yourmodname> on/off
  • output_stdio_mod 能够配置执行tsar时的输出模块
  • output_file_path 采集到的数据默认保存到的文件（如果修改的话需要对应修改轮转的配置/etc/logrotate.d/tsar）
  • output_interface 指定tsar的数据输出目的，默认file保存本地，nagios/db输出到监控中心/数据库中，这两个功能还需要结合其它配置，具体见后面

Tsar使用

  • 查看历史数据，tsar
  • -l/--list 查看可用的模块列表
  • -l/--live 查看实时数据,tsar -l --cpu
  • -i/--interval 指定间隔，历史,tsar -i 1 --cpu
  • --modname 指定模块,tsar --cpu
  • -s/--spec 指定字段,tsar --cpu -s sys,util
  • -d/--date 指定日期,YYYYMMDD或者n代表n天前
  • -C/--check 查看最后一次的采集数据
  • -d/--detail 能够指定查看主要字段还是模块的所有字段
  • -h/--help 帮助功能

高级功能

  • 输出到nagios

配置： 首先配置output_interface file,nagios，增加nagios输出

然后配置nagios服务器和端口，以及发送的间隔时间

####The IP address or the host running the NSCA daemon
server_addr nagios.server.com
####The port on which the daemon is running - default is 5667
server_port 8086
####The cycle of send alert to nagios
cycle_time 300

由于是nagios的被动监控模式，需要指定nsca的位置和配置文件位置

####nsca client program
send_nsca_cmd /usr/bin/send_nsca
send_nsca_conf /home/a/conf/amon/send_nsca.conf

接下来指定哪些模块和字段需要进行监控，一共四个阀值对应nagios中的不同报警级别

####tsar mod alert config file
####threshold [hostname.]servicename.key;w-min;w-max;c-min;cmax;
threshold cpu.util;50;60;70;80;
  • 输出到Mysql

配置： 首先配置output_interface file,db，增加db输出

然后配置哪些模块数据需要输出

output_db_mod mod_cpu,mod_mem,mod_traffic,mod_load,mod_tcp,mod_udpmod_io

然后配置sql语句发送的目的地址和端口

output_db_addr console2:56677

目的地址在该端口监听tcp数据，并且把数据入库即可，可以参照 tsar2db。

模块开发

Tsar的一个比较好的功能是能够增加自己的采集，这时候需要编写模块代码，编译成so文件即可。

首先安装tsardevel，刚才安装时，如果执行make tsardevel，就会把模块开发的基本文件安装到系统 然后执行tsardevel ，就能在当前模块生成一个模块目录：

[[email protected] tsar]$ tsardevel test
build:make
install:make install
uninstall:make uninstall
[[email protected] tsar]$ ls test
Makefile &nbsp;mod_test.c &nbsp;mod_test.conf

按照要求修改mod_test.c中的read_test_stats，set_test_record 完成后make;make install就完成新模块的配置文件和so的设置，执行tsar --test就能查看效果。

另外也可以通过配置文件对自定义模块传递参数，方法是修改配置文件中的mod_test on myparameter 然后在mod_test.c中的read_test_stats函数中，通过parameter参数就可以获得刚才配置文件中的内容。

[[email protected] tsar]# tsar -l -i 1
Time              ---cpu-- ---mem-- ---tcp-- -----traffic---- --sda---  ---load-
Time                util     util   retran    bytin  bytout     util     load1
03/07/16-20:31:07   1.46    62.33     0.00    60.00  266.00    16.80     0.00
03/07/16-20:31:08   0.99    62.33     0.00    60.00  186.00     0.00     0.00
03/07/16-20:31:09   0.50    62.33     0.00    60.00  186.00     0.00     0.00
03/07/16-20:31:10   0.99    62.33     0.00    60.00  186.00     0.00     0.00
03/07/16-20:31:11   0.50    62.33     0.00    60.00  186.00     0.00     0.00
03/07/16-20:31:12   0.99    62.33     0.00    60.00  186.00     0.00     0.00
03/07/16-20:31:13   0.99    62.33     0.00    60.00  186.00     0.00     0.00
^C
[[email protected]-mysql tsar]# tsar -io -i 1
Time           ---cpu-- ---mem-- ---tcp-- -----traffic---- --sda---  ---load-
Time             util     util   retran    bytin  bytout     util     load1
03/07/16-20:31   0.99    62.14     0.00    92.00   70.00     1.72     0.00   

MAX              0.99    62.14     0.00    92.00   70.00     1.72     0.00
MEAN             0.99    62.14     0.00    92.00   70.00     1.72     0.00
MIN              0.99    62.14     0.00    92.00   70.00     1.72     0.00
[[email protected]-mysql tsar]# tsar -i 1
Time           ---cpu-- ---mem-- ---tcp-- -----traffic---- --sda---  ---load-
Time             util     util   retran    bytin  bytout     util     load1
03/07/16-20:31   0.99    62.14     0.00    92.00   70.00     1.72     0.00   

MAX              0.99    62.14     0.00    92.00   70.00     1.72     0.00
MEAN             0.99    62.14     0.00    92.00   70.00     1.72     0.00
MIN              0.99    62.14     0.00    92.00   70.00     1.72     0.00
[[email protected]-mysql tsar]# tsar -l --io -i 1
Time              ------------------------------------------sda-------------------------------------------
Time               rrqms   wrqms      rs      ws   rsecs   wsecs  rqsize  qusize   await   svctm    util
03/07/16-20:32:47   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:48   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:49   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:51   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:52   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:53   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:54   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:55   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:56   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:32:57   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
^C
[[email protected]-mysql tsar]# tsar -l --tcp -i 1
Time              -------------------------------tcp------------------------------
Time              active  pasive    iseg  outseg  EstRes  AtmpFa  CurrEs  retran
03/07/16-20:33:03   0.00    0.00    1.00    1.00    0.00    0.00    3.00    0.00
03/07/16-20:33:04   0.00    0.00    1.00    1.00    0.00    0.00    3.00    0.00
03/07/16-20:33:05   0.00    0.00    1.00    1.00    0.00    0.00    3.00    0.00
03/07/16-20:33:06   0.00    0.00    1.00    1.00    0.00    0.00    3.00    0.00
03/07/16-20:33:07   0.00    0.00    1.00    1.00    0.00    0.00    3.00    0.00
03/07/16-20:33:08   0.00    0.00    1.00    1.00    0.00    0.00    3.00    0.00
^C
[[email protected]-mysql tsar]# tsar -l --mem -i 1
Time              -----------------------mem----------------------
Time                free    used    buff    cach   total    util
03/07/16-20:33:23 106.0M  830.0M  134.2M  262.7M    1.3G   62.27
03/07/16-20:33:24 106.0M  830.0M  134.2M  262.7M    1.3G   62.27
03/07/16-20:33:25 106.0M  830.0M  134.2M  262.7M    1.3G   62.27
03/07/16-20:33:26 106.0M  830.0M  134.2M  262.7M    1.3G   62.27
03/07/16-20:33:27 106.0M  830.0M  134.2M  262.7M    1.3G   62.27
03/07/16-20:33:28 106.0M  830.0M  134.2M  262.7M    1.3G   62.27
^C
[[email protected]-mysql tsar]# tsar -l --tcpx -i 1
Time              -----------------------------------------------------------tcpx---------------------------------------------------------
Time               recvq   sendq     est   twait  fwait1  fwait2    lisq  lising  lisove   cnest   ndrop   edrop   rdrop   pdrop   kdrop
03/07/16-20:33:52   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:53   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:54   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:55   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:56   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:57   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:58   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:33:59   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:34:00   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00
^C
[[email protected]-mysql tsar]# tsar -l --pcsw -i 1
Time              -------pcsw-----
Time               cswch    proc
03/07/16-20:34:17 181.00    0.00
03/07/16-20:34:18  95.00    0.00
03/07/16-20:34:19 181.00    0.00
03/07/16-20:34:20  98.00    1.00
03/07/16-20:34:21 168.00    0.00
03/07/16-20:34:22  93.00    0.00
03/07/16-20:34:23 161.00    0.00
^C
[[email protected]-mysql tsar]# tsar -l --pcsw --io -i 1
Time              ------------------------------------------sda-------------------------------------------  -------pcsw-----
Time               rrqms   wrqms      rs      ws   rsecs   wsecs  rqsize  qusize   await   svctm    util     cswch    proc
03/07/16-20:34:30   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00   103.00    1.00
03/07/16-20:34:31   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00   173.00    0.00
03/07/16-20:34:32   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    93.00    0.00
03/07/16-20:34:33   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00   169.00    0.00
03/07/16-20:34:34   0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    0.00    86.00    0.00
^C
[[email protected]-mysql tsar]# tsar -l --cpu -i 1
Time              -----------------------cpu----------------------
Time                user     sys    wait    hirq    sirq    util
03/07/16-20:35:00   0.00    0.50    0.00    0.00    0.00    0.50
03/07/16-20:35:01   1.50    3.00    0.00    0.00    0.00    4.50
03/07/16-20:35:02   1.03    7.22    0.52    0.00    0.00    8.25
03/07/16-20:35:03   0.00    0.50    0.00    0.00    0.00    0.50
03/07/16-20:35:04   0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:35:05   0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:35:06   0.00    0.00    0.00    0.00    0.00    0.00
03/07/16-20:35:07   0.00    0.50    0.00    0.00    0.00    0.50
03/07/16-20:35:08   0.00    0.00    8.50    0.00    0.00    0.00
时间： 2024-08-06 09:59:03

Tsar 服务器系统和应用信息的采集报告工具的相关文章

Tsar：淘宝的一个用来收集服务器、系统、和应用信息的采集报告工具！！！

项目背景: 老板说,找个逼格高的开源软件来收集服务器.系统.和应用信息!!!! 实验环境: vmware workstation 11 centos6.5的系统下 服务器:ip:192.168.0.25 SecureCRT (ssh远程连接软件) 软件介绍: Tsar是淘宝开发的一个非常好用的系统监控工具,在淘宝内部大量使用,它不仅可以监控CPU.IO.内存.TCP等系统状态,也可以监控Apache,Nginx/Tengine,Squid等服务器状态.值得一提的是,Tsar 支持将数据存储到 M

隐藏服务器系统版本信息

1.隐藏服务器系统信息 在缺省情况下,当你登陆到linux系统,它会告诉你该linux发行版的名称.版本.内核版本.服务器的名称.为了不让这些默认的信息泄露出来,我们要进行下面的操作,让它只显示一个"login:"提示符.  删除/etc/issue和/etc/issue.net这两个文件.  本地登陆输入用户名和密码前显示的信息写在/etc/issue,当然,在这个文件你也可以写入其他的信息.  而/etc/issue.net是供telnet这个远端登入显示的信息,默认里面内容与/e

防盗链OTT-TV流媒体服务器系统

OTT-TV面临的防盗链.防下载问题 提供视频直播点播内容的网络电视运营商,也可以说提供OTT-TV服务或者说是我们比较熟悉的IPTV,最关注的就是一套完整.运行稳定.播放流畅.防盗链.防下载.能够解决跨国传输的流媒体服务器后台系统作为运营技术支撑. 目前市场上的确有很多厂家提供流媒体服务器系统.不过能够完全满足上述提出的需求的少之又少. OTT-TV内容提供者-运营商最关注点: l  运行稳定 l  播放流畅 l  解决跨国传输问题 l  支持直播时移功能 l  支持7 x 24 小时回放 l

UWP 应用获取各类系统、用户信息 (1) - 设备和系统的基本信息、应用包信息、用户数据账户信息和用户账户信息

应用开发中,开发者时常需要获取一些系统.用户信息用于数据统计遥测.问题反馈.用户识别等功能.本文旨在介绍在 Windows UWP 应用中获取一些常用系统.用户信息的方法.示例项目代码可参见 Github: https://github.com/validvoid/UWP-SystemInfoCollector 由于涉及内容较多,故本文会分为多篇展开.本篇介绍获取设备和系统的基本信息.应用包信息.用户数据账户信息和用户账户信息. 原博客阅读地址:http://validvoid.net/uwp-

电力企业信息化系统之调度信息报送系统整体解决方案

一.建设目的 调度机构信息报送与披露工作是电力监管机构对电网公司业务监管的重要方式,是发电企业及时了解电网及其它发电企业运行情况的重要途径,有助于加强厂网协调,保证电网安全稳定运行. 为规范调度机构信息报送与披露行为,明确公司各部门的职责与分工,强化信息收集.审核.上报流程,提高信息报送的准确性和及时性,根据国家电监会<电力调度机构信息报送与披露办法>以及国家电网公司相关工作要求,进行电力调度信息的报送工作. 目前,很多电力公司采用Excel文件的方式采集和管理电力调度信息数据. 由于Exce

RAID1备盘恢复服务器系统

主备两台服务器,服务器第一第二块盘做raid1安装操作系统,第三至第八块盘做RAID5存放数据,两台服务器做主备,配置一模一样. 今天备机服务器操作系统损坏,要修复备用服务器,就需要重新安装操作系统,安装操作系统并不困难,主要是这个老系统上安装一套比较老的应用软件,配置比较复杂. 考虑主备两台机器硬盘配置一模一样,只有主机名和IP地址不一样,理论上主要把主机的系统拷贝到备机,就可以恢复系统. 因为系统安装在RAID1上,RAID1的两块硬盘数据是一模一样的,那么如果从主服务器上拿一块盘,放到备服

查看Linux服务器的CPU详细信息

查看Linux服务器的CPU详细信息 在Linux系统中,CPU的信息在启动的过程中被装载到虚拟目录/proc下的cpuinfo文件中,我们可以通过cat /proc/cpuinfo查看如下: 下面我们来分析其中几个比较重要的指标: processor 逻辑处理器的id. physical id 物理封装的处理器的id. core id 每个核心的id. cpu cores 位于相同物理封装的处理器中的内核数量. siblings 位于相同物理封装的处理器中逻辑处理器的数量. 判断Linux服务

服务器系统及软件常见漏洞

服务器系统及软件常见漏洞 漏洞名称 允许Traceroute探测 远端WWW服务支持TRACE请求 远端WWW服务提供了对WebDAV的支持 远端WEB服务器上存在/robots.txt文件 远端VNC服务正在运行 远端HTTP服务器类型和版本信息泄漏 远端DNS服务允许递归查询 远程代理服务器允许连接任意端口 远程代理服务器接受POST请求 远程VNC HTTP服务正在运行 利用SMB会话可以获取远程域或工作组列表 利用SMB会话可以获取远程浏览列表 利用SMB会话可以获取远程共享列表 利用S

查看Linux系统下RAID信息

查看Linux系统下RAID信息 软件RAID 详细可参见:http://molinux.blog.51cto.com/2536040/516008 查看阵列状态: [[email protected] ~]# cat /proc/mdstat Personalities : [raid6] [raid5] [raid4] md0 : active raid5 sdd1[2] sdc1[1] sdb1[0] 9783296 blocks level 5, 64k chunk, algorithm