一个简单web系统的接口性能分析及调优过程

在测试一个简单系统接口性能压力时,压到一定数量,程序总是崩溃,查看相关机器相关数据时,CPU、内存、IO占用均不高,问题自然出现在其它地方
先介绍下系统部件架构

Resin版本为:
[[email protected] lib]# java -classpath ./resin.jar com.caucho.Version
Resin-3.2.1 (built Fri, 17 Oct 2008 04:11:01 PDT)
Copyright(c) 1998-2008 Caucho Technology. All rights reserved

mysql版本为:
Server version: 5.5.39

在跑接口压力时,当TPS达到100时,程序当报错提示为resin重启了

[2016-03-23 12:07:17] JDK detected deadlock. Restarting Resin.
[12:07:17.929] {resin-41} JDK detected deadlock. Restarting Resin.
[2016-03-23 12:07:17] "001" Id=79 BLOCKED on [email protected] owned by "http--80-32" Id=59

问题该怎么解决呢?这里先,说说性能问题瓶颈解决的一个思路:
1、查看是否为服务器硬件瓶颈,这里涉及到CPU、内存、IO读写,我们可以通过vmstat、sar或iostat来观察;通过观察,在本例中问题不存在硬件的瓶颈
2、网络瓶颈,可以通过查看网络利用率来确定,方式很多,这里不介绍;不过如果在局域网内、且这仅仅是一个web服务类型网站,与视频类网站不同,所以本例中也不存在网络的问题
3、linux操作系统瓶颈,linux关于性能方面设计到的内核参数太多,这里可以参数《Linux服务器性能调整》一书,当做参考书使用;本例中,对linux TCP连接释放时间做了调整,但问题依旧;
4、中间件瓶颈,这里指的就是第三方的中间件,比如tomcat、JVM、数据库等等,一般在网络下载后的程序,需要根据服务器实际情部分做调整;在本例中,调整了相关参数后,性能有所提高,但个别接口还有问题;
5、应用的瓶颈,这就需要与开发一起调试,比如业务逻辑、sql的优化、算法等等

本例中,linux内核相关参数调整,网上有更详细的参数,请自行参考:

net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_fin_timeout = 30

在本次测试中,相关中单件的调整如下:
1、Resin 处理能务的调整:
Resin目录下conf\resin.xml文件参数调整

<jvm-arg>-server</jvm-arg>
<jvm-arg>-Xmx512m</jvm-arg>
<jvm-arg>-Xms256m </jvm-arg>
<jvm-arg>-Xss256k</jvm-arg>
<memory-free-min>10M</memory-free-min>
<thread-max>3000</thread-max>
<socket-timeout>20s</socket-timeout>
<keepalive-timeout>15s</keepalive-timeout>

具体的调整方式,可以参考JVM的性能调优相关文章,如:http://uule.iteye.com/blog/2114697

2、web数据库连接参数调整
有的程序中参web连接数据的处理能力有做限制,本例中,默认初始处理能力为1,这里做修改

dbInitialCapacity="1" (初始化处理能力)
dbMaxCapacity="5" (最大处理能力

3、mysql数据库性能处理调整
具体的可参数MySQL数据库性能能调整进行,根据机器内存,CPU情况进行调整,可以参考blog:http://www.educity.cn/shujuku/692462.html
本例中,对最大连接数、连接池做了调整

--max_connections=1200
--innodb_buffer_pool_size=2500M

4、程序内部问题,比如登陆时达到了最大的文件打开数,等等
这里设计到内部程序这里就不例举了

参考资料:

linux性能调整:http://download.csdn.net/detail/machen_smiling/7736543

mysql性能调整:http://www.educity.cn/shujuku/692462.html

linux性能监控命令:http://os.51cto.com/art/201412/460698_all.htm

时间: 2024-08-01 19:05:05

一个简单web系统的接口性能分析及调优过程的相关文章

性能分析与调优的原理

最近一直纠结性能分析与调优如何下手,先从硬件开始,还是先从代码或数据库.从操作系统(CPU调度,内存管理,进程调度,磁盘I/O).网络.协议(HTTP, TCP/IP ),还是从应用程序代码,数据库调优,中间件配置等方面入手. 单一个中间件又分web中间件(apache .IIS),应用中间件(tomcat .weblogic .webSphere )等,虽然都是中间件,每一样拎出来往深了学都不是一朝一夕之功.但调优对于每一项的要求又不仅仅是“知道”或“会使用”这么简单.起码要达到“如何更好的使

x86服务器中网络性能分析与调优 转

x86服务器中网络性能分析与调优 2017-04-05 巨枫 英特尔精英汇 [OpenStack 易经]是 EasyStack 官微在2017年新推出的技术品牌,将原创技术干货分享给您,本期我们讨论 [x86服务器中网络性能分析与调优] 那些事! >> 网络性能理论极限 网络数据包处理的性能指标,一般包括吞吐.延时.丢包率.抖动等. 数据包有大有小,数据包的大小对这些性能指标有很大的影响. 一般认为服务器处理能力很强,不是数据包处理的瓶颈,而通过物理线路能够传送数据包的最大速率,即线速(Wir

性能测试知多少---性能分析与调优的原理

最近一直纠结性能分析与调优如何下手,先从硬件开始,还是先从代码或数据库.从操作系统(CPU调度,内存管理,进程调度,磁盘I/O).网络.协议(HTTP, TCP/IP ),还是从应用程序代码,数据库调优,中间件配置等方面入手. 单一个中间件又分web中间件(apache .IIS),应用中间件(tomcat .weblogic .webSphere )等,虽然都是中间件,每一样拎出来往深了学都不是一朝一夕之功.但调优对于每一项的要求又不仅仅是"知道"或"会使用"这么

性能测试分析与性能调优诊断--史上最全的服务器性能分析监控调优篇

一个系统或者网站在功能开发完成后一般最终都需要部署到服务器上运行,那么服务器的性能监控和分析就显得非常重要了,选用什么配置的服务器.如何对服务器进行调优.如何从服务器监控中发现程序的性能问题. 如何判断服务器的瓶颈在哪里等 就成为了服务器性能监控和分析时重点需要去解决的问题了. 1     服务器的性能监控和分析 1.1      Linux服务器的性能指标监控和分析 1.1.1       通过vmstat深挖服务器的性能问题 1.1.2       如何通过mpstat 分析服务器的性能指标

PHP程序的性能分析与调优基础

1.xdebug xdebug是一个开发源代码的PHP程序调试器(即一个debug工具),可以用来跟踪.调试和分析PHP程序的运行状况. 安装与配置: 1)安装phpize: yum -y install  php-devel 2)安装xdebug: 下载(http://xdebug.org/).解压.上传到linux.执行: cd phpize ./configure  --enable-xdebug make && make install 3)配置: vi  /etc/php.ini

【接口】接口压测性能分析及调优建议

常见的互联网架构中,一般都能看到spring+mybatis+mysql+redis搭配的身影,在我所服务的公司亦是如此.一般来说,应用内部的接口都是直接调用的,所谓的面向接口编程,应用间的调用直接调或者通过类似dubbo之类的服务框架来执行,数据格式往往采用json,即统一也方便各数据间做转换和取值,缓存一般使用redis或memcached,存储一些对象或json格式的字符串.对外提供的接口,一般都需要进行压力测试,以便估算其性能,并为后续的调优提供指导方向,以下接口便是在压测过程中出现的各

Linux系统CPU的性能监控及调优

前言: 性能优化是一个老生常谈的话题,典型的性能问题如页面响应慢.接口超时,服务器负载高.并发数低,数据库频繁死锁等.尤其是在“糙快猛”的互联网开发模式大行其道的今天,随着系统访问量的日益增加和代码的臃肿,各种性能问题开始纷至沓来. 在系统层面能够影响应用性能的一般包括三个因素:CPU.内存和IO,今天,我们先谈谈CPU性能的监控以及调优. CPU性能监控 当程序响应变慢的时候,首先使用top.vmstat.ps等命令查看系统的cpu使用率是否有异常,从而可以判断出是否是cpu繁忙造成的性能问题

JVM性能分析和调优方向

1)合理配置参数 jvm内存=堆内存+非堆内存 堆内存=新生代+年老代 新生代=1个Eden区+2个survivo区 非堆内存=持久代+代码缓存 -server:服务器模式,该参数放置在配置项的首位置 -Xms:堆的初始大小,单位MB 配置-Xms与-Xmx一致,为可用内存的80% -XmX:堆的最大大小,单位MB -Xmn:新生代的初始大小,单位MB 为堆大小的3/8 当业务中有数据量很大的文件需要导出时,需要调整以下2个参数的值,可避免出现OOM -XX:PermSize:持久代的初始大小,

系统监测和性能分析工具

作为一名linux运维工程师来说,对linux系统的日常管理,检测和系统性能的分析是必不可少的.也有一些针对系统监测和性能分析的工具.咱们现在就来了解一下. tcpdump命令: 网络抓包工具,过滤数据包或者定制输出格式: 常用选项: -n :  用IP地址表示主机,用数字表示端口号. -i  : 监听网卡接口, -i  any :   抓取所有网卡接口的数据包. -v  :  输出详细信息. -t :  不打印时间戳 -e :  显示以太网帧头部信息. -x  :  以十六进制数显示数据包的内