关于mysql的查询优化

由于工作原因,最近甲方客户那边多次反应了他们那边的系统查询速度慢,经过排除之后,发现他们那边的数据库完全没有用到索引,简直坑得一笔,通过慢查询日志分析,为数据表建立了适当的索引之后,查询速度明显的提高上来了,所以这次也总结一下如果进行mysql的优化查询。

1.慢查询

mysql自身是有一个慢查询时间和慢查询记录的,但是在默认情况下,我们的mysql不会记录慢查询,需要在启动mysql时候,指定记录慢查询才可以

(1)使用show variables like ‘long_query_time‘命令,查看慢查询时间

现在慢查询时间是10s,但是我们可以通过set long_query_time对其进行临时修改(关闭掉这次会话之后慢查询时间会被重置回10)

另外,我们也可以通过show variables like ‘%slow%‘这个命令来查看慢查询的配置

慢查询日志默认是不启用的,所以我们要打开它,有两种方法,一种是用set重新设置变量,另一种就是直接修改配置文件,这里建议用修改变量的方法(因为是临时的)

想要测试是否开启慢查询,可以使用select sleep(3),运行之后去对应的目录找到慢查询日志是否有记录就可以了,这里就不再多说了。

2.构建大数据量进行测试

因为之前优化的查询里面存储着客户的数据,这里不方便用于展示,所以我们可以自己来构建一个大数据的表,这里就用到了mysql的存储过程(使用存储过程无非就是想要插入数据运行的时间减少而已,其实我们可以通过php写代码批量插入)

存储过程怎样写我就不多说了,而且网上也能找到大量的测试数据代码,所以这里我就直接上代码了

(1)创建表

CREATE TABLE dept(

deptno MEDIUMINT   UNSIGNED  NOT NULL  DEFAULT 0 COMMENT ‘编号‘,

dname VARCHAR(20)  NOT NULL  DEFAULT "" COMMENT ‘名称‘,

loc VARCHAR(13) NOT NULL DEFAULT "" COMMENT ‘地点‘

) ENGINE=MyISAM DEFAULT CHARSET=utf8 ;

CREATE TABLE emp (

empno  MEDIUMINT UNSIGNED  NOT NULL  DEFAULT 0 COMMENT ‘编号‘,

ename VARCHAR(20) NOT NULL DEFAULT "" COMMENT ‘名字‘,

job VARCHAR(9) NOT NULL DEFAULT "" COMMENT ‘工作‘,

mgr MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 COMMENT ‘上级编号‘,

hiredate DATE NOT NULL COMMENT ‘入职时间‘,

sal DECIMAL(7,2)  NOT NULL COMMENT ‘薪水‘,

comm DECIMAL(7,2) NOT NULL COMMENT ‘红利‘,

deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 COMMENT ‘部门编号‘

)ENGINE=MyISAM DEFAULT CHARSET=utf8 ;

分别是部门表(dept)和员工表(emp),这里我是故意没有创建主键,等下留作演示用

(2)创建自定义函数

delimiter $$

创建一个自定义函数,目的是返回1-10的随机数

create function rand_num()
returns int
begin
  return floor(1+rand()*10);
end$$

创建一个自定义函数,目的是返回随机字符串

create function rand_string(n INT) returns varchar(255) begin  declare chars_str varchar(100) default ‘abcdefghijklmnopqrstuvwxyzABCDEFJHIJKLMNOPQRSTUVWXYZ‘;

declare return_str varchar(255) default ‘‘;

declare i int default 0;

while i < n do

set return_str =concat(return_str,substring(chars_str,floor(1+rand()*52),1));

set i = i + 1;

end while;

return return_str;

end$$

为了能使存储过程正常执行,要先把mysql的语句结束符号修改成$$,创建完后用delimiter命令改回;就可以了

(3)创建插入数据的存储过程

create procedure insert_emp(in start int(10),in max_num int(10))
begin
declare i int default 0;
#set autocommit =0 把autocommit设置成0
 set autocommit = 0; 
 repeat
 set i = i + 1;
 insert into emp values ((start+i) ,rand_string(6),‘SALESMAN‘,0001,curdate(),2000,400,rand_num());
  until i = max_num
 end repeat;
   commit;
 end $$

(4)调用call insert_emp(100001,4000000)创建400w条数据

插入400w条数据用了8分半钟,这时我们可以去看下慢查询日志是否记录了

未完待续。。。。

时间: 2024-11-06 21:35:42

关于mysql的查询优化的相关文章

查询优化 | MySQL慢查询优化

?Explain查询:rows,定位性能瓶颈. 只需要一行数据时,使用LIMIT1. 在搜索字段上建立索引. 使用ENUM而非VARCHAR. 选择区分度高的列作为索引. 采用扩展索引,而不是新建索引. 慢查询日志:log-slow-queries,mysqldumpslow工具. 避免select * 尽可能使用NOT NULL where中避免索引无效. <MySQL索引原理及慢查询优化>    http://tech.meituan.com/mysql-index.html [查询语句的

php mysql 一个查询优化的简单例子

PHP+Mysql是一个最经常使用的黄金搭档,它们俩配合使用,能够发挥出最佳性能,当然,如果配合Apache使用,就更加Perfect了. 因此,需要做好对mysql的查询优化.下面通过一个简单的例子,展现不同的SQL语句对于查询速度的影响: 存在这样的一张表test,它有一个自增的id作为主索引.现在要查询id号处于某一个范围内的记录,可以使用如下SQL语句:  代码如下 复制代码 SELECT *FROM `test`order by id asclimit 208888,50 这条SQL语

MySQL in查询优化

https://blog.csdn.net/gua___gua/article/details/47401621 MySQL in查询优化<一> 原创 2015年08月10日 17:57:56 5137 开发说他写了个SQL特别慢,让看看. [html] view plain copy select * from t_channel where id_ in(select distinct cdbh from sjkk_gcjl where jgsj>'2015-01-02 08:00:

MySQL 慢查询优化

为什么查询速度会慢 1.慢是指一个查询的响应时间长.一个查询的过程: 客户端发送一条查询给服务器 服务器端先检查查询缓存,如果命中了缓存,则立可返回存储在缓存中的结果.否则进入下一个阶段 服务器端进行SQL解析.预处理,再由优化器生成对应的执行计划. MySQL根据优化器生成的执行计划,调用存储引擎的API来执行查询. 将结果返回给客户端 2.数据访问 是否向数据库请求了不需要的数据 是否扫描额外的记录 3.查询的方式 一个复杂的查询还是多个简单的查询 切分查询(将大查询切分成小查询,循环完成小

MySQL物理查询优化技术---index dive辨析

一 引子 在MySQL的官方手册上有这么一句话: the optimizer can estimate the row count for each range using dives into the index or index statistics. 这是在说: 优化器为每一个范围段(如"a IN (10, 20, 30)"是等值比较, 括3个范围段实则简化为3个单值,分别是10,20,30)估计每个范围段(用范围段来表示是因为MySQL的"range"扫描方

MySql中查询优化方法

最近一段时间由于工作需要,开始关注针对Mysql数据库的select查询语句的相关优化方法. 由于在参与的实际项目中发现当mysql表的数据量达到百万级时,普通SQL查询效率呈直线下降,而且如果where中的查询条件较多时,其查询速度简直无法容忍.曾经测试对一个包含400多万条记录(有索引)的表执行一条条件查询,其查询时间竟然高达40几秒,相信这么高的查询延时,任何用户都会抓狂.因此如何提高sql语句查询效率,显得十分重要.以下是网上流传比较广泛的30种SQL查询语句优化方法: 1.应尽量避免在

MySQL慢查询优化最佳实践(一)

慢查询 我们知道,一般的应用系统,MySQL的读写比例在10:1左右,而且一般的插入和更新操作很少会出现性能问题,遇到问题最多的,也是最容易出现问题的,还是一些复杂的查询操作,所以查询语句的优化已经成为开发.运维工程师们的必须课,是大部分运维工作之中的重中之重. 索引原理 数据库建立索引的目的是为了提高查询效率,索引如同生活中的字典.列车时刻表.图书目录一样,原理都相同,都是通过不断缩小想要获得的数据范围来筛选出最终想要的结果,把本来是随机查询的事件变成有序的事件,如我们在字典里查"mysql&

mysql 子查询优化一例

写在前面的话: 在慢查优化1和2里都反复强调过 explain 的重要性,但有时候肉眼看不出 explain 结果如何指导优化,这时候还需要有一些其他基础知识的佐助,甚至需要了解 MySQL 实现原理,如子查询慢查优化. 看到 SQL 执行计划中 select_type 字段中出现"DEPENDENT SUBQUERY"时,要打起精神了! --MySQL 的子查询为什么有时候很糟糕-- 引子:这样的子查询为什么这么慢? 下面的例子是一个慢查,线上执行时间相当夸张.为什么呢? SELEC

mysql慢查询优化之explain的各列含义

mysql> explain select customer_id,first_name,last_name from customer; +----+-------------+----------+------+---------------+------+---------+------+------+-------+ | id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra

MySQL之查询优化方式(笔记)

1.COUNT() 对COUNT的优化可以通过下面的SQL实现 mysql> select count(gnp<10000 or null) as '<<<<',count(gnp>=10000 or null) as '>>>>' from country; +------+------+ | <<<< | >>>> | +------+------+ | 152 | 87 | +-----