mysql性能优化注意事项以及索引

 mysql性能优化注意事项以及索引

一:数据库的优化方面

1商业需求的影响

比如说论坛里的帖子统计,并且实时更新

从功能上来说通过命令   select  count(*) from 表名 可以得到结果,如果论坛每秒产生产生成千上万条帖子,我们没有采用myisam存储而用的是innodb存储;就算再好的设备也不可能很快的查询出来。

注:在where和count(*)使用中myisam比innodb要快的多;因为myisam内置了一个计数器,count(*)可以直接从计数器当中读取,而innodb则要扫描全表。

所以在innodb上执行count(*)时一般伴随where,而且where中要包含主键以外的索引列。

如果必须要实施更新就专门为这个功能创建一个表,要想查询结果就专门查看这个表就好了;到时候每秒产生的上万条帖子也是一种麻烦,反过来说但是到底有多少人会关注这个实时更新,如果把实时更新去掉就很容易实现;在通过创建统计表,每隔一定的时间去刷新便可以。这就是不合理的商业要求。

2:系统架构以及实现的影响

1)二进制多媒体数据

主要包括图片、视屏、其他二进制文件,如果放到数据库中数据空间资源消耗非常严重,另外一个就是消耗主机的cpu资源,因为数据库本就不是处理这些的优势,

解决办法:可以将这些二进制多媒体数据放到一个专门的文本文件中,然后给数据库做一个连接指向这个文本文件,实现数据库调用多媒体文件,有不用消耗数据库的空间和cpu资源。

2)超大文本数据

如果大的文本数据放到数据库当中也会造成空间的占用浪费问题。

解决方法:可以使用非关系型数据库进行存储

3)查询语句对性能的影响

每个sql语句在优化前后的性能差异也是各不相同

在数据库管理软件中,最大性能瓶颈就是在于磁盘io、也就是数据的存取操作上面,而对于同一份数据,当我们以不同的方式去查找某一点内容时候,所需的读取数据量可能会有天壤之别,搜消耗的资源也区别很大

首先进行编写一个脚本插入20000行的数据

比如执行sql语句时可以用explain来查看执行计划:

使用其他方式再次查询打开profiling功能,来查看sql的实际执行计划

打开功能

开始查询

查看profile对数据库的cpu,block,以及io的使用情况:

4)数据库的schema(模式)设计对性能也有影响

5)硬件选择对性能的影响

数据库主机是存储数据的地方,所以io性能必须要优先考虑,无论是什么数据库都必须考虑的因素,当然和io相关的板卡

另外cpu的处理能力也不能忽视,企业中必须使用多核,另外内存也必须要大至少要64G

其实数据库的优化不单单从物理方面进行提高配置,也包括逻辑化如连接数。。。,和商业的需求。总之就是系统架构最优化、逻辑结构精简化、硬件设施理性化

二、索引的介绍以及创建和使用

什么是索引?

索引(index) 是帮助mysql高效获取数据结构,帮助dba快速定位,简单来说就相当于字典中的目录

索引的类型在上章讲过有三种{B-Tree、R-Tree、Full-Tree}类型、最常用的是B-Tree

这里主要介绍的是B-Tree的索引结构:

如图:这里只说重点、浅蓝色的我们成为磁盘块、可以看到每个磁盘块包含几个数据项,和指针(黄色)其实真正的数据在叶子节点上,就是最下面的一层,而其他的不存放数据,只存放指引数据方向的索引而已。

例如:要查找29,首先把磁盘块1,加载到内存,发生一次io,在内存中用二分查找确定29在17和35之间,锁定磁盘块1的p2指针,由此往下推算,直到第三层算出为止。

索引的优点:

让mysql高效的运行,可以大大提高mysql的查询效率,数据约束,快速定位

使用索引的代价:

1)需要加载到内存,以文件的形式存放在硬盘中,所以增加磁盘的开销

2)写数据,需要更新索引,对数据库是很大的开销,降低表更新、添加和删除的速度

不建议使用索引的情况:

1)表记录较少

2)索引的选择性较低,指不重复的索引与表记录数的比值,取值范围(0-1),选择性越高,索引价值越大

1:普通索引

最基本的索引,没有任何限制

create index index_name on tablename(columm1【column2,。。。。。】)

2:唯一索引

和普通索引类似,不同的就是索引列的值必须唯一,但允许空值,指的就是null,如果是组合索引,列的值必须唯一。

create table tablename(id int not null,username varchar(16) not null,primary key(id));

3:组合索引

为了进一步提升mysql的效率,可以使用组合索引

create index index_name on table_name(column1,column2,column3);

这样的组合索引效率高于单列的索引,而且采用的是最左前缀的结果。简单理解就是从最左边开始组合。

4:全文索引

只用于myisam表对文本域进行索引。字段包括char、varchar、text

不过切记大容量的数据表,生成全文索引是一个非常消耗时间和硬盘的做法

查看索引

show  index  from  table_name

show  keys  from  table_name

创建索引的时机:

一般在where和join子句中需要建立索引

使用索引的注意事项:

某些情况下like 才需要建立索引,因为在一通配符%和-开头查询时,mysql不会使用索引

select * from table-name where name like ‘%admin’;

另外还有就是不能再列上进行运算

select * from users where YEAR(adddate)<2000;

强每个行上进行运算,将导致索引失效而进行全表扫描

可修改为select * from users where adddate<2000-10-4;

总结:

索引的优化过程中主要用于存在where和join子句当中

索引中的列的基数越大,索引的效果越好

使用的短索引,如果对字符串进行索引,应该指定一个前缀长度,可节省大量的索引空间,提升查询的速度

时间: 2025-01-02 04:14:16

mysql性能优化注意事项以及索引的相关文章

Mysql性能优化:什么是索引下推?

原文:Mysql性能优化:什么是索引下推? 导读 本文章始发于本人公众号:码猿技术专栏,原创不易,谢谢关注推荐. 索引下推(index condition pushdown )简称ICP,在Mysql5.6的版本上推出,用于优化查询. 在不使用ICP的情况下,在使用非主键索引(又叫普通索引或者二级索引)进行查询时,存储引擎通过索引检索到数据,然后返回给MySQL服务器,服务器然后判断数据是否符合条件 . 在使用ICP的情况下,如果存在某些被索引的列的判断条件时,MySQL服务器将这一部分判断条件

MySQL性能优化(二)索引优化

一.选择合适的列建立索引 1.在where从句,group by从句,order by从句,on从句中出现的列(select)2.索引字段越小越好(表每页数据才会更多,IO效率会更高)3.离散度大的列放到联合索引的前面select * from payment where staff_id=2 and customer_id=584;index(staff_id,customer_id)好?还是index(customer_id,staff_id)好?由于customer_id的离散度更大(重复

MySQL 性能优化---索引及优化

博主QQ:819594300 博客地址:http://zpf666.blog.51cto.com/ 有什么疑问的朋友可以联系博主,博主会帮你们解答,谢谢支持! 一.MySQL性能优化之-影响性能的因素 1.商业需求的影响 Myisam存储引擎内置一个计数器,count(*)时直接从计数器读取:而通过innodb存储引擎查找某个数据时,是必须扫描全表的,所以当执行对表的统计(即使用count(*)函数)时,myisam要比innodb要快的很多.所以一般在innodb上执行count(*)时一般要

Mysql5.7—mysql性能优化-索引、语句、配置(运维必备)

小生博客:http://xsboke.blog.51cto.com 小生 Q Q:1770058260 -------谢谢您的参考,如有疑问,欢迎交流 一. 数据库的类型 1) 第一代数据库: 基于层次模型与网状模型的数据库 层次型数据库比较经典的是IBM公司的IMS(InformationManagement System)数据库,层次型数据库提供了良好的完整性支持,模型简单,对具有一对多层关系的部们描述非常自然.直观,容易理解,比较适用于那些实体间联系是固定的且预先定义好的环境,其性能优于关

mysql性能优化-索引与优化

http://hongge.blog.51cto.com/ 一.MySQL性能优化之-影响性能的因素 1.商业需求的影响 不合理需求造成资源投入产出比过低,这里我们就用一个看上去很简单的功能来分析一下. 需求:一个论坛帖子总量的统计,附加要求:实时更新 从功能上来看非常容易实现,执行一条SELECT COUNT(*) from 表名 的Query 就可以得到结果.但是,如果我们采用不是MyISAM 存储引擎,而是使用的Innodb 的存储引擎,那么大家可以试想一下,如果存放帖子的表中已经有上千万

Mysql性能优化--索引优化 ( 索引不再是黑盒子 )

课程目录:│  ├─第1章 课程开篇│  │      1-课程开篇│  │      │  ├─第2章 InnoDB 行存储结构│  │      1-InnoDB行存储结构--本章大纲│  │      2-InnoDB行存储结构1--变长字段长度列表│  │      3-InnoDB行存储结构2--NULL值列表│  │      4-InnoDB行存储结构3--VARCHAR及行溢出│  │      │  ├─第3章 InnoDB 数据页结构│  │      1-InnoDB页存储

Mysql性能优化:为什么要用覆盖索引?

原文:Mysql性能优化:为什么要用覆盖索引? 导读 相信读者看过很多MYSQL索引优化的文章,其中有很多优化的方法,比如最佳左前缀,覆盖索引等方法,但是你真正理解为什么要使用最佳左前缀,为什么使用覆盖索引会提升查询的效率吗? 本篇文章将从MYSQL内部结构上讲一下为什么覆盖索引能够提升效率. InnoDB索引模型 在InnoDB中,表都是根据主键顺序以索引的形式存放的,这种存储方式的表称为索引组织表.又因为前面我们提到的,InnoDB使用了B+树索引模型,所以数据都是存储在B+树中的. 每一个

Mysql性能优化:如何给字符串加索引?

原文:Mysql性能优化:如何给字符串加索引? 导读 现代大部分的登录系统都支持邮箱.手机号码登录两种方式,那么如何在邮箱或者手机号码这个字符串上建立索引才能保证性能最佳呢? 今天这篇文章就来探讨一下在Mysql中如何给一个字符串加索引才能达到性能最佳. 本文首发于作者的微信公众号[码猿技术专栏],原创不易,喜欢的朋友支持一下,谢谢!!! 陈某将会从什么是前缀索引.前缀索引和普通索引的比较.如何建丽最佳性能的前缀索引.前缀索引对覆盖索引的影响这几段来讲. 前缀索引 顾名思义,对于列值较长,比如B

MySQL配置文件mysql.ini参数详解、MySQL性能优化

MySQL配置文件mysql.ini参数详解.MySQL性能优化 my.ini(Linux系统下是my.cnf),当mysql服务器启动时它会读取这个文件,设置相关的运行环境参数. my.ini分为两块:Client Section和Server Section.   Client Section用来配置MySQL客户端参数.   要查看配置参数可以用下面的命令: show variables like '%innodb%'; # 查看innodb相关配置参数 show status like