SQL执行效率1

第一种方法:使用insert into 插入,代码如下:

?


1

2

3

4

5

6

7

$params = array(‘value‘=>‘50′);

set_time_limit(0);

echo date(“H:i:s”);

for($i=0;$i<2000000;$i++){

$connect_mysql->insert($params);

};

echo date(“H:i:s”);

最后显示为:23:25:05 01:32:05 也就是花了2个小时多!

第二种方法:使用事务提交,批量插入数据库(每隔10W条提交下)最后显示消耗的时间为:22:56:13 23:04:00 ,一共8分13秒  ,代码如下:

?


1

2

3

4

5

6

7

8

9

10

11

12

echo date(“H:i:s”);

$connect_mysql->query(‘BEGIN‘);

$params = array(‘value‘=>‘50′);

for($i=0;$i<2000000;$i++){

$connect_mysql->insert($params);

if($i%100000==0){

$connect_mysql->query(‘COMMIT‘);

$connect_mysql->query(‘BEGIN‘);

}

}

$connect_mysql->query(‘COMMIT‘);

echo date(“H:i:s”);

第三种方法:使用优化SQL语句:将SQL语句进行拼接,使用 insert into table () values  (),(),(),()然后再一次性插入,如果字符串太长,

则需要配置下MYSQL,在mysql 命令行中运行 :set global max_allowed_packet =  2*1024*1024*10;消耗时间为:11:24:06 11:25:06;

插入200W条测试数据仅仅用了1分钟!代码如下:

?


1

2

3

4

5

6

$sql= “insert into twenty_million (value) values”;

for($i=0;$i<2000000;$i++){

$sql.=”(‘50′),”;

};

$sql = substr($sql,0,strlen($sql)-1);

$connect_mysql->query($sql);

最后总结下,在插入大批量数据时,第一种方法无疑是最差劲的,而第二种方法在实际应用中就比较广泛,第三种方法在插入测试数据或者其他低要求时比较合适,速度确实快。

时间: 2024-08-10 02:09:28

SQL执行效率1的相关文章

in和exists的区别与SQL执行效率

in和exists的区别与SQL执行效率最近很多论坛又开始讨论in和exists的区别与SQL执行效率的问题,本文特整理一些in和exists的区别与SQL执行效率分析 SQL中in可以分为三类: 1.形如select * from t1 where f1 in ('a','b'),应该和以下两种比较效率 select * from t1 where f1='a' or f1='b' 或者 select * from t1 where f1 ='a' union all select * fro

[转]SQLServer SQL执行效率和性能测试方法总结

本文转自:http://www.zhixing123.cn/net/27495.html 对于做管理系统和分析系统的程序员,复杂SQL语句是不可避免的,面对海量数据,有时候经过优化的某一条语句,可以提高执行效率和整体运行性能. 如何选择SQL语句,本文提供了两种方法,分别对多条SQL进行量化的分析. 在测试SQL性能的过程中. 一是通过设置STATISTICS查看执行SQL时的系统情况. 选项有PROFILE,IO ,TIME. SET STATISTICS PROFILE ON:显示分析.编译

SQL执行效率和性能测试方法总结

对于做管理系统和分析系统的程序员,复杂SQL语句是不可避免的,面对海量数据,有时候经过优化的某一条语句,可以提高执行效率和整体运行性能.如何选择SQL语句,本文提供了两种方法,分别对多条SQL进行量化的分析. 在测试SQL性能的过程中.一是通过设置STATISTICS查看执行SQL时的系统情况.选项有PROFILE,IO ,TIME.SET STATISTICS PROFILE ON:显示分析.编译和执行查询所需的时间(以毫秒为单位).SET STATISTICS IO ON:报告与语句内引用的

SQL执行效率总结

1.关于SQL查询效率,100w数据,查询只要1秒,与您分享: 机器情况 p4: 2.4 内存: 1 G os: windows 2003 数据库: ms sql server 2000 目的: 查询性能测试,比较两种查询的性能 SQL查询效率 step by step -- setp 1. -- 建表 create table t_userinfo ( userid int identity(1,1) primary key nonclustered, nick varchar(50) not

SQL执行效率和性能测试方法

对于做管理系统和分析系统的程序员,复杂SQL语句是不可避免的,面对海量数据,有时候经过优化的某一条语句,可以提高执行效率和整体运行性能.如何选择SQL语句,本文提供了两种方法,分别对多条SQL进行量化的分析. 在测试SQL性能的过程中.一是通过设置STATISTICS查看执行SQL时的系统情况.选项有PROFILE,IO ,TIME.SET STATISTICS PROFILE ON:显示分析.编译和执行查询所需的时间(以毫秒为单位).SET STATISTICS IO ON:报告与语句内引用的

sql执行效率,半同步复制

(1)尽量选择较小的列: (2)将where中用的比较频繁的字段建立索引: (3)select中避免使用*: (4)避免在索引列上使用计算.not in和<>等操作: (5)当只需要一行数据时候使用limit1: (6)保证单表数据不超过200w,实时分割表: 针对查询较慢的语句,可以使用explain来分析该语句具体的执行情况. sql语句应考虑哪些安全性? (1)少使用root账户,应该为不同的动作分配不同的账户: (2)sql执行出错后,不能把数据库中显示的出错信息,直接展示给用户.防止

提高SQL执行效率的16中方法

项目中优化sql语句执行效率的方法:1)尽量选择较小的列2)将where中用的比较频繁的字段建立索引3)select子句中避免使用‘*’4)避免在索引列上使用计算.not in 和<>等操作5)当只需要一行数据的时候使用limit 16)保证单表数据不超过200W,适时分割表.针对查询较慢的语句,可以使用explain 来分析该语句具体的执行情况. -------------------------------------------------------------------------

提升SQL执行效率注意点

1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,如: select id from t where num is null 可以在num上设置默认值0,确保表中num列没有null值,然后这样查询: select id from t where num=0 3.应尽量避免在 where 子句中使用!=或<>操作符,否则将引擎放

SQL执行效率和性能测试方法(SqlServer)

测试SQL性能:一.通过设置STATISTICS查看执行SQL时的系统情况.选项:PROFILE.O .TIME.SET STATISTICS PROFILE ON:显示分析.编译和执行查询所需的时间(以毫秒为单位).SET STATISTICS IO ON:报告与语句内引用的每个表的扫描数.逻辑读取数(在高速缓存中访问的页数)和物理读取数(访问磁盘的次数)有关的信息.SET STATISTICS TIME ON:显示每个查询执行后的结果集,代表查询执行的配置文件.实例如下:SET STATIS

sql执行效率 Explain

explain+sql语句 explain返回的结果项很多,这里我们只关注三种,分别是type,key,rows. possible_keys表明的是这次查找中所用到的索引, rows是指这次查找数据所扫描的行数(这里可以先这样理解,但实际上是内循环的次数), type则是本文要详细记录的连接类型,前两项重要而且简单,无需多说. mysql5.7中type的类型达到了14种之多,这里只记录和理解最重要且经常遇见的六种类型, 它们分别是all,index,range,ref,eq_ref,cons