用直接路径(direct-path)insert提升性能的两种方法

1、传统串行insert方式

常见的insert方式有两种:

(1)      insert into table_name values(....)

(2)      insert into target_table select* from source_table

上面这两种常规的插入式,默认都是在串行方式下的插入,会将insert的数据写入buffer_cache,插入前检查表中是否有block中存有空闲空间可以追加插入,并写入redo log和数据的undo。

2、直接路径(direct-path)insert优点与使用要点

2.1、Direct-path insert 方式的优点

(1)      可以将insert数据跳过buffer_cahce,省掉了buffer block的格式化与DBWR操作,直接从PGA写入磁盘

(2)      不检查表中现有的block是否有空闲空间,直接在表的高水位线(HWM)以上插入

(3)      如果在数据库处于非归档模式下,或者是数据就处于归档模式,表级处于nologging状态下,只有少量的空间信息redo写入、不写入数据undo(因为要回滚时可以直接回退到高水线即可,而不需要针对insert生成delete的回滚记录),所以在特定的情况下,直接路径(direct-path)的insert方式,在性能上远远快于常规的串行插入方式。

2.2、使用direct-path insert需要特别注意的要点

2.2.1 DB非force loggging模式下direct-path insert对redo与undo的写入影响

如果在数据库处于归档模式,以及表处于logging模式下,直接路径(direct-path)性能提升会大打折扣,因为,虽然direct-path能生效,但是仍然会记录下完整的redo和undo。

也就是说,在归档模式下,还需要将表改成nologging模式,才不会写数据的redo和undo。

2.2.2 DB force logging模式下direct-pathinsert对redo的写入影响


Note: If the database or tablespace is in FORCE LOGGING mode, then

direct-path INSERT always logs, regardless of the logging setting.

如果数据库或表空间在forcelogging模式,则direct-path insert总是会写日志,无论logging如何设置。

3、使用直接路径(direct-path)insert的方法

3.1 方法一:使用/*+ APPEND */ hint方式

以下为ORACLE官方技术资料对APPENDhint的说明:


APPEND hint: Instructs the optimizer to use direct-path INSERT (data is appended to the

end of the table, regardless of whether there is free space in blocks below the high

watermark)

3.1.1 数据库非归档模式下使用/*+ APPEND*/ hint方式

当数据库处于非归档模式下,不管表为logging模式还是nologging模式,使用/*+APPEND */ hint,既可以使用direct-path,还将不记录redo和undo

用法如下:


INSERT /*+ APPEND */ INTO new_object SELECT * FROM dba_objects;

3.1.2 数据库处于归模模式下使用/*+APPEND */ hint方式

当数据库处于归模模式下,若表为logging模式,即便使用/*+APPEND */ hint,虽然direct-path可以起到作用,但是insert操作仍然会写redo记录,就算你在insert语句上加nologging也不会有效果,redo日志与undo照写不误。

需要通修改表或修改索引,或修改表空间的no-logging模式来达到不写redo与undo的效果

以下为从metalink(文档ID166727.1)中找到的技术资料:


The APPEND hint is required for using serial direct-load INSERT.

Direct-load INSERT operations can be done without logging of redo

information in case the database is in ARCHIVELOG mode.

Redo information generation is suppressed by setting no-logging

mode for the table, partition, or index into which data will be

inserted by using an ALTER TABLE, ALTER INDEX, or ALTER TABLESPACE

command.

用法如下:


Alter table new_object nologging;

INSERT /*+ APPEND */ INTO new_object SELECT * FROM dba_objects;

3.2  方法二:DML并行模式的方式

DML并行模式下,direct-path插入方式是默认的,当然,在DML并行模式下如果想不使用direct-path插入,可以通过加noappendhint实现。以下是DML并行模式下的direct-path插入:

并行DML的前提条件:

(1)ORACLE版本为Oracle Enterprise Edition

(2)操作的会话开启并行DML

(3)下面三项要求必须满足一项:

1)目标表上开启并行属性(DEGREE)

2)插入语句中指定并行提示(/*+ parallel n */)

3)有设置PARALLEL_DEGREE_POLICY参数的值为AUTO


以数据库为非归档模式用法为例(注意归档模式,还需将表改成nologging模式):

(1)alter session enable parallel dml;

语句还有选项有::ALTER SESSION { ENABLE | FORCE } PARALLEL DML;

(2)alter table new_object_directpath parallel 8;

(3)insert /*+PARALLEL(new_object_directpath, 8) */into new_object_directpath
nologging select
* from new_object_old;

4、归档模式下传统串行方式与direct-path方式insert性能对比

环境说明:


源表名


test_dba_objects


源表行数


1630104


源表segment大小


184MB

操作步骤与性能对比结果如下:


传统串行insert方式


APPEND hint的direct-path insert方式


DML并行的direct-path insert方式


(1)建表与修改设定

SQL>create table new_object_directpath as select * from test_dba_objects where 1=2

SQL>alter table new_object_directpath nologging

SQL> SET TIMING ON

Elapsed: 00:00:00.54

(2)insert耗时

SQL> insert into new_object_directpath nologgingselect * from test_dba_objects;

1630104 rows created.

Elapsed: 00:00:12.43

未产生数据redo与undo


(1)建表与修改设定

SQL>create table new_object_directpath as select * from test_dba_objects where 1=2

SQL>alter table new_object_directpath nologging

SQL> SET TIMING ON

Elapsed: 00:00:00.54

(2)insert耗时

SQL> insert  /*+APPEND */ into new_object_directpath select * from test_dba_objects;

1630104 rows created.

Elapsed: 00:00:05.83

未产生数据redo与undo


SQL>create table new_object_directpath as select * from test_dba_objects where 1=2

SQL>alter table new_object_directpath nologging

SQL> SET TIMING ON

Elapsed: 00:00:00.54

(2)修改表的并行模式

SQL> alter table new_object_directpath parallel 8;

(3)       insert耗时

SQL> insert /*+parallel (new_object_directpath,8) */ into new_object_directpath select * from test_dba_objects;

1630104 rows created.

Elapsed: 00:00:05.61

未产生数据redo与undo

本文作者:黎俊杰(网名:踩点),从事”系统架构、操作系统、存储设备、数据库、中间件、应用程序“六个层面系统性的性能优化工作

欢迎加入 系统性能优化专业群,共同探讨性能优化技术。群号:258187244

时间: 2024-12-16 16:40:33

用直接路径(direct-path)insert提升性能的两种方法的相关文章

dos批处理运行带空格路径软件的两种方法

最近在学习dos批处理时遇到一个问题,就是运行特定路径程序时如果路径中带有空格则会出现问题,于是去网上查找解决方法,总结了两种方法如下: 例如:打开英伟达控制面板,路径为C:\Program Files\NVIDIA Corporation\Control Panel Client\nvcplui.exe 此时如果直接用start C:\Program Files\NVIDIA Corporation\Control Panel Client\nvcplui.exe会提示说找不到文件,那么如何解

select into from和insert into select from两种表复制语句区别

select into from和insert into select from两种表复制语句区别 select * into target_table from source_table; insert into target_table(column1,column2) select column1,5 from source_table; 以上两句都是将源表source_table的记录插入到目标表target_table,但两句又有区别.第一句(select into from)要求目标

docker 修改镜像和容器的存放路径(最新自己实践了第三种方法)

原文:docker 修改镜像和容器的存放路径(最新自己实践了第三种方法) docker info :查看docker的存储等相关信息. 将路径修改至挂载磁盘中 前提:磁盘已挂载成功 方法一: 1.停止docker 服务 service docker stop 2.备份数据到新的存放路径 cp -r /var/lib/docker/* /mnt/docker 3.备份 /var/lib/docker 路径 mv /var/lib/docker /var/lib/dockerbak} 4.创建软连接

Tomcat 设置虚拟路径US现金盘平台搭建的几种方法及为什么设置虚拟路径

很多朋友US现金盘平台搭建论坛:haozbbs.com Q1446595067 都会很疑惑,既然我们都知道在Tomcat服务器上部署项目只要将项目打包,然后放到webapps目录下就可以了,为什么还需要配置虚拟路径?的确,把项目放到webapps目录下非常方便,至少在部署一个项目时,直接把项目扔到webapps目录下所进行的操作会比设置虚拟路径容易的多.但是如果考虑到长久性的操作以及多个项目呢? 设置虚拟路径的优势我总结有两点,当然这只是很普通.很常见的两点优势:第一.我们开发一个项目,在未定版

表中输入数据的两种方法(insert增)

1.通过点击按钮来执行往表中添加数据.(数据库和表的创建不在详细介绍,请自动阅读数据库和表的创建) 第一种方法:直接使用SQL来操作数据库,调用execSQL(sql)语句 public class MainActivity extends AppCompatActivity { private Button mInsertButton; private MySqliteHelper mMySqliteHelper; private SQLiteDatabase db; @Override pr

js里面可以提升性能的有哪些方法

1.懒加载 常见的就是图片的懒加载效果,每次浏览网页的时候,不是一次性将网页中的图片都加载过来,而是将可见范围内的图片加载过来,等到用户浏览下面网页的时候,再开始加载没有加载出来的图片 2. 事件委托 事件委托就是给当前要绑定事件的父元素绑定要绑定的事件,通过事件源来判定当前点击的是哪个元素.这样做是为了减少事件的绑定次数,提高性能,而且还可以实现对未来元素的绑定. 3.函数的节流与放流 函数的防抖就是通过定时器,来稀释事件触发的频率,只有停止对当前事件的触发,才会执行当前事件要执行的函数. 函

.NET开发人员必看:提高ASP.NET Web应用性能的24种方法和技巧——转

性能问题到底该如何解决?以下是应用系统发布前,作为 .NET 开发人员需要检查的点. 1.debug=「false」 当创建 ASP.NET Web应用程序,默认设置为「true」.开发过程中,设置为「true」是非常有用多,但在应用程序发布部署时,需将其设置为「false」. <compilation defaultLanguage="C#" debug="false" targetFramework="4.0" />2.关闭 tr

提高 ASP.NET Web 应用性能的 24 种方法和技巧

那性能问题到底该如何解决?以下是应用系统发布前,作为 .NET 开发人员需要检查的点. 1.debug=「false」 当创建 ASP.NET Web应用程序,默认设置为「true」.开发过程中,设置为「true」是非常有用多,但在应用程序发布部署时,需将其设置为「false」. <compilation defaultLanguage="C#" debug="false" targetFramework="4.0" /> 2.关闭

提高 ASP.NET Web 应用性能的 24 种方法和技巧(转载)

在这篇文章中,将介绍一些提高 ASP.NET Web 应用性能的方法和技巧.众所周知,解决性能问题是一项繁琐的工作,当出现性能问题,每个人都会归咎于编写代码的开发人员. 以下为译文 那性能问题到底该如何解决?以下是应用系统发布前,作为 .NET 开发人员需要检查的点. 1.debug=「false」 当创建 ASP.Net Web应用程序,默认设置为「true」.开发过程中,设置为「true」是非常有用多,但在应用程序发布部署时,需将其设置为「false」. <compilation defau