通过generate解析SQL日志生成xml进行SQL回放

查看Oracle redo日志来分析SQL执行记录

1）设置Oracle数据字典导出路径参数(可选)

shutdown immediate
alter system set UTL_FILE_DIR=‘/opt/oracle/utl‘ scope=spfile; 
execute dbms_logmnr_d.build(dictionary_filename => ‘logminer_dict.ora‘, dictionary_location => ‘/opt/oracle/utl‘);
startup

2）增加需要分析的重做日志文件(在线归档均可)

execute dbms_logmnr.add_logfile(LogFileName=>‘/opt/oracle/OraBase/oradata/inomc/redo01.log‘, options=>dbms_logmnr.new);
execute dbms_logmnr.add_logfile(LogFileName=>‘/opt/oracle/OraBase/oradata/inomc/redo02.log‘, options=>dbms_logmnr.new);
execute dbms_logmnr.add_logfile(LogFileName=>‘/opt/oracle/OraBase/oradata/inomc/redo03.log‘, options=>dbms_logmnr.new);

3）执行日志加载

使用数据字典

execute dbms_logmnr.start_logmnr(DictFileName=> ‘/opt/oracle/utl/logminer_dict.ora‘) ;

使用在线字典

execute dbms_logmnr.start_logmnr(Options=>dbms_logmnr.DICT_FROM_ONLINE_CATALOG) ;

4）查看日志

SELECT sql_redo FROM v$logmnr_contents;

5）结束分析，卸载日志
execute dbms_logmnr.end_logmnr;

在PL/SQL中利用XML ,Oracle提供了几个组件，让开发人员能轻松地利用XML技术。这些组件包括：
1.XML分析程序。即用来分析、构造和验证XML文档。
2.XPath引擎。它是使用Xpath（XML标准的另一个元素）说明语法在内存中搜索XML文档的实用程序。SLT处理器。它在Oracle数据库中支持XSLT，允许您把XML文档转换成其他格式。
3.XML SQL实用程序。可以使用SQL产生XML文档，使您可以在Oracle数据库表格中轻松地插入基于XML的数据。
对于PL/SQL开发人员而言，XML分析程序是最重要的组件。通过它，您可以在Oracle数据库中分析、操纵和转换XML文档。XML分析程序由一套APIs（应用程序编程接口）构成。

===================================================================================================================================================================================

xml generate

生成Test.xml,内容如下


1

2

3

4

5

6

7

8

9

10

<staff content = "name and id">

    <member>

      <name>Arwen</name>

    <eno>123</eno>

  </member>

  <member>

      <name>Tom</name>

    <eno>456</eno>

  </member>  

</staff>

1.生成xml的plsql code:


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

declare

    doc  XMLDOM.DOMDOCUMENT;

    doc_node  XMLDOM.DOMNODE;

    root_node  XMLDOM.DOMNODE;

    user_node XMLDOM.DOMNODE;

    item_node XMLDOM.DOMNODE;

    root_elmt XMLDOM.DOMELEMENT;

    user_elmt XMLDOM.DOMELEMENT;

    item_elmt XMLDOM.DOMELEMENT;

    item_text XMLDOM.DOMTEXT;

begin

   doc := XMLDOM.NEWDOMDOCUMENT;

   xmldom.setVersion(doc, ‘1.0‘);

   xmldom.setCharset(doc, ‘UTF-8‘);

   --根节点

   doc_node := XMLDOM.MAKENODE(doc);

   root_elmt := XMLDOM.CREATEELEMENT(doc,‘staff‘);

   XMLDOM.SETATTRIBUTE(root_elmt,‘content ‘,‘name and id‘);

   root_node:=XMLDOM.APPENDCHILD(doc_node, XMLDOM.MAKENODE(root_elmt));

 

   --节点1

   user_elmt := XMLDOM.CREATEELEMENT(doc,‘member‘);

   user_node :=XMLDOM.APPENDCHILD(root_node, XMLDOM.MAKENODE(user_elmt));

 

     item_elmt :=XMLDOM.CREATEELEMENT(doc,‘name‘);

     item_node :=XMLDOM.APPENDCHILD(user_node, XMLDOM.MAKENODE(item_elmt));

     item_text := XMLDOM.CREATETEXTNODE(doc,‘Arwen‘);

     item_node:=XMLDOM.APPENDCHILD(item_node, XMLDOM.MAKENODE(item_text));

    

     item_elmt :=XMLDOM.CREATEELEMENT(doc,‘eno‘);

     item_node :=XMLDOM.APPENDCHILD(user_node, XMLDOM.MAKENODE(item_elmt));

     item_text := XMLDOM.CREATETEXTNODE(doc,‘123‘);

     item_node:=XMLDOM.APPENDCHILD(item_node, XMLDOM.MAKENODE(item_text));

    

     --节点2

     user_elmt := XMLDOM.CREATEELEMENT(doc,‘member‘);

     user_node :=XMLDOM.APPENDCHILD(root_node, XMLDOM.MAKENODE(user_elmt));

 

     item_elmt :=XMLDOM.CREATEELEMENT(doc,‘name‘);

     item_node :=XMLDOM.APPENDCHILD(user_node, XMLDOM.MAKENODE(item_elmt));

     item_text := XMLDOM.CREATETEXTNODE(doc,‘tom‘);

     item_node:=XMLDOM.APPENDCHILD(item_node, XMLDOM.MAKENODE(item_text));

    

     item_elmt :=XMLDOM.CREATEELEMENT(doc,‘eno‘);

     item_node :=XMLDOM.APPENDCHILD(user_node, XMLDOM.MAKENODE(item_elmt));

     item_text := XMLDOM.CREATETEXTNODE(doc,‘456‘);

     item_node:=XMLDOM.APPENDCHILD(item_node, XMLDOM.MAKENODE(item_text));

    

     --写入操作系统文件中

     XMLDOM.WRITETOFILE(doc,‘DIR‘||‘\Test.xml‘);--注意必须先创建一个文件目录dir

     --可以通过语句 : create or replace directory dir as ‘d:\temp‘

        XMLDOM.FREEDOCUMENT(doc);

 end;

2.将xml encode 成clob 写入文件：


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

declare

    l_f utl_file.file_type;

    clobpart varchar2(2048);

    offset integer;

    l_xmltype XMLTYPE;

    cloblen integer;

    response_clob CLOB;

    resp_domdoc DBMS_XMLDOM.DOMDOCUMENT;

begin

    l_f  := utl_file.fopen(‘TEST_DIR‘,l_full_file_name,‘w‘);

    utl_file.put_line(l_f,‘<?xml version="1.0" encoding="utf-8" standalone="yes"?>‘||chr(13));

    resp_domdoc := SoapEncPrcnScnrPckgRead.encd_root_prcn_scnr_pckg_read(p_psp_resp_doc);

    l_xmltype := dbms_xmldom.getXmlType(resp_domdoc);

    dbms_xmldom.freeDocument(resp_domdoc);

    response_clob := l_xmltype.getClobVal;

    cloblen := LENGTH(response_clob);

    while offset < cloblen

    loop

        clobPart := dbms_lob.substr(response_clob, 1024, offset);

        utl_file.put(l_f, clobPart);

        offset := offset + 1024;

    end loop;

    utl_file.fflush(l_f);

    utl_file.fclose(l_f);

end;

/

3.结合使用XMLDOM和utl_file
    这样生成XML文件非常方便,能满足一般的应用了.但是XMLDOM有个缺点,就是一次性在内存中生成所有xml文件内容,然后写入到磁盘文件中.如果 xml文件太大,比如说有个table有几个G,想把它保存成xml文件.这样可能就会出现内存不足,生成文件失败.那该咋整呢?
    可能首先想到的是用UTL_FILE去生成文件.
    里面的内容全部手动写成xml格式的,然后保存成xml后缀的文件.这样确实可行.但有个麻烦问题时如果一些节点内容含有xml的五个保留字符的话 (&,<,>,‘," 分别是和号,小于号,大于号,单引号,双引号),我们如果以文本方式打开xml文件是看不到节点内容里面有这些保留字的,都转换成了对应 的&amp, &gt, &lt, &apos, &quot.节点指定的是上面的Arwen或123,假如有名字(A&r<w>e‘n")则保存到xml文件中应该改成 (A&ampr&gtw&lte&aposn&quot).如果用xmldom会默认去转换,不用我们管了.如 果用UTL_FILE必须手动写代码去转换.
    假如有表staff(name varchar2(30), eno integer),里面有几个G的内容,要转换成开头讲的那种格式的xml文件。
    --生成xml的代码其中XML文件的头和尾用UTL_FILE直接写入文件中,节点内容用xmldom生成,然后写到clob变量中,再把clob变量值用utl_file写入到xml文件中。


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

declare

  STAFFINFO  UTL_FILE.FILE_TYPE;

  v_temp clob;

  cursor c_table_info is select name,eno from staff;

  v_name varchar2(30);

  v_eno integer;

  doc  XMLDOM.DOMDOCUMENT;

  doc_node XMLDOM.DOMNODE;

  root_node XMLDOM.DOMNODE;

  user_node XMLDOM.DOMNODE;

  item_node XMLDOM.DOMNODE;

  root_elmt XMLDOM.DOMELEMENT;

  user_elmt XMLDOM.DOMELEMENT;

  item_elmt XMLDOM.DOMELEMENT;

  item_text XMLDOM.DOMTEXT;

begin

   --xml header

    STAFFINFO :=utl_file.fopen_nchar(‘DIR‘,‘Test.xml‘,‘W‘,32767);--跟前面说的一样必须先创建一个directory才行

    UTL_FILE.PUT_LINE_NCHAR(STAFFINFO ,‘<staff content = "name and id">‘);

    UTL_FILE.FFLUSH(STAFFINFO );--直接写入到磁盘文件中,不会停留在内存中

    UTL_FILE.FCLOSE(STAFFINFO );

        open c_table_info;

        loop

            fetch c_table_info into v_name,v_eno;

            exit when c_table_info%notfound;

       --XML节点

          doc := XMLDOM.NEWDOMDOCUMENT;

        xmldom.setCharset(doc, ‘UTF-8‘);

      doc_node := XMLDOM.MAKENODE(doc);

      user_elmt := XMLDOM.CREATEELEMENT(doc,‘member‘);

           user_node :=XMLDOM.APPENDCHILD(doc_node, XMLDOM.MAKENODE(user_elmt));

      item_elmt :=XMLDOM.CREATEELEMENT(doc,‘name‘);

      item_node :=XMLDOM.APPENDCHILD(user_node, XMLDOM.MAKENODE(item_elmt));

      item_text := XMLDOM.CREATETEXTNODE(doc,v_name);

      item_node:=XMLDOM.APPENDCHILD(item_node, XMLDOM.MAKENODE(item_text));

      item_elmt :=XMLDOM.CREATEELEMENT(doc,‘eno‘);

      item_node :=XMLDOM.APPENDCHILD(user_node, XMLDOM.MAKENODE(item_elmt));

      item_text := XMLDOM.CREATETEXTNODE(doc,‘eno‘);

      item_node:=XMLDOM.APPENDCHILD(item_node, XMLDOM.MAKENODE(item_text));

      v_temp :=‘ ‘;

        --写入到临时变量v_temp中

      XMLDOM.WRITETOCLOB(doc,v_temp);

      STAFFINFO :=utl_file.fopen_nchar(‘DIR‘,‘Test.xml‘,‘A‘,32767);--以a模式会在文件后添加内容,用w会覆盖之前的内容

      UTL_FILE.PUT_LINE_NCHAR(STAFFINFO ,v_temp);

      UTL_FILE.FFLUSH(STAFFINFO );

      UTL_FILE.FCLOSE(STAFFINFO );

      XMLDOM.FREEDOCUMENT(doc);

    end loop;

    close c_table_info;

    --xml tail

    STAFFINFO :=utl_file.fopen_nchar(‘DIR‘,‘Test.xml‘,‘a‘,32767);

    UTL_FILE.PUT_LINE_NCHAR(STAFFINFO ,‘</staff>‘);

    UTL_FILE.FFLUSH(STAFFINFO );

    UTL_FILE.FCLOSE(STAFFINFO );

end;

原文地址：https://www.cnblogs.com/klb561/p/10962866.html

时间： 2024-11-06 21:24:23

通过generate解析SQL日志生成xml进行SQL回放的相关文章

Android学习之XML数据的三种解析方式以及生成XML文件

首先,我得声明,本博客的思想主要参考了此博客:http://blog.csdn.net/liuhe688/article/details/6415593 不过代码我自己一句句敲的 好了,首先讲一下解析XML的三种方式:(恕我粘贴一下哈) SAX解析器: SAX(Simple API for XML)解析器是一种基于事件的解析器,它的核心是事件处理模式,主要是围绕着事件源以及事件处理器来工作的.当事件源产生事件后,调用事件处理器相应的处理方法,一个事件就可以得到处理.在事件源调用事件处理器中特定方

如何使用GDataXML-HTML生成XML

iOS版本系统自带的XML类只能进行解析,无法生成XML.开源库GDataXML-HTML不仅支持XML解析,还支持生成XML. 1. 添加GDataXML-HTML到项目中. 笔者使用的项目都使用Cocoapods托管,不熟悉Cocoapods可以参考[Cocoapods的安装和使用] 在Podfile文件中添加 pod 'GDataXML-HTML', '~> 1.1.0' 执行以下命令进行添加库到项目中 pod update 2. 为项目添加libxml头文件位置 在项目配置中,为"

使用XML序列化器生成XML文件和利用pull解析XML文件

首先,指定XML格式,我指定的XML格式如下: <?xml version='1.0' encoding='utf-8' standalone='yes' ?> <message> <sms> <body> 陈驰0 </body> <date> 1462162910995 </date> <address> 1380 </address> <type> 1 </type> &

Javascript 解析字符串生成 XML DOM 对象。

Javascript 接收字符串生成 XML DOM 对象.实测对 Firefox .IE6 有效.可用于解析 ajax 的服务器响应结果,也可用于解析自定义字符串.?1. [代码]函数   ppt模版  /** * Parses DOM from XML text.<br /> *  * @author Typhoon.Free.Wolf * @version 2014-02-28_15-51 * @param blDebugFlag *      - Debug flag: true, f

利用oxygen编辑并生成xml文件，并使用JAVA的JAXB技术完成xml的解析

首先下载oxygen软件(Oxygen XML Editor),目前使用的是试用版(可以安装好软件以后get trial licence,获得免费使用30天的权限,当然这里鼓励大家用正版软件!!!) 1 首先建立一个空白XML文件,直接点击下图所示即可: 2 可以使用xml文本编辑界面,或者使用xml树状图编辑界面 切换到xml树状图编辑界面的方法为: 即可调出当前xml文件所对应的xml树状图编辑界面 3 设计并编辑xml文件 根据自己的需要可以利用xml树状图操作界面来方便的设计自己的xml

使用Pull解析器生成XML文件

有些时候,我们需要生成一个XML文件,生成XML文件的方法有很多,如:可以只使用一个StringBuilder组拼XML内容,然后把内容写入到文件中:或者使用DOM API生成XML文件,或者也可以使用pull解析器生成XML文件,这里推荐大家使用Pull解析器. 1.使用Pull解析器生成一个与itcast.xml文件内容相同的myitcast.xml文件,代码在下方 public static String writeXML(List<Person> persons, Writer wri

SQL 联合查询 + XML解析

(select a.EBILLNO, a.EMPNAME, a.APPLYDATE, b.HS_NAME, replace(replace(a.SUMMARY,char(10), ''),char(13),'') as SUMMARY, cast(c.XmlData as XML).value('(/List/item/No/text())[1]','NVARCHAR(300)') as No, cast(c.XmlData as XML).value('(/List/item/zje/text

Android下使用pull解析器生成XML文件、读取XML文件

Android下使用Pull解析器 1,Pull解析器的运行方式与SAX解析器相似.它提供了类似的事件,如:开始元素和结束元素事件. 2,使用parser.next()可以进入下一个元素并触发相应事件. 3,事件将作为一个int数值被发送,因此可以使用一个switch对相应的事件进行处理. 4,当元素开始解析时,调用parser.nextText()方法可以获取下一个Text类型节点的值. 5,相关API: 获得当前节点事件类型:parser.getEventType(); 获得下一节点事件类型

Android开发之使用PULL解析和生成XML

请尊重他人的劳动成果,转载请注明出处:Android开发之使用PULL解析和生成XML 一.使用PULL解析XML 1.PULL简介 我曾在<浅谈XMl解析的几种方式>一文中介绍了使用DOM方式,SAX方式,Jdom方式,以及dom4j的方式来解析XML.除了可以使用以上方式来解析XML文件外,也可以使用Android系统内置的Pull解析器来解析XML文件. Pull解析器的运行方式与SAX解析器相似.它提供了类似的事件,如开始元素和结束元素事件.使用parser.next()可以进入下一个