oracle迁移postgres之-Ora2Pg

描述

Ora2Pg:甲骨文PostgreSQL数据库模式转换器是一个免费的工具用于Oracle数据库迁移到PostgreSQL兼容模式。它连接Oracle数据库,扫描它自动提取其结构或数据,然后生成SQL脚本,您可以加载到PostgreSQL数据库。Ora2Pg从Oracle数据库逆向工程可以使用巨大的企业数据库迁移或者复制一些Oracle数据成一个PostgreSQL数据库。它很容易使用,不需要任何Oracle数据库知识比提供所需的参数连接Oracle数据库。

安装

首先要感谢Gilles Darold提供了Ora2Pg工具。目前最新的版本1.74

1. 安装依赖包

yum install perl-DBI perl-DBD-Pg perl-ExtUtils-MakeMaker gcc
wget http://search.cpan.org/CPAN/authors/id/P/PY/PYTHIAN/DBD-Oracle-1.74.tar.gz
tar -zxvf DBD-Oracle-1.74.tar.gz
cd DBD-Oracle-1.74
source /home/oracle/.bash_profile
perl Makefile.PL -l
make
make install

2.安装 ora2pg包

下载地址:https://github.com/darold/ora2pg/tree/v17.4

unzip ora2pg-17.4.zip
cd ora2pg-17.4
perl Makefile.PL
make
make install
/usr/local/bin/ora2pg -v --默认安装在/usr/local/bin/目录下;版本为v17.4。
Ora2Pg v17.4

配置

Ora2Pg配置文件默认位置:/etc/ora2pg/ora2pg.conf; 这个在安装Ora2Pg会有提示。

/usr/local/bin/ora2pg -c /etc/ora2pg/ora2pg.conf

下面针对配置做下简单讲解

1. Limiting object to export。

#允许或者(排除)某个对象或者某些对象导出;

/etc/ora2pg/ora2pg.conf
ORACLE_HOME /u01/app/oracle
#This directive is used to set the data source name in the form standard DBI DSN
ORACLE_DSN dbi:Oracle:ora229
ORACLE_USER lottu
ORACLE_PWD li0924
LOGFILE /tmp/Ora2Pg.log
SCHEMA LOTTU
TYPE TABLE INSERT
ALLOW ORATAB
OUTPUT lottu01.sql
[[email protected]_222 ~]# ora2pg -c /etc/ora2pg/ora2pg.conf
[========================>] 1/1 tables (100.0%) end of scanning.
[> ] 0/1 tables (0.0%) end of scanning.
[========================>] 1/1 tables (100.0%) end of table export.
[====> ] 1/6 rows (16.7%) Table ORATAB (1 recs/sec)
[========================>] 6/6 rows (100.0%) on total estimated data (1 sec., avg: 6 recs/sec)
[[email protected]_222 ~]# cat lottu01.sql
-- Generated by Ora2Pg, the Oracle database Schema converter, version 17.4
-- Copyright 2000-2016 Gilles DAROLD. All rights reserved.
-- DATASOURCE: dbi:Oracle:ora229
SET client_encoding TO ‘UTF8‘;
\set ON_ERROR_STOP ON
CREATE TABLE oratab (
id bigint,
name varchar(20)
) ;
-- Generated by Ora2Pg, the Oracle database Schema converter, version 17.4
-- Copyright 2000-2016 Gilles DAROLD. All rights reserved.
-- DATASOURCE: dbi:Oracle:ora229
SET client_encoding TO ‘UTF8‘;
\set ON_ERROR_STOP ON
BEGIN;
INSERT INTO oratab (id,name) VALUES (1001,E‘li0924‘);
ALTER SEQUENCE IF EXISTS ggs_marker_seq RESTART WITH 7117;
ALTER SEQUENCE IF EXISTS ggs_ddl_seq RESTART WITH 7117;
COMMIT

解释:

#参数 ALLOW:指导出匹配的对象;例如:ALLOW EMPLOYEES SALE_.* COUNTRIES .*_GEOM_SEQ :导出的对象名称有 EMPLOYEES, COUNTRIES, 以 ‘SALE_‘开头 以 ‘_GEOM_SEQ‘结尾的。

#参数 EXCLUDE就是排除匹配的对象;与ALLOW相反。

#参数 WHERE:对象记录排除;这个只针对TYPE TABLE.

#上例还可以这样执行;配置文件注释ALLOW/EXCLUDE;在执行命令用-a : allow|-e : exclude来替代。

#执行命令 ora2pg -a "ORATAB" -c /etc/ora2pg/ora2pg.conf

2.Export Oracle tables as foreign table for oracle_fdw

#做oracle迁移到postgres;其中oracle_fdw也是一个很好的方案. 那上例只需改下参数TYPE FDW;并把参数WHERE注释;这对oracle_fdw是一大助力。避免手写外部表脚本。

[[email protected]_222 ~]# ora2pg -c /etc/ora2pg/ora2pg.conf
[========================>] 1/1 tables (100.0%) end of scanning.
[========================>] 1/1 tables (100.0%) end of table export.
[[email protected]_222 ~]# cat lottu02.sql
-- Generated by Ora2Pg, the Oracle database Schema converter, version 17.4
-- Copyright 2000-2016 Gilles DAROLD. All rights reserved.
-- DATASOURCE: dbi:Oracle:ora229
SET client_encoding TO ‘UTF8‘;
\set ON_ERROR_STOP ON
CREATE FOREIGN TABLE oratab (
id bigint,
name varchar(20)
) SERVER orcl OPTIONS(schema ‘LOTTU‘, table ‘ORATAB‘);

3. Modifying object structure

#由上面导出的oratab.id类型是bigint;可是我只需要int就行;不需要字段类型为长整型;name类型由varchar(20)改为text类型。

#同时导出表的名字我也想修改为:lottu

[[email protected]_222 ~]# cat /etc/ora2pg/ora2pg.conf
ORACLE_HOME /u01/app/oracle
#This directive is used to set the data source name in the form standard DBI DSN
ORACLE_DSN dbi:Oracle:ora229
ORACLE_USER lottu
ORACLE_PWD li0924
LOGFILE /tmp/Ora2Pg.log
SCHEMA LOTTU
TYPE TABLE
ALLOW ORATAB
REPLACE_TABLES ORATAB:LOTTU01
MODIFY_TYPE ORATAB:ID:INT,ORATAB:NAME:TEXT
OUTPUT lottu03.sql
[[email protected]_222 ~]# ora2pg -c /etc/ora2pg/ora2pg.conf
[========================>] 1/1 tables (100.0%) end of scanning.
[========================>] 1/1 tables (100.0%) end of table export.
[[email protected]_222 ~]# cat lottu03.sql
-- Generated by Ora2Pg, the Oracle database Schema converter, version 17.4
-- Copyright 2000-2016 Gilles DAROLD. All rights reserved.
-- DATASOURCE: dbi:Oracle:ora229

SET client_encoding TO ‘UTF8‘;

\set ON_ERROR_STOP ON

CREATE TABLE lottu01 (
id int,
name text
) ;

解释:

#参数:REPLACE_TABLES 替换表名;格式REPLACE_TABLES ORIG_TBNAME1:DEST_TBNAME1 ORIG_TBNAME2:DEST_TBNAME2;这个很好理解

#参数:MODIFY_TYPE 指定表中字段类型。

4.Extract procedures/functions/packages

[[email protected]_222 ~]# ora2pg -c /etc/ora2pg/ora2pg.conf
[========================>] 2/2 functions (100.0%) end of output.
[[email protected]_222 ~]# cat lottu04.sql
-- Generated by Ora2Pg, the Oracle database Schema converter, version 17.4
-- Copyright 2000-2016 Gilles DAROLD. All rights reserved.
-- DATASOURCE: dbi:Oracle:ora229
SET client_encoding TO ‘UTF8‘;
\set ON_ERROR_STOP ON
CREATE OR REPLACE FUNCTION ora2pg_16_to10 (v_16_data text) RETURNS bigint AS $body$
DECLARE
v_data bigint;
v_char varchar(18);
BEGIN
v_char:=substring(v_16_data from 2);
select sum(data) into v_data from
(
SELECT (
case substr(upper(v_char),rownum,1)
when ‘A‘ then ‘10‘
when ‘B‘ then ‘11‘
when ‘C‘ then ‘12‘
when ‘D‘ then ‘13‘
when ‘E‘ then ‘14‘
when ‘F‘ then ‘15‘
else substring(v_char from rownum for 1) end
)*power(16,length(v_char)-rownum) data

connect by rownum<=length(v_char)
);
return v_data;
exception
when others then
return null;
end;
$body$
LANGUAGE PLPGSQL
SECURITY DEFINER
;
-- REVOKE ALL ON FUNCTION ora2pg_16_to10 (v_16_data text) FROM PUBLIC;

CREATE OR REPLACE FUNCTION ora2pg_add_1 (v_in_1 bigint,v_in_2 bigint) RETURNS bigint AS $body$
DECLARE

v_data bigint;

BEGIN
v_data := v_in_1+v_in_2;
return v_data;
exception
when others then
return null;
end;
$body$
LANGUAGE PLPGSQL
SECURITY DEFINER
;
-- REVOKE ALL ON FUNCTION ora2pg_add_1 (v_in_1 bigint,v_in_2 bigint) FROM PUBLIC;

[[email protected]_222 ~]# cat /etc/ora2pg/ora2pg.conf
ORACLE_HOME /u01/app/oracle
#This directive is used to set the data source name in the form standard DBI DSN
ORACLE_DSN dbi:Oracle:ora229
ORACLE_USER lottu
ORACLE_PWD li0924
LOGFILE /tmp/Ora2Pg.log
SCHEMA LOTTU
TYPE FUNCTION
ALLOW ORA2PG_.*
OUTPUT lottu04.sql

备注:

上面提供了两个函数;ora2pg_16_to10函数有postgres不支持的语法;ora2pg_add_1函数是简单的函数。意思是说ora2pg支持简单的函数导出;

其中connect by语法是postgres不支持的语法;导出并不会做修改;这样的代码在postgres执行之前需要修改。这个修改代码需要各位的开发技能。

未完待续.....

若更了解Ora2Pg;可以去看官方文档。

【FAQ】

[[email protected]_222 ~]# ora2pg -c /etc/ora2pg/ora2pg.conf

install_driver(Oracle) failed: Can‘t load ‘/usr/local/lib64/perl5/auto/DBD/Oracle/Oracle.so‘ for module DBD::Oracle: libclntsh.so.11.1: cannot open shared object file: No such file or directory at /usr/lib64/perl5/DynaLoader.pm line 200.

at (eval 13) line 3

Compilation failed in require at (eval 13) line 3.

Perhaps a required shared library or dll isn‘t installed where expected

at /usr/local/share/perl5/Ora2Pg.pm line 1323

[[email protected]_222 ~]# source /home/oracle/.bash_profile

[[email protected]_222 ~]# echo $ORACLE_HOME/lib >> /etc/ld.so.conf

时间: 2024-10-12 15:25:04

oracle迁移postgres之-Ora2Pg的相关文章

ORACLE 迁移到 PG 之 ora2pg

1       ORACLE 迁移到 PG 1.1   使用ora2pg 工具 1.1.1     ora2pg简介 Ora2Pg是一个免费的工具,用于将Oracle数据库迁移到PostgreSQL兼容的模式.它连接您的Oracle数据库,自动扫描并提取它的结构或数据,然后生成可以装载到PostgreSQL数据库的SQL脚本.Ora2Pg可以从逆向工程Oracle数据库到大型企业数据库迁移,或者简单地将一些Oracle数据复制到PostgreSQL数据库中.它非常容易使用,并且不需要任何Orac

java项目数据库从oracle迁移到mysql 中 java部分的一些修改

java项目数据库从oracle迁移到mysql: mysql 连接url中useUnicode=true&characterEncoding=UTF-8 的作用:http://blog.csdn.net/afgasdg/article/details/6941712. pom.xml文件中dependency修改:http://mvnrepository.com/artifact/mysql/mysql-connector-java/6.0.6. =======================

适用MySQL Migration Toolkit 1.0 将oracle迁移到mysql中遇到的问题

这里主要说一下我在适用中碰到的问题,主要过程参考 http://www.cnblogs.com/duwenlei/p/3520759.html. 首先启动MySQLMigrationTool.exe 提示“initialized java loader”错误,如下图 后来发现是因为我的jdk是64位,而工具需要32位,再装个32位jdk,我装的是1.7,如果不想改环境变量启动参考 http://javabyraj.blogspot.com/2013/09/solution-for-initial

oracle迁移到mysql分库分表方案之——ogg(goldengate)

之前文章主要介绍了oracle 迁移到mysql,主要是原表原结构迁移,但是实际运维中会发现,到mysql以后需要分库和分表的拆分操作,这个时候,用ogg来做,也是很强大好用的.主要结合ogg的2个参数 参数1:filterUse a FILTER clause to select rows based on a numeric value by using basic operators or one or more Oracle GoldenGate column-conversion fu

oracle、postgres、mysql数据库的建库、创建用户、导人导出备份总结

本文包含的内容:使用命令操作oracle.postgres.mysql的导入导出,包括登录到数据 注:我在公司使用的是Center OS操作系统,所以oracle和postgres均是在Linux使用,在其他工具中未测试:mysql是在自己的笔记本电脑上使用的,均在Linux和Dos命令下使用过. 1.oracle: 切换到oracle用户: su - oracle 登陆数据库:sqlplus 用户名/密码@172.10.103.78:1521/orcl as sysdba;(用户名可使用系统的

从Oracle迁移到MySQL的各种坑及自救方案

当企业内部使用的数据库种类繁杂时,或者有需求更换数据库种类时,都可能会做很多数据迁移的工作.有些迁移很简单,有些迁移可能就会很复杂,大家有没有考虑过为了顺利完成复杂的数据库迁移任务,都需要考虑并解决哪些问题呢? 在以前的工作中,我迁移过Oracle到Informix.Oracle和SQLServer.Oracle到MySQL. 在目前的公司又因为去O的关系,做了大量的迁移工作,栽了不少坑,所以和大家交流一下在迁移的过程中的一些实践. 分享大纲: 去O前的准备与考虑 确定目标数据库 表和数据对象的

迁移postgres时序列错误脚本修复

迁移postgres数据库的时候,有时候会出现序列与数据库值不匹配的现象.参考了https://stackoverflow.com/questions/244243/how-to-reset-postgres-primary-key-sequence-when-it-falls-out-of-sync之后, 改写了一下脚本,执行后可正常使用了. 1 do --check seq not in sync 2 $$ 3 declare 4 _r record; 5 _i bigint; 6 _m b

ora2pg oracle迁移postgresql工具

windows下安装 1. 安装strawberry-perl-5.24.3.1-64bit.msi 2. ora2pg-18.2.zip 解压缩cd 进入目录perl Makefile.PLdmake && dmake install 3. DBI-1.639.tar.gz解压缩cd 进入目录perl Makefile.PLdmakedmake testdmake install 4. DBD-Oracle-1.64.tar.gz 解压缩cd 进入目录perl Makefile.PLdm

ORACLE迁移GP实践

最近在做oracle到greenplum的迁移实践,步骤如下: 1. 使用ora2pg实现Oracle的数据结构迁移到GP的实现过程 2. Oracle的数据迁移到GP的实现过程 1. ora2pg的使用 地址: https://github.com/darold/ora2p 关系图如下: 需要安装DBD-oracle,DBD-pg,DBI模块,配置conf后可以把oracle的数据结构(table,view,package等)转化成PG的数据结构.也可以配置直接把oracle库的数据导入到PG