SQL迁移到ORACLE实例

nohup ./command.sh > output 2>&1 &

　　

日常运维中，我们经常会有数据库不同类型的迁移，比较多的就是从sql server迁移到oracle 的情况，前一阶段正好有一个类似的项目进行，我将其中的一些注意事项记录下来。

一、迁移的方案

之前也进行过sql -> oracle的迁移，使用过sql server的dts也单独自己写过sqlloader脚本，但是两种方案都不是很满意，dts经常出错，sqlldr的手工编辑很费劲，稍不注意就会写错。

这次参考了http://www.cnblogs.com/hiizsk/archive/2011/07/10/2102452.html

使用ORACLE SQL DEVELOPER进行了操作，效果不错。

以下有几个需要特别注意的事情，提前说，很重要的。

  1. ORACLE SQL DEVELOPER不是pl/sql developer，这个要注意啊
  2. ORACLE SQL DEVELOPER的版本问题，上面地址参考文档或者从oracle官方站点下载的我都没有试验成功，反而到是一个比较老的版本3.0.04的版本试验成功了，在文档最后我提供了下载，这个版本是没有jre的，对应的是6不是7啊，请自行安装，在首次运行的时候提示指定jre6的路径，指定对了就可以正常运行了。
  3. 上面文档中没有提及怎么导入，这个是非常重要的，需要将导出的文档上传到服务器执行。
  4. 编码，这个是折腾我最多的内容，因为sql server2008 R2不支持bcp的utf-8导出，但是oracle 生产机现在基本都是al32utf8的，所以需要手工将导出的data文件夹的内容转码到utf-8.EditPlus有一个批量转码的功能，非常好用对小文件批量操作很好，我的480多个文件基本都是靠它完成的。对于大于100M以上的文件editplus完全hang不住，只能使用ultraedit，我用它执行2G多的一个文件，几分钟搞定。

二、实际步骤

此步骤很多参考绝殇 的内容啊，版权是他的啊。我在其中补充和修正了一些内容。

  1.  第一部分：获取工具

不建议去oracle官网下载，虽然支持到oracle 12C,反正我是没用它弄好我的sql server 2008 R2到oracle 11G 的转换，能使用的人如果成功告诉我下。

直接到文档最后下载提供的内容即可，注意自行安装jre6

    2.   下载SQL SERVER的驱动程序

绝殇说的”点击菜单帮助，选择检查更新，弹出检查更新向导窗口”我一直没成功，我只好自己自行下载了jtds-1.2.2-dist，这个我也提供了下载。关联方式如下

启动develop -----工具-----首选项-------数据库-----第三方jdbc驱动程序，添加条目选中jtds的文件，然后重启develop即可。

  1. 连接oracle和sql,建立账户

基本和文档一样（不清楚脚本见http://www.cnblogs.com/hiizsk/archive/2011/07/10/2102452.html），这里多说一句，默认新创建的用户的默认表空间是user,我不建议这样，新建立一个表空间，然后建立的MIGRATONS用户的表空间使用新建的，尽量不要影响默认表空间。

另外后面脚本执行完毕后，创建的表的默认空间也是user，这个时候导入数据前建议在新建一个表空间，将这些表移动到新表空间如newtbs。

Select ‘alter table ‘||table_name||‘ move tablespace newtbs;‘ from user_all_tables;

3. 数据库移植向导等

完全可按照文档执行，最后一步也是脱机即可。

（1）SqlServer中的架构到Oracle中的模式，名称的处理

这部分不用这么处理，后面我有更好的办法，跳过

（2）转移数据

从这部分后，文档语焉不详，其实这才是执行导入容易出错的地方。首先导出数据执行unload_script [server] [username] [password]

这个执行可以在本机使用cmd执行，注意看下生成的目录结构如下

导出数据可以在2014-09-28_17-02-42下执行unload_script.bat

我的项目导出10G左右大概在十几分钟即可。

接下来就是转码工作了，在上图的data目录中，选中文件使用editplus或者ultraedit就可以把文件转码到utf8格式。

（3）导入数据

把全部的文件上传到linux服务器（你的oracle不会运行在windows下吧？）

(1) 修改shell文件

修改dbo文件下的oracle_ctl.sh文件

增加

export NLS_LANG=AMERICAN_AMERICA.AL32UTF8

注意这里的值是你目的oracle的nls值，可以自行查询

如果您的文件中有类似我的超过500M的大文件，修改默认的sqlldr语句

默认：

sqlldr $1/$2 control=control/dbo_jzprod.uf_bud_payoutdetthird.ctl log=log/dbo_jzprod.uf_bud_payoutdetthird.log

在后面增加下面的语句采用平行append方式，跳过索引

 direct=true parallel=true skip_index_maintenance=true

(2) 修改control文件

如果你使用了上面的direct=true的数据，那对应的control文件也需要修改，如上面的dbo_jzprod.uf_bud_payoutdetthird，control文件在control目录下,如：

load data

infile ‘data/dbo_jzprod.CARDCOMBINATIONDETAIL.dat‘

 "str ‘<EORD>‘"

into table dbo_jzprod.CARDCOMBINATIONDETAIL

fields terminated by ‘<EOFD>‘

trailing nullcols

需要在into 之前增加APPEND

(3) 执行

执行shell，可能大家觉得非常简单，但是也需要有些注意事项

./**.sh 没问题，但是我们需要注意，我们需要执行dbo目录下的shell

因为默认的developer给我们生成了很多层的sh，我们需要执行最内层的sh

3.1：^M的问题：

我们编辑的sh,执行会报错，vi会发现内部的每行最后存在一个^M

使用如下代码即可。

 :1,$ s/^M//g

^M 输入方法： ctrl+V ,ctrl+M

3.2：后台运行

直接运行shell需要时间比较长，我们采用nohup后台进程运行的方式

nohup ./command.sh > output 2>&1 &

注意这里回车exit一直到退出此进程，然后重新启动一个新进程

Tail –f output观测实际的进展即可。

3.3 最后导出成功后，需要重建索引并且迁移到单独的表空间，对lob字段单独表空间存储等

oracle sql developer:http://pan.baidu.com/s/1hq7oIUg

jtds:http://pan.baidu.com/s/1sjO7vop

时间： 2024-11-07 15:31:48

SQL迁移到ORACLE实例的相关文章

win7 X64系统上 PL/SQL不能识别Oracle实例

电脑系统为Win7 64位,安装的PLSql为64位,安装的Oracle客户端为运行时类型的,应该为32位客户端 电脑上之前安装的32位toad可以识别Oracle实例 在系统添加了oracle_home ,TNS_ADMIN,NLS_LANG 后,修改了PLSql中的Oracle主目录和oci库后,还是不能识别 其中,PLSql中的Oracle主目录下拉框没有识别系统中的oracle_home,是自己手动填写的. 然后安装了32位PLSQL后,PLSql配置中中的Oracle主目录可以识别,选

使用 Oracle GoldenGate 在 Microsoft SQL Server 和 Oracle Database 之间复制事务

使用 Oracle GoldenGate 在 Microsoft SQL Server 和 Oracle Database 之间复制事务 作者:Nikolay Manchev 分步构建一个跨这些平台的简单事务复制示例. 2011 年 8 月发布 大多数关注数据复制的 Oracle 技术专家都熟悉 Oracle Streams.在 2009 年之前,Streams 一直是推荐使用的最流行的 Oracle 数据分发技术. 2009 年 7 月,Oracle 收购了 GoldenGate 这一数据库复

用sql语句导出oracle中的存储过程和函数

用sql语句导出oracle中的存储过程和函数: SET echo off ; SET heading off ; SET feedback off ; SPOOL 'C:/PRC.SQL' replace SELECT CASE WHEN LINE = 1 THEN 'CREATE OR REPLACE ' || TEXT WHEN LINE = MAX_LINE THEN TEXT || CHR(10 ) || '/' ELSE TEXT END FROM USER_SOURCE A LEF

sql优化（oracle）- 第一部分 知识准备

第一部分 知识准备                                               1.  sql执行过程                     2.  sql 共享                   3.  绑定变量                      4.  数据表访问方式 5.  sql 执行顺序 6.  索引使用 1. sql执行过程1)执行过程 当一个oracle实例接收到一条sql后,执行过程如下: 1) create  a cursor  创建

Linux/Unix shell 监控Oracle实例(monitor instance)

使用shell脚本实现对Oracle数据库的监控与管理将大大简化DBA的工作负担,如常见的对实例的监控,监听的监控,告警日志的监控,以及数据库的备份,AWR report的自动邮件等.本文给出Linux 下使用 shell 脚本来监控 Oracle 实例. Linux Shell的相关参考:        Linux/Unix shell 脚本中调用SQL,RMAN脚本        Linux/Unix shell sql 之间传递变量        Linux/Unix shell 调用 P

SQL语句学习手册实例版

SQL语句学习手册实例版 表操作 例1  对于表的教学管理数据库中的表 STUDENTS ,可以定义如下: CREATE  TABLE  STUDENTS (SNO      NUMERIC (6, 0) NOT NULL SNAME    CHAR (8) NOT NULL AGE      NUMERIC(3,0) SEX      CHAR(2) BPLACE  CHAR(20) PRIMARY KEY(SNO)) 例2  对于表的教学管理数据库中的表 ENROLLS ,可以定义如下: C

Oracle实例和Oracle数据库(Oracle体系结构)

--========================================== --Oracle实例和Oracle数据库(Oracle体系结构) --========================================== /* 对于初接触Oracle 数据库的人来讲,很容易混淆的两个概念即是Oracle 实例和Oracle 数据库.这两 概念不同于SQL sever下的实例与数据库,当然也有些相似之处.只是在SQL server我们根本不需要花费太 多的精力去搞清SQL实

oracle实例诡异down的真实原因

oracle实例诡异down的真实原因 1.监控同事说oracle测试库又自动down了. 我登录检查一看,没有oracle的后台进程在跑,oracle实例确实被关闭,马上去启动吧. # 启动失败 SQL> startup; ORACLE instance started. Total System Global Area 1603411968 bytes Fixed Size              2213776 bytes Variable Size                989

手动创建Oracle实例

手工建库步骤 Step 1: Specify an Instance Identifier (SID)(指定一个实例的标识符SID)Step 2: Ensure That the Required Environment Variables Are Set(确认环境变量的设置)Step 3: Choose a Database Administrator Authentication Method(决定数据库管理员的认证方法)Step 4: Create the Initialization P