Oracle 11G 数据库迁移【expdp/impdp】

时间:2024-02-24 10:49:49

转自:http://www.th7.cn/db/Oracle/201802/263773.shtml

0x01 环境 

A 机器,操作系统 CentOS7.3,Oracle版本:11G,IP地址:192.168.1.11B 机器,操作系统 CentOS7.3,Oracle版本:11G,IP地址:192.168.1.12

 

将数据库从A机器迁移到B机器A机器 Oracle 监听SID:orcl, 帐号:CINRAD,密码:*, 表空间名称:CINRAD_DATA, 表空间文件大小:共10个文件,每个文件初始大小10G,可自动增长,增长幅度100M,最大大小为30G,表空间中的数据约为120G左右

 

B机器 Oracle 监听SID:orcl


0x02 迁移 
1. 使用dba登录A机器的Oracle数据库 
sqlplus / as sysdba2. 创建数据库导出目录 

目录可自定义。若系统中无该目录,则手动创建,并赋予777权限


SQL > create directory dumpdir as \'/data/oracle/dump\';3. 赋予Oracle用户对于导出目录的读写权限 
SQL > grant write,read on directory dumpdir to CINRAD;4. 使用expdp导出数据 

进入Linux命令行,登录Oracle帐号,使用导出工具expdp对CINRAD用户下的所有数据导出【可使用并行参数paraller进行多文件同时导出】单文件导出:


expdp CINRAD/cinrad@orcl directory=dumpdir dumpfile=cinrad.dump

多文件并行导出:


expdp CINRAD/cinrad@orcl directory=dumpdir dumpfile=cinrad_20180204_%U.dump filesize=500M paraller=5
// filesize=500M单文件最大500M
// paraller = 5 并行数为5

这里,我导出的是单文件,下面,以单文件导出为例,继续进行。


5. 传输导出文件 

将A机器导到的dump文件传输到B机器/data/oracle/dump目录下


scp /data/oracle/dump/cinrad.dump root@192.168.1.12:/data/oracle/dump/cinrad.dump
scp /data/oracle/dump/export.log root@192.168.1.12:/data/oracle/dump/export.log

也可以将两个导出文件压缩后一起传输


6. 使用dba登录B机器的Oracle数据库 
sqlplus / as sysdba 7. 创建与A机器相同的数据表空间 
create tablespace CINRAD_DATA datafile \'/share/database/oracle/cinrad01.dbf\' size 10G autoextend on next 100Mmaxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad02.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad03.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad04.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad05.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad06.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad07.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad08.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad09.dbf\' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile \'/share/database/oracle/cinrad10.dbf\' size 10G autoextend on next 100M maxsize 30G;

创建数据表空间,并向该表空间中添加数据文件


8. 创建用户,并指定默认表空间 

创建与A机器相同的用户,表将表空间CINRAD_DATA指定给该用户


SQL > CREATE USER CINRAD IDENTIFIED BY cinrad DEFAULT TABLESPACE CINRAD_DATA
// IDENTIFIED BY cinrad 此cinrad 为密码,可更换
// DEFAULT TABLESPACE CINRAD_DATACINRAD_DATA 为指定的默认表空间9. 授权 

B机器的相应的Oracle用户创建完毕之后,需要给该用户相应的数据库操作权限,与A相同或者直接赋予所有权限


SQL > grant all privileges to CINRAD
// CINRAD 为用户名10. 创建导入目录 

在B机器上创建导入目录 ,并授予该目录777 权限 ,在Oracle中创建该目录


SQL > create directory dumpdir as \'/data/oracle/dump\';11. 授予Oracle用户导入目录读写权限 
SQL > grant write,read on directory dumpdir to CINRAD;12. 使用impdp导入数据 

进入Linux命令行,登录Oracle帐号,使用导出工具impdp对数据进行导入


impdp system/oracle@orcl directory=dumpdir dumpfile=cinrad.dump parallel=10

此次导出从晚上22点开始,次日01:13:58结束,耗时过长,需要优化。 主要针对索引导入的效率, 导入日志见附件。导入选项:

table_exists_action : skip 是如果已存在表,则跳过并处理下一个对象;append是为表增加数据;truncate是截断表,然后为其增加新数据;replace是删除已存在表,重新建表并追加数据 13. 检查迁移数据 
0x03 错误 

若没有遇到报错,则可忽略,进行0x04的优化


1. 使用expdp/impdp工具时报错 
1. Oracle软件与数据库不匹配错误: 

问题描述:


ORA-31626: job does not exist 
ORA-31637: cannot create job SYS_EXPORT_SCHEMA_01 for user SYSTEM 
ORA-06512: at "SYS.DBMS_SYS_ERROR", line 95 
ORA-00942:table or view does not exist

解决方案:

使用DBA用户登录Oracle数据库 
执行以下代码SQL>@?/rdbms/admin/catalog.sql
SQL>@?/rdbms/admin/catproc.sql 
[后续此库出现问题:EXP-00056: ORACLE error 932 encountered] , 可继续执行SQL> @?/rdbms/admin/catmetx.sql 
SQL> @?/rdbms/admin/utlrp.sql2. 重启Oracle数据库报错 
1. 数据库无法正常关闭,并锁定内存问题 

问题描述:在数据库中执行shutdown immediate关闭数据库,报错:


ORA-27102: out of memory
Linux Error: 12: Cannot allocate memory

查看Linux中虚拟内存/dev/shm的占用情况 [命令:df -hT],发现占用在90%以上,内存已经被锁定无法释放

 

解决方案:

在Linux中执行 ps -ef | grep oracle ,查看oracle进行的pid 
使用 kill -9 {pid} 的方式将Oracle进程杀死 
使用DBA登录Oracle 
startup 启动数据库 3. 数据导入过程中报错 
1. DB_LINK创建失败,权限不足 

问题描述: 导入过程中,导入DB_LINK时提示,权限不足解决方案: 赋予该用户DBA的权限或所有权限即可


2. DB_LINKE 创建失败,缺失关键字 

问题描述:


失败的 sql 为:
CREATE DATABASE LINK "ASOM"CONNECT TO "ASOM" IDENTIFIED BY VALUES \'05535CD93437C21A745CE9EB530617B269\'AUTHENTICATED BY "ASOM" IDENTIFIED BY VALUES \'0506C0E222927A938BF9F44DCB31C2038D\'USING \'10.36.6.55:1521/orcl\'
ORA-00905: 缺失关键字

解决方案:待解决,暂时导入完成后手动创建。


3. 用户不存在 

问题描述:


处理对象类型 SCHEMA_EXPORT/TABLE/GRANT/OWNER_GRANT/OBJECT_GRANT
ORA-39083: 对象类型 OBJECT_GRANT 创建失败, 出现错误:
ORA-01917: 用户或角色 \'CINRAD_META\' 不存在
失败的 sql 为:
GRANT SELECT ON "CINRAD"."STA_RADAR" TO "CINRAD_META"
ORA-39083: 对象类型 OBJECT_GRANT 创建失败, 出现错误:
ORA-01917: 用户或角色 \'CINRAD_META\' 不存在
失败的 sql 为:
GRANT SELECT ON "CINRAD"."TEST_STA_RADAR" TO "CINRAD_META"

解决方案: 若该用户下的数据里有你想要导入的数据,则创建该用户重新导入,若没有你想导入的数据,则忽略即可。


4. 视图存在编译警告 

问题描述:


ORA-39082: 对象类型 VIEW:"CINRAD"."V_AWS_OBSERVE_DATA" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_SONDE_OBSERVE_DATA" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_FLASHLIGHT_OBSERV_DATA_HIS" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_STA_AWS_REG" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_AWS_OBSERVE_REG" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_EFF" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_OUTSIDE" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_UTILIZATION" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_PARTAKE" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_LOCATEMODE" 已创建, 但带有编译警告
ORA-39082: 对象类型 PACKAGE_BODY:"CINRAD"."GP_DISPATCHER" 已创建, 但带有编译警告

解决方案:使用PLSQL连接数据库,右击该视图,编辑,回车,即可解决。


0x04 优化 
1. Oracle内存优化 

假设服务器内存32G


1. 查看用于Oracle的虚拟内存[/dev/shm]大小, 执行命令 df -hT 

tmpfs tmpfs 16G 2.1G 14G 14% /dev/shm此内存一般为服务器物理内存的50%到80%, 若读写均占差不多的比重,则为50%【16G】左右,若写的比重更大,则适当增加虚拟内存的大小


2. 使用DBA登录数据库,查看Oracle内设置的内存大小情况 
SQL >show parameter mem;

查看memory_max_target 与 memory_target 的值, 该值必须小于等于服务器设置的虚拟内存【16G】的大小,并且大于SGA+PGA的内存大小。若memory_max_target 与 memory_targety 设置过小,则需要调整。


3. 修改Oracle的内存大小【memory_max_target与memory_targety 】以DBA登录Oracle数据库 
执行语句 :SQL> shutdown immediate 关闭数据库 
执行语句 :SQL> create pfile from spfile; 
编辑pfile文件: Linux 下执行 , vim $ORACLE_HOME/dbs/initorcl.ora调整memory_max_target memory_target, 两个值都相同调整 .sga_target 的值调整 .pga_aggregate_target 的值调整原则:/dev/shm虚拟内存 >=【memory_max_target/memory_target】>= sga_target + pga_aggregate_target

若没有按照该原则调整,则会报以下错误 :


ORA-00838: Specified value of MEMORY_TARGET is too small, needs to be at least 4016M ORA-00845: MEMORY_TARGET not supported on this system 
执行语句:SQL> startup ,启动数据库 2. 关闭归档模式查看归档模式是否开启,执行语句 : SQL> select name, log_mode from v$database; 若返回为NOARCHIVELOG, 则归档模式已关闭。 
若归档模式开启,则执行语句:alter database noarchivelog; 若不生效,可重启数据库查看效果 3. 更改最大连接数 

将最大连接数调整为2000

查看processes和sessions参数SQL> show parameter processesSQL> show parameter sessions 
修改processesSQL> alter system set processes=2000 scope=spfile; 
修改sessionsSQL> alter system set sessions=2000 scope=spfile; 4. 关闭监听日志 

修改文件 $ORACLE_HOME/network/admin/listener.ora在文件顶部添加: LOGGING_LISTENER = OFF保存退出

 

重启lsnrctl: 执行命令


lsnrctl stop 
lsnrctl start