Oracle 11G 数据库迁移【expdp/impdp】

转载

mb5fe55c3c754d7 2019-06-19 16:28:00

0x01 环境

A 机器，操作系统 CentOS7.3，Oracle版本：11G，IP地址：192.168.1.11B 机器，操作系统 CentOS7.3，Oracle版本：11G，IP地址：192.168.1.12

将数据库从A机器迁移到B机器A机器 Oracle 监听SID：orcl, 帐号：CINRAD，密码：*，表空间名称：CINRAD_DATA, 表空间文件大小：共10个文件，每个文件初始大小10G，可自动增长，增长幅度100M，最大大小为30G，表空间中的数据约为120G左右

B机器 Oracle 监听SID：orcl

0x02 迁移

1. 使用dba登录A机器的Oracle数据库

sqlplus / as sysdba2. 创建数据库导出目录

目录可自定义。若系统中无该目录，则手动创建，并赋予777权限

SQL > create directory dumpdir as '/data/oracle/dump';3. 赋予Oracle用户对于导出目录的读写权限

SQL > grant write,read on directory dumpdir to CINRAD;4. 使用expdp导出数据

进入Linux命令行，登录Oracle帐号，使用导出工具expdp对CINRAD用户下的所有数据导出【可使用并行参数paraller进行多文件同时导出】单文件导出：

expdp CINRAD/cinrad@orcl directory=dumpdir dumpfile=cinrad.dump

多文件并行导出：

expdp CINRAD/cinrad@orcl directory=dumpdir dumpfile=cinrad_20180204_%U.dump filesize=500M paraller=5

// filesize=500M单文件最大500M

// paraller = 5 并行数为5

这里，我导出的是单文件，下面，以单文件导出为例，继续进行。

5. 传输导出文件

将A机器导到的dump文件传输到B机器/data/oracle/dump目录下

scp /data/oracle/dump/cinrad.dump root@192.168.1.12:/data/oracle/dump/cinrad.dump

scp /data/oracle/dump/export.log root@192.168.1.12:/data/oracle/dump/export.log

也可以将两个导出文件压缩后一起传输

6. 使用dba登录B机器的Oracle数据库

sqlplus / as sysdba 7. 创建与A机器相同的数据表空间

create tablespace CINRAD_DATA datafile '/share/database/oracle/cinrad01.dbf' size 10G autoextend on next 100Mmaxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad02.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad03.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad04.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad05.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad06.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad07.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad08.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad09.dbf' size 10G autoextend on next 100M maxsize 30G;

alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad10.dbf' size 10G autoextend on next 100M maxsize 30G;

创建数据表空间，并向该表空间中添加数据文件

8. 创建用户，并指定默认表空间

创建与A机器相同的用户，表将表空间CINRAD_DATA指定给该用户

SQL > CREATE USER CINRAD IDENTIFIED BY cinrad DEFAULT TABLESPACE CINRAD_DATA

// IDENTIFIED BY cinrad 此cinrad 为密码，可更换

// DEFAULT TABLESPACE CINRAD_DATACINRAD_DATA 为指定的默认表空间9. 授权

B机器的相应的Oracle用户创建完毕之后，需要给该用户相应的数据库操作权限，与A相同或者直接赋予所有权限

SQL > grant all privileges to CINRAD

// CINRAD 为用户名10. 创建导入目录

在B机器上创建导入目录，并授予该目录777 权限，在Oracle中创建该目录

SQL > create directory dumpdir as '/data/oracle/dump';11. 授予Oracle用户导入目录读写权限

SQL > grant write,read on directory dumpdir to CINRAD;12. 使用impdp导入数据

进入Linux命令行，登录Oracle帐号，使用导出工具impdp对数据进行导入

impdp system/oracle@orcl directory=dumpdir dumpfile=cinrad.dump parallel=10

此次导出从晚上22点开始，次日01:13:58结束，耗时过长，需要优化。主要针对索引导入的效率，导入日志见附件。导入选项：

table_exists_action ： skip 是如果已存在表，则跳过并处理下一个对象；append是为表增加数据；truncate是截断表，然后为其增加新数据；replace是删除已存在表，重新建表并追加数据 13. 检查迁移数据

0x03 错误

若没有遇到报错，则可忽略，进行0x04的优化

1. 使用expdp/impdp工具时报错

1. Oracle软件与数据库不匹配错误：

问题描述：

ORA-31626: job does not exist

ORA-31637: cannot create job SYS_EXPORT_SCHEMA_01 for user SYSTEM

ORA-06512: at "SYS.DBMS_SYS_ERROR", line 95

ORA-00942:table or view does not exist

解决方案：

使用DBA用户登录Oracle数据库

执行以下代码SQL>@?/rdbms/admin/catalog.sql

SQL>@?/rdbms/admin/catproc.sql

[后续此库出现问题：EXP-00056: ORACLE error 932 encountered] ，可继续执行SQL> @?/rdbms/admin/catmetx.sql

SQL> @?/rdbms/admin/utlrp.sql2. 重启Oracle数据库报错

1. 数据库无法正常关闭，并锁定内存问题

问题描述：在数据库中执行shutdown immediate关闭数据库，报错：

ORA-27102: out of memory

Linux Error: 12: Cannot allocate memory

查看Linux中虚拟内存/dev/shm的占用情况 [命令：df -hT]，发现占用在90%以上，内存已经被锁定无法释放

解决方案:

在Linux中执行 ps -ef | grep oracle ，查看oracle进行的pid

使用 kill -9 {pid} 的方式将Oracle进程杀死

使用DBA登录Oracle

startup 启动数据库 3. 数据导入过程中报错

1. DB_LINK创建失败，权限不足

问题描述：导入过程中，导入DB_LINK时提示，权限不足解决方案：赋予该用户DBA的权限或所有权限即可

2. DB_LINKE 创建失败，缺失关键字

问题描述：

失败的 sql 为:

CREATE DATABASE LINK "ASOM"CONNECT TO "ASOM" IDENTIFIED BY VALUES '05535CD93437C21A745CE9EB530617B269'AUTHENTICATED BY "ASOM" IDENTIFIED BY VALUES '0506C0E222927A938BF9F44DCB31C2038D'USING '10.36.6.55:1521/orcl'

ORA-00905: 缺失关键字

解决方案：待解决，暂时导入完成后手动创建。

3. 用户不存在

问题描述：

处理对象类型 SCHEMA_EXPORT/TABLE/GRANT/OWNER_GRANT/OBJECT_GRANT

ORA-39083: 对象类型 OBJECT_GRANT 创建失败, 出现错误:

ORA-01917: 用户或角色 'CINRAD_META' 不存在

失败的 sql 为:

GRANT SELECT ON "CINRAD"."STA_RADAR" TO "CINRAD_META"

ORA-39083: 对象类型 OBJECT_GRANT 创建失败, 出现错误:

ORA-01917: 用户或角色 'CINRAD_META' 不存在

失败的 sql 为:

GRANT SELECT ON "CINRAD"."TEST_STA_RADAR" TO "CINRAD_META"

解决方案：若该用户下的数据里有你想要导入的数据，则创建该用户重新导入，若没有你想导入的数据，则忽略即可。

4. 视图存在编译警告

问题描述：

ORA-39082: 对象类型 VIEW:"CINRAD"."V_AWS_OBSERVE_DATA" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_SONDE_OBSERVE_DATA" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_FLASHLIGHT_OBSERV_DATA_HIS" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_STA_AWS_REG" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_AWS_OBSERVE_REG" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_EFF" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_OUTSIDE" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_UTILIZATION" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_PARTAKE" 已创建, 但带有编译警告

ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_LOCATEMODE" 已创建, 但带有编译警告

ORA-39082: 对象类型 PACKAGE_BODY:"CINRAD"."GP_DISPATCHER" 已创建, 但带有编译警告

解决方案：使用PLSQL连接数据库，右击该视图，编辑，回车，即可解决。

0x04 优化

1. Oracle内存优化

假设服务器内存32G

1. 查看用于Oracle的虚拟内存[/dev/shm]大小, 执行命令 df -hT

tmpfs tmpfs 16G 2.1G 14G 14% /dev/shm此内存一般为服务器物理内存的50%到80%，若读写均占差不多的比重，则为50%【16G】左右，若写的比重更大，则适当增加虚拟内存的大小

2. 使用DBA登录数据库，查看Oracle内设置的内存大小情况

SQL >show parameter mem;

查看memory_max_target 与 memory_target 的值，该值必须小于等于服务器设置的虚拟内存【16G】的大小，并且大于SGA+PGA的内存大小。若memory_max_target 与 memory_targety 设置过小，则需要调整。

3. 修改Oracle的内存大小【memory_max_target与memory_targety 】以DBA登录Oracle数据库

执行语句：SQL> shutdown immediate 关闭数据库

执行语句：SQL> create pfile from spfile;

编辑pfile文件: Linux 下执行， vim $ORACLE_HOME/dbs/initorcl.ora调整memory_max_target memory_target, 两个值都相同调整 .sga_target 的值调整 .pga_aggregate_target 的值调整原则：/dev/shm虚拟内存 >=【memory_max_target/memory_target】>= sga_target + pga_aggregate_target

若没有按照该原则调整，则会报以下错误：

ORA-00838: Specified value of MEMORY_TARGET is too small, needs to be at least 4016M ORA-00845: MEMORY_TARGET not supported on this system

执行语句：SQL> startup ，启动数据库 2. 关闭归档模式查看归档模式是否开启，执行语句： SQL> select name, log_mode from v$database; 若返回为NOARCHIVELOG, 则归档模式已关闭。

若归档模式开启，则执行语句：alter database noarchivelog; 若不生效，可重启数据库查看效果 3. 更改最大连接数

将最大连接数调整为2000

查看processes和sessions参数SQL> show parameter processesSQL> show parameter sessions

修改processesSQL> alter system set processes=2000 scope=spfile;

修改sessionsSQL> alter system set sessions=2000 scope=spfile; 4. 关闭监听日志

修改文件 $ORACLE_HOME/network/admin/listener.ora在文件顶部添加： LOGGING_LISTENER = OFF保存退出

重启lsnrctl: 执行命令

lsnrctl stop

lsnrctl start