Oracle中利用EXP/IMP工具實現數據遷移
由于產品系統需要進行一次跨平臺的遷移,因此,只能通過EXP/IMP來實現。所幸的是需要遷移的數據庫數據量不大,而且停機時間相對充裕。但是需要遷移的數據庫已經部署了高級復制環境,打算進行一系列的測試,測試包含高級復制環境數據庫在通過EXP/IMP工具遷移到新的環境中,復制環境是否生效。
最先進行的例子是測試一個物化視圖站點能否通過EXP/IMP進行順利遷移。
建立測試庫的過程略,創建好3個待用數據庫,在這個例子中,RAC1.US.ORACLE.COM作為復制主站點,TESTMV.US.ORACLE.COM作為物化視圖站點,TESTMV作為要進行導入操作的物化視圖站點。
為了避免誤會,需要說明一下:由于剛剛做完RAC的測試,就進行這個測試,建立數據庫的時候,忘了修改ORACLE_SID系統變量,因此數據庫的名稱叫RAC1。這個測試中,沒有RAC的環境,RAC1只是一個單INSTANCE數據庫。
首先需要說明的是,由于部署了高級復制環境,導入和導出必須采用全庫級別。否則會導致復制環境無法完全導入:
下面是復制環境的建立和測試數據的準備,首先是創建測試帳號:
SQL> CONN SYSTEM/TEST@RAC1已連接。
SQL> CREATE USER YANGTK IDENTIFIED BY YANGTK DEFAULT TABLESPACE NDMAIN;用戶已創建。
SQL> GRANT CONNECT, RESOURCE TO YANGTK;授權成功。
SQL> CONN YANGTK/YANGTK@RAC1已連接。
SQL> CREATE TABLE T (ID NUMBER, NAME VARCHAR2(30));表已創建。
SQL> ALTER TABLE T ADD CONSTRAINT PK_T PRIMARY KEY (ID);表已更改。
SQL> INSERT INTO T SELECT ROWNUM, TABLE_NAME FROM ALL_TABLES;已創建43行。
SQL> COMMIT;提交完成。
SQL> CREATE INDEX IND_T_NAME ON T (NAME) TABLESPACE NDMAIN;索引已創建。
SQL> CREATE TABLE T1 (ID NUMBER PRIMARY KEY, FID NUMBER, NAME VARCHAR2(30));表已創建。
SQL> INSERT INTO T1 SELECT ROWNUM, MOD(ROWNUM, 43) + 1,
SYNONYM_NAME FROM ALL_SYNONYMS;已創建12239行。
SQL> COMMIT;提交完成。
SQL> ALTER TABLE T1 ADD CONSTRAINT FK_T1_FID
FOREIGN KEY (FID) REFERENCES T(ID);表已更改。
SQL> CREATE INDEX IND_T1_FID ON T1(FID);索引已創建。
下面建立主站點環境:
SQL> CONN SYSTEM/TEST@RAC1已連接。
SQL> CREATE USER REPADMIN IDENTIFIED BY REPADMIN DEFAULT TABLESPACE NDMAIN;用戶已創建。
SQL> BEGIN
2 DBMS_REPCAT_ADMIN.GRANT_ADMIN_ANY_SCHEMA(USERNAME => 'REPADMIN');
3 END;
4 /PL/SQL 過程已成功完成。
SQL> GRANT COMMENT ANY TABLE TO REPADMIN;授權成功。
SQL> GRANT LOCK ANY TABLE TO REPADMIN;授權成功。
SQL> GRANT SELECT ANY DICTIONARY TO REPADMIN;授權成功。
SQL> GRANT SELECT_CATALOG_ROLE TO REPADMIN;授權成功。
SQL> GRANT CREATE SESSION TO REPADMIN;授權成功。
SQL> GRANT SELECT ANY TABLE TO REPADMIN;授權成功。
SQL> BEGIN
2 DBMS_DEFER_SYS.REGISTER_PROPAGATOR(USERNAME => 'REPADMIN');
3 END;
4 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT_ADMIN.REGISTER_USER_REPGROUP(USERNAME => 'REPADMIN',
3 PRIVILEGE_TYPE => 'RECEIVER', LIST_OF_GNAMES => NULL);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT_ADMIN.REGISTER_USER_REPGROUP(USERNAME => 'REPADMIN',
3 PRIVILEGE_TYPE => 'PROXY_SNAPADMIN',
4 LIST_OF_GNAMES => NULL);
5 END;
6 /PL/SQL 過程已成功完成。
SQL> CONN REPADMIN/REPADMIN@RAC1已連接。
SQL> BEGIN
2 DBMS_DEFER_SYS.SCHEDULE_PURGE(NEXT_DATE => SYSDATE,
INTERVAL => 'SYSDATE + 1/24', DELAY_SECONDS
=> 0);
3 END;
4 /PL/SQL 過程已成功完成。
建立主體組和主體對象:
SQL> CONNECT REPADMIN/REPADMIN@RAC1已連接。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MASTER_REPGROUP(GNAME => 'REP_GROUP');
3 END;
4 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MASTER_REPOBJECT
(GNAME => 'REP_GROUP', TYPE => 'TABLE',
3 ONAME => 'T', SNAME => 'YANGTK', USE_EXISTING_OBJECT =>
TRUE, COPY_ROWS => FALSE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MASTER_REPOBJECT
(GNAME => 'REP_GROUP', TYPE => 'TABLE',
3 ONAME => 'T1', SNAME => 'YANGTK', USE_EXISTING_OBJECT =>
TRUE, COPY_ROWS => FALSE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MASTER_REPOBJECT(GNAME =>
'REP_GROUP', TYPE => 'INDEX',
3 ONAME => 'IND_T1_FID', SNAME => 'YANGTK',
USE_EXISTING_OBJECT => FALSE, COPY_ROWS => FALSE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.GENERATE_REPLICATION_SUPPORT(SNAME => 'YANGTK',
3 ONAME => 'T', TYPE => 'TABLE', MIN_COMMUNICATION => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.GENERATE_REPLICATION_SUPPORT(SNAME => 'YANGTK',
3 ONAME => 'T1', TYPE => 'TABLE', MIN_COMMUNICATION => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.RESUME_MASTER_ACTIVITY(GNAME => 'REP_GROUP');
3 END;
4 /PL/SQL 過程已成功完成。
SQL> COMMIT;提交完成。
下面配置物化視圖站點:
SQL> CONNECT SYSTEM/TEST@TESTMV已連接。
SQL> CREATE USER MVADMIN IDENTIFIED BY MVADMIN DEFAULT TABLESPACE NDMAIN;用戶已創建。
SQL> BEGIN
2 DBMS_REPCAT_ADMIN.GRANT_ADMIN_ANY_SCHEMA(USERNAME => 'MVADMIN');
3 END;
4 /PL/SQL 過程已成功完成。
SQL> GRANT COMMENT ANY TABLE TO MVADMIN;授權成功。
SQL> GRANT LOCK ANY TABLE TO MVADMIN;授權成功。
SQL> BEGIN
2 DBMS_DEFER_SYS.REGISTER_PROPAGATOR(USERNAME => 'MVADMIN');
3 END;
4 /PL/SQL 過程已成功完成。
SQL> GRANT SELECT ANY DICTIONARY TO MVADMIN;授權成功。
SQL> CREATE PUBLIC DATABASE LINK RAC1.US.ORACLE.COM USING 'RAC1';數據庫鏈接已創建。
SQL> CONNECT MVADMIN/MVADMIN@TESTMV已連接。
SQL> CREATE DATABASE LINK RAC1.US.ORACLE.COM
CONNECT TO REPADMIN IDENTIFIED BY REPADMIN;數據庫鏈接已創建。
建立物化視圖,完成復制環境的配置:
SQL> CONNECT YANGTK/YANGTK@RAC1已連接。
SQL> CREATE MATERIALIZED VIEW LOG ON T;實體化視圖日志已創建。
SQL> CREATE MATERIALIZED VIEW LOG ON T1;實體化視圖日志已創建。
SQL> CONNECT SYSTEM/TEST@TESTMV已連接。
SQL> CREATE USER YANGTK IDENTIFIED BY YANGTK DEFAULT TABLESPACE NDMAIN;用戶已創建。
SQL> GRANT CREATE SESSION, CREATE TABLE, CREATE PROCEDURE, CREATE SEQUENCE,
2 CREATE TRIGGER, CREATE VIEW, CREATE SYNONYM, ALTER SESSION,
3 CREATE MATERIALIZED VIEW, ALTER ANY MATERIALIZED VIEW,
4 CREATE DATABASE LINK TO YANGTK;授權成功。
SQL> GRANT CONNECT, RESOURCE TO YANGTK;授權成功。
SQL> CONNECT YANGTK/YANGTK@TESTMV已連接。
SQL> CREATE DATABASE LINK RAC1.US.ORACLE.COM
CONNECT TO REPADMIN IDENTIFIED BY REPADMIN;數據庫鏈接已創建。
SQL> CONNECT MVADMIN/MVADMIN@TESTMV已連接。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MVIEW_REPGROUP(GNAME => 'REP_GROUP',
MASTER => 'RAC1.US.ORACLE.COM',
3 PROPAGATION_MODE => 'ASYNCHRONOUS');
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REFRESH.MAKE(NAME => 'YANGTK.REP_REFRESH',
LIST => '', NEXT_DATE => SYSDATE,
3 INTERVAL => 'SYSDATE + 1/48', IMPLICIT_DESTROY => FALSE,
ROLLBACK_SEG => '', PUSH_DEFERRED_RPC
=> FALSE,
4 REFRESH_AFTER_ERRORS => FALSE);
5 END;
6 /PL/SQL 過程已成功完成。
SQL> CREATE MATERIALIZED VIEW
2 YANGTK.T REFRESH FAST WITH PRIMARY KEY
3 AS SELECT * FROM [email protected];實體化視圖已創建。
SQL> CREATE MATERIALIZED VIEW
2 YANGTK.T1 REFRESH FAST WITH PRIMARY KEY
3 AS SELECT * FROM [email protected];實體化視圖已創建。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MVIEW_REPOBJECT(GNAME => 'REP_GROUP', SNAME => 'YANGTK',
3 ONAME => 'T', TYPE => 'SNAPSHOT', MIN_COMMUNICATION => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MVIEW_REPOBJECT(GNAME =>
'REP_GROUP', SNAME => 'YANGTK',
3 ONAME => 'T1', TYPE => 'SNAPSHOT', MIN_COMMUNICATION => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REPCAT.CREATE_MVIEW_REPOBJECT(GNAME =>
'REP_GROUP', SNAME => 'YANGTK',
3 ONAME => 'IND_T1_FID', TYPE => 'INDEX',
MIN_COMMUNICATION => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REFRESH.ADD(NAME => 'YANGTK.REP_REFRESH',
3 LIST => 'YANGTK.T', LAX => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> BEGIN
2 DBMS_REFRESH.ADD(NAME => 'YANGTK.REP_REFRESH',
3 LIST => 'YANGTK.T1', LAX => TRUE);
4 END;
5 /PL/SQL 過程已成功完成。
SQL> COMMIT;提交完成。
環境建立完畢,首先備份測試數據庫,然后開始測試。測試步驟仿照真正遷移的步驟:
首先在另一臺服務器上建立一個同名空數據庫,路徑和要遷移的數據庫保持一致,并刪除了沒有必要的用戶。
關閉遷移數據庫和被遷移數據庫的LISTENER.ORA,避免在導出過程中,數據庫發現了修改。
檢查是否存在運行的JOB,如果必要將JOB置為BROKEN狀態。
下面就可以執行全庫導出操作了:
$ exp 'sys as sysdba' file=testmv_full.dmp
full=y buffer=20480000 log=testmv_full.log compress=n導出完畢后關閉遷移數據庫。
將testmv_full.dmp通過ftp拷貝到遷移的目的服務器,并執行導入操作,導入前確認本地tnsnames.ora中已經配置了復制主站點:
$ imp 'sys as sysdba' file=testmv_full.dmp
full=y buffer=20480000 ignore=y log=testmv_full.log經過測試,物化視圖復制環境可以順利的通過EXP/IMP導入到目的數據庫中。
注意事項:
1.Oracle在全庫導入的過程中,必然出現大量的錯誤,這是幾乎無法避免的。這些錯誤有的可以忽略,但是有的可能會對系統造成潛在的威脅。至少有一點是可以肯定的,那就是Oracle提供的那些功能如全文索引、數據挖掘、數據分析、XML等等都不能直接使用,最穩妥的方法是將這些方案完全重建。
2.在導入之前,一定要把上面提到的那些輔助用戶刪除掉,最起碼要把其中的內容清空,否則很可能在導入的時候碰到ORA-00600錯誤而中止。
3.一定要在本地配置好主體站點的TNSNAMES.ORA,這樣才能保證物化視圖可以建立成功。
4.不要將遷移前的數據庫再次打開,否則會造成兩個同名數據庫刷新同一個主體站點的情況
5.使用全庫導入Oracle會自動忽略SYS或者SYSTEM方案下的對象權限。也就是說,在導入開始的時候需要人工記錄所有SYS對象的授權(授予PUBLIC用戶和SYSTEM用戶的除外),然后手工在目標數據庫上授權,否則可能會導致權限的遺漏。
最后想要說明的是,不建議使用這種方法作為數據庫的首選遷移方案。如果可能的話,建議使用用戶級EXP/IMP遷移,最后在新環境中重新建立復制環境。
