通過LogMiner實現Oracle數據庫同步遷移

通過LogMiner實現Oracle數據同步遷移

為瞭實現Oracle數據庫之間的數據同步,網上的資料比較少的時候。最好用的Oracle數據庫同步工具是:GoldenGate ,而GoldenGate是要收費的。那麼還有什麼好的辦法來同步Oracle的數據嗎?沒錯,就是使用LogMiner來實現Oracle數據同步遷移。

一、實現過程

1.創建目錄

在服務器上創建/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR目錄來存儲數據庫的字典信息,如下所示。

mkdir -p /home/oracle/tools/oracle11g/oradata/orcl/LOGMNR

2.配置LogMiner

以oracle用戶身份登錄服務器,並以DBA身份登錄Oracle數據庫,如下所示。

sqlplus /nolog
conn  / as sysdba

接下來,創建字典文件夾配置,如下所示。

CREATE DIRECTORY utlfile AS '/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR';
alter system set utl_file_dir='/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR' scope=spfile;  

註意:由於utl_file_dir隻存在於文件當中,所以scope是以文件方式”spfile”寫入,而不是both。

3.開啟日志追加模式

alter database add supplemental log data;  

隻有開啟後才能看到DML操作記錄,否則隻能看見DML

4.重啟數據庫

SHUTDOWN IMMEDIATE;  
STARTUP; 

5.創建數據同步用戶

創建數據同步用戶,如果已經有可以跳過,直接賦予權限。

create user SYNC identified by SYNC;  #如果存在用戶,則不需要再次創建,直接授權即可
GRANT CONNECT,RESOURCE,DBA,EXECUTE_CATALOG_ROLE TO SYNC;  

6.創建數據字典

切換到要同步數據的用戶,以DBA身份登錄,創建數據字典文件,如下所示。

conn SYNC/SYNC@orcl as sysdba;  
EXECUTE dbms_logmnr_d.build(dictionary_filename => 'dictionary.ora', dictionary_location =>'/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR');  

創建數據字典的命令也可以通過Java代碼來實現,如果使用Java代碼實現的話,首先可以通過JDBC連接到Oracle數據庫,然後執行如下命令。

BEGIN
dbms_logmnr_d.build(dictionary_filename => 'dictionary.ora', dictionary_location =>'/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR');  
END;

7.加入需要分析的日志文件

此步驟可以在Oracle命令行執行,也可以使用Java代碼實現。

使用SQL語句實現如下所示。

EXECUTE dbms_logmnr.add_logfile(logfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/REDO01.LOG',options=>dbms_logmnr.NEW);  
EXECUTE dbms_logmnr.add_logfile(logfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/REDO02.LOG',options=>dbms_logmnr.ADDFILE);  
EXECUTE dbms_logmnr.add_logfile(logfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/REDO03.LOG',options=>dbms_logmnr.ADDFILE);  

使用Java代碼分析時,使用的SQL語句如下所示。

BEGIN  
dbms_logmnr.add_logfile(logfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/REDO01.LOG',options=>dbms_logmnr.NEW);  
dbms_logmnr.add_logfile(logfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/REDO02.LOG',options=>dbms_logmnr.ADDFILE);  
dbms_logmnr.add_logfile(logfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/REDO03.LOG',options=>dbms_logmnr.ADDFILE);  
END;  

8.查看正在使用的日志文件

SELECT group#, sequence#, status, first_change#, first_time FROM V$log ORDER BY first_change#;

status為CURRENT的為當前正在使用的日志文件

9.使用Lominer分析日志

EXECUTE dbms_logmnr.start_logmnr(dictfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR/dictionary.ora');  

使用Java代碼分析時,使用的SQL語句如下所示。

BEGIN
dbms_logmnr.start_logmnr(dictfilename=>'/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR/dictionary.ora'); 
END;

10.查看分析結果

SELECT sql_redo, sql_undo, seg_owner FROM v$logmnr_contents WHERE seg_name='EMP' AND seg_owner='SYNC'; 

註意:視圖v$logmnr_contents中的分析結果僅在我們運行過程’dbms_logmrn.start_logmnr’這個會話的生命期中存在,如果要查看新的日志,需要再重新加入分析日志文件、使用LogMiner分析。

11.常見問題

(1)如果出現“必須聲明標識符 ‘SYS.DBMS_LOGMNR’”異常,則需要在創建用戶後,為用戶賦予EXECUTE_CATALOG_ROLE權限,如下所示。

GRANT CONNECT,RESOURCE,DBA,EXECUTE_CATALOG_ROLE TO SYNC; 

(2)當在查詢vlogmnrlogs時提示“表或視圖不存在”,是因為沒有查詢vlogmnr_logs的權限。此時在查詢語句中需要為seg_owner指定相應的用戶,例如,我這裡使用SYNC用戶通過LogMiner進行分析,則需要將seg_owner指定為SYNC用戶,如下所示。

SELECT sql_redo, sql_undo, seg_owner FROM v$logmnr_contents WHERE seg_name='EMP' AND seg_owner='SYNC'; 

以上就是通過LogMiner實現Oracle數據同步遷移的詳細內容,更多關於LogMiner實現Oracle數據同步遷移的資料請關註WalkonNet其它相關文章!

推薦閱讀: