應(yīng)天職業(yè)技術(shù)學(xué)院 謝 芳
實際工作場景中oracle數(shù)據(jù)庫數(shù)據(jù)快速倒換方法
應(yīng)天職業(yè)技術(shù)學(xué)院 謝 芳
本文通過設(shè)立實際工作場景,提出一種切實可行的將oracle數(shù)據(jù)庫中數(shù)據(jù)按照某種原則搬到新的數(shù)據(jù)庫中,通過此種方法實現(xiàn)的數(shù)據(jù)倒換可在主機上形成一個腳本,啟動腳本后數(shù)據(jù)自動倒換。在實際應(yīng)用中,有利于提高工作效率。
oracle數(shù)據(jù)庫;數(shù)據(jù)倒換
一個比較大的實時系統(tǒng),經(jīng)過調(diào)研、立項、設(shè)計、開發(fā)、測試、驗收之后,往往會面臨更大的挑戰(zhàn):割接上線。割接上線中,一個非常重要的準(zhǔn)備就是數(shù)據(jù)倒換。數(shù)據(jù)倒換,簡而言之,就是將生產(chǎn)庫中的數(shù)據(jù)按照某種原則搬到新的數(shù)據(jù)庫中,是系統(tǒng)正確運行的基礎(chǔ),其重要性不言而喻。而且非常特別的是,它的數(shù)據(jù)量很大,時間緊張,有必要進行經(jīng)過充分的準(zhǔn)備。
在本文中,我們將設(shè)立一個場景,并基于這個場景進行討論倒換的方法,之后對于性能進行一些更細致的研究。通過研究,能達到在主機上有一個腳本,啟動腳本,那么數(shù)據(jù)就可以實現(xiàn)這樣的倒換。將具有一定的普適性。
oracle數(shù)據(jù)庫之間數(shù)據(jù)倒換在此利用存儲過程(procedure)來實現(xiàn)數(shù)據(jù)倒換。情景如圖1:
圖1 工作場景示意圖
生產(chǎn)庫有2個庫,4個節(jié)點,4個用戶;而新庫有2個庫,2個節(jié)點,13個用戶。
新庫之所以會做出這樣的變動,是因為隨著在線用戶的變多,數(shù)據(jù)量變大,所以需要將數(shù)據(jù)進行拆分。
為了實現(xiàn)這樣的目標(biāo),我們需要考慮如下技術(shù)的可能性:
(1)啟動腳本,腳本來執(zhí)行存儲過程,并帶入存儲過程所需要的參數(shù);
(2)存儲過程能夠從生產(chǎn)庫取數(shù)據(jù),并根據(jù)拆分原則,拆分到新庫中;
3.1 腳本
對于第(1)點,首先構(gòu)建一個執(zhí)行存儲過程的函數(shù),保存為腳本,執(zhí)行的時候直接進行調(diào)用。
executeProcedure()
{
DB_USER=$1 #參數(shù)1
shift
DB_PASSWD=$1 #參數(shù)2
shift
DB_SERVER=$1 #參數(shù)3
shift
PROCEDURE_NAME=$1 #參數(shù)4
shift
PROCEDURE=${PROCEDURE_NAME}"("
while [ "$#" -ne "0" ]
do
PROCEDURE=${PROCEDURE}$1"," #存儲過程本身的參數(shù)
shift
done
PROCEDURE=${PROCEDURE}":v_resultcode,:v_errinfo)"
${ORACLE_HOME}/bin/sqlplus ${DB_USER}/ ${DB_PASSWD}@${DB_SERVER} << !!!
WHENEVER sqlerror EXIT sql.sqlcode
SET SERVEROUTPUT ON
VARIABLE v_resultcode NUMBER;
VARIABLE v_errinfo VARCHAR2(2000);
BEGIN
:v_resultcode := 0;
BEGIN
DBMS_OUTPUT.enable;
${PROCEDURE}; #執(zhí)行存儲過程
DBMS_OUTPUT.put_line('v_res:='||:v_resultcode);
DBMS_OUTPUT.put_line('v_err:='||:v_errinfo);
EXCEPTION
WHEN OTHERS THEN
:v_resultcode := -1;
:v_errinfo := SQLERRM;
return;
END;
COMMIT;
END;
/
exit;
!!!
return 0
}
通過以上代碼己完成,腳本來執(zhí)行存儲過程,并帶入存儲過程所需要的參數(shù)。如果想加以利用,還需要考慮輸出日志等問題。
有了這個函數(shù),就可以在主機上通過輸入數(shù)據(jù)庫的用戶名、密碼、server、存儲過程名、存儲過程參數(shù),來調(diào)用數(shù)據(jù)庫某用戶下的存儲過程了。如果將這樣的命令整合在一起,就可以用一個腳本調(diào)用不同數(shù)據(jù)庫上、不同用戶下的不同存儲過程了,通過這樣的處理,工作效率就會大大提高。
3.2 過程
如果不需要拆分可用Insert …select…語句就可以實現(xiàn)這個功能。需要拆分時將ucr_dtb4下的用戶根據(jù)路由表tf_f_user_cataloG表拆分到ucr_dtb25、ucr_dtb26、ucr_dtb27三個用戶下。可以將上述語句進行改造達到功能:
Insert
When n_channel_no>0 and n_channel_no<=3333 into ucr_dtb25.tablename values(…)
When n_channel_no>=3334 and n_channel_no<=6666 into ucr_dtb26.tablename values(…)
When n_channel_no>=6667 and n_channel_no<=9999 into ucr_dtb27.tablename values(…)
Select …
Decode(select channel_no from tf_f_user_cataloG b where b.user_id=a.user_id,null,mod(user_id,10000) , select channel_no from tf_f_user_cataloG b where b.user_id=a.user_id) as n_channel_no
From ucr_dtb4.tablename@dblink4 a;
這段語句中的幾點解釋:(1)如果when語句比較長,在調(diào)試存儲過程時,會看不到這個語句,所以可以將各個when語句依次放入數(shù)組元素中,select語句也放入一個數(shù)組元素中,最后將它們拼接起來執(zhí)行。這樣的話將對調(diào)試非常有利。(2)如果路由表tf_f_user_cataloG表中的數(shù)據(jù)量非常大,例如超過1億,那么全表掃描將是一個災(zāi)難。這里提供兩個思路,首先,將這個表進行拆分,建多張表,語句中調(diào)用哪個表,可以通過存儲過程的入?yún)頉Q定。其次,在這張表上建立關(guān)聯(lián)索引。這樣一來速度可以提高幾百倍。
如果存儲過程和腳本都己經(jīng)具備,接下來要考慮的問題就是執(zhí)行的問題了。可能需要頻繁的關(guān)注主機上的各種資源,尤其是CPU、Network等。
可以關(guān)注上圖中的數(shù)據(jù)吞吐量,來確定存儲過程的執(zhí)行是否正確。也可以在oracle數(shù)據(jù)庫上通過如下語句來確認(rèn),存儲過程的啟動與否,該語句的執(zhí)行效率通常來講是可以接受的:
select Name
from v$db_object_cache
where locks>0 and pins>0 and type=’PROCEDURE’;
通過本文提供的oracle數(shù)據(jù)庫的數(shù)據(jù)倒換方法可以將大量的數(shù)據(jù)快速的倒換到新的數(shù)據(jù)庫中,為上線割接做好充分的數(shù)據(jù)準(zhǔn)備,具有普適性,有一定的實用價值。
[1]楊九菊.Oracle數(shù)據(jù)庫流復(fù)制技術(shù)研究[J].信息與電腦(理論版),2011(03).
[2]王新偉.基于Oracle數(shù)據(jù)庫的邏輯數(shù)據(jù)同步技術(shù)在實踐中的應(yīng)用研究[J].電子技術(shù)與軟件工程,2015(08).
[3]陳惠敏,李曉玲.Oracle實例剖析[J].軟件導(dǎo)刊,2010(05).
[4]史小玲.Oracle動態(tài)SQL之本地動態(tài)SQL的使用[J].科技信息,2010(10).
[5]王海翔.Oracle數(shù)據(jù)庫軟件研究[J].現(xiàn)代商貿(mào)工業(yè),2010(11).