淺談對數(shù)據(jù)遷移和割接研究

《淺談對數(shù)據(jù)遷移和割接研究》由會員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在工程資料-天天文庫。

1、關(guān)于對數(shù)據(jù)遷移與割接的研究在信息化系統(tǒng)建設(shè)過程中，新舊系統(tǒng)的割接、升級尤為常見，但是要做到新舊系統(tǒng)切換過程中，數(shù)據(jù)應(yīng)如何做到無遺漏，那么將原信息化管理系統(tǒng)中的大量有效的歷史數(shù)據(jù)導(dǎo)入到新版應(yīng)用系統(tǒng)屮，這就尤為重要，也是對新系統(tǒng)正常運(yùn)行有著重要影響，保證了對大量歷史數(shù)據(jù)的正常使用，從而在不影響所有用戶工作的前提下完成信息化管理系統(tǒng)的升級改造工作。在現(xiàn)有信息化管理系統(tǒng)所積累的大量數(shù)據(jù)，需耍仔細(xì)衡量歷史數(shù)據(jù)的有效性和對新系統(tǒng)的影響以及數(shù)據(jù)遷移的方式和方法。而這決不僅僅是異構(gòu)數(shù)據(jù)庫、不同存儲設(shè)備之間數(shù)據(jù)遷移那么簡單,它更像是對原應(yīng)用系統(tǒng)數(shù)據(jù)以及原系統(tǒng)業(yè)務(wù)流程的重新審視和考核。1數(shù)據(jù)遷移的策略與方法數(shù)據(jù)遷

2、移的內(nèi)容是整個(gè)數(shù)據(jù)遷移的基礎(chǔ)，需要從信息系統(tǒng)規(guī)劃的角度統(tǒng)一考慮，可從橫向的時(shí)間和縱向的功能模塊兩個(gè)角度考慮，從而因地制宜地采用不同數(shù)據(jù)遷移策略和方法。1.1數(shù)據(jù)遷移策略1.1.1橫向劃分以產(chǎn)生數(shù)據(jù)的時(shí)間為劃分依據(jù)，優(yōu)先考慮遷移與當(dāng)前日期較近的數(shù)據(jù)，這樣可以盡可能縮小新系統(tǒng)由于歷史數(shù)據(jù)問題對用戶的影響，而那些相對比較久遠(yuǎn)的數(shù)據(jù)可以分批次進(jìn)行數(shù)據(jù)遷移。1.1.2縱向劃分以處理數(shù)據(jù)的功能模塊為劃分依據(jù)，需要考慮在新系統(tǒng)屮沒有被包含的功能模塊所涉及數(shù)據(jù)的處理問題。這類數(shù)據(jù)由于無法建立映射關(guān)系，-?般不需要遷移到新系統(tǒng)中。但對于模塊間偶合度比較緊密的舊系統(tǒng)，在縱向劃分時(shí)需要注意數(shù)據(jù)的完整性。對于新舊系統(tǒng)

3、均包含的功能模塊的數(shù)據(jù)，需要進(jìn)一步分析主要核心字段信息以及各功能模塊相互關(guān)聯(lián)的數(shù)據(jù)信息的遷移，但切忌貪圖數(shù)據(jù)的高完整性。1.2數(shù)據(jù)遷移的方法根據(jù)不同的遷移劃分，我們采取不同的數(shù)據(jù)遷移的策略和方法。遷移方法主要有一次遷移、分次遷移、先錄后遷、先遷后補(bǔ)等幾種方式可供選擇。我們根據(jù)實(shí)際情況，選擇最適合數(shù)據(jù)遷移的方法來進(jìn)行數(shù)據(jù)遷移工作。1.2.1一次遷移一次遷移的前提是新舊系統(tǒng)數(shù)據(jù)庫差異不大，允許的宕機(jī)時(shí)間內(nèi)可以完成所有數(shù)據(jù)量的遷移。優(yōu)點(diǎn)：遷移實(shí)施的過程短，相對分次遷移，遷移時(shí)涉及的問題少，風(fēng)險(xiǎn)相對比較低。缺點(diǎn)：工作強(qiáng)度比較大，由于實(shí)施遷移的人員需要一直監(jiān)控遷移的過程，如果遷移所需的時(shí)間比較長，工作人

4、員會很疲勞。一次遷移的前提是新舊系統(tǒng)數(shù)據(jù)庫差異不大，允許的宕機(jī)時(shí)間內(nèi)可以完成所有數(shù)據(jù)量b的遷移。1.2,2分次遷移分次遷移是通過數(shù)據(jù)遷移工具或遷移程序，將需要的歷史數(shù)據(jù)分幾次遷移到新系統(tǒng)中。分次遷移一般在系統(tǒng)切換前先遷移將靜態(tài)數(shù)據(jù)和變化不頻繁的數(shù)據(jù),例如代碼、用戶信息等，然后在系統(tǒng)切換時(shí)遷移動態(tài)數(shù)據(jù)，例如交易信息，對于靜態(tài)數(shù)據(jù)遷移之后發(fā)生的數(shù)據(jù)變更，可以每天同步到新系統(tǒng)中，也可以在系統(tǒng)切換時(shí)通過增量的方式一次同步到新系統(tǒng)中。優(yōu)點(diǎn)：分次遷移可以將任務(wù)分開，有效地解決了數(shù)據(jù)量大和宕機(jī)時(shí)間短之間的矛盾。缺點(diǎn)：分次切換導(dǎo)致數(shù)據(jù)多次合并，增加了出錯(cuò)的概率，同時(shí)為了保持整體數(shù)據(jù)的一致性，分次遷移時(shí)需要對先

5、切換的數(shù)據(jù)進(jìn)行同步，增加了遷移的復(fù)雜度。1.2.3先錄后遷先錄后遷主要針對新舊系統(tǒng)數(shù)據(jù)結(jié)構(gòu)存在特定差異的情況，即對于新系統(tǒng)啟用時(shí)必需的期初數(shù)據(jù)，無法從現(xiàn)有的歷史數(shù)據(jù)中得到。優(yōu)點(diǎn)：最大程序上減少了新舊系統(tǒng)因數(shù)據(jù)差異性所帶來的影響。缺點(diǎn)：工作強(qiáng)度大。1.2.4先遷后補(bǔ)先遷后補(bǔ)是指在系統(tǒng)切換前通過數(shù)據(jù)遷移工具或遷移程序，將原始數(shù)據(jù)遷移到新系統(tǒng)屮，然后通過新系統(tǒng)的相關(guān)功能，或?yàn)榇藢ｉT編寫的配套程序，根據(jù)已經(jīng)遷移到新系統(tǒng)中的原始數(shù)據(jù)，生成所需要的結(jié)果數(shù)據(jù)。優(yōu)點(diǎn)：減少遷移的數(shù)據(jù)量。缺點(diǎn)：不能及時(shí)滿足用戶對歷史數(shù)據(jù)的使用要求。2數(shù)據(jù)遷移的實(shí)施方案數(shù)據(jù)遷移的實(shí)現(xiàn)可以分為三個(gè)階段：數(shù)據(jù)遷移前的準(zhǔn)備、數(shù)據(jù)遷移的實(shí)

6、施、數(shù)據(jù)回退措施和數(shù)據(jù)遷移后的校驗(yàn)。根據(jù)數(shù)據(jù)遷移的特點(diǎn)，大量的工作都需要在準(zhǔn)備階段完成，充分而周到的準(zhǔn)備工作是完成數(shù)據(jù)遷移的主要基礎(chǔ)；數(shù)據(jù)遷移的實(shí)施是實(shí)現(xiàn)數(shù)據(jù)遷移的三個(gè)階段中最重要的環(huán)節(jié)，根據(jù)實(shí)際情況，靈活選擇數(shù)據(jù)遷移方法；數(shù)據(jù)遷移后的校驗(yàn)是對遷移工作的檢查，數(shù)據(jù)校驗(yàn)的結(jié)果是判斷新系統(tǒng)能否正式啟用的重要依據(jù)。2.1數(shù)據(jù)遷移的技術(shù)準(zhǔn)備數(shù)據(jù)遷移通常包括多項(xiàng)工作：舊系統(tǒng)數(shù)據(jù)字典整理、舊系統(tǒng)數(shù)據(jù)質(zhì)量分析、新系統(tǒng)數(shù)據(jù)字典整理、新舊系統(tǒng)數(shù)據(jù)差界分析、建立新舊系統(tǒng)數(shù)據(jù)之間的影射關(guān)系、開發(fā)部署數(shù)據(jù)轉(zhuǎn)換與遷移程序、制定數(shù)據(jù)轉(zhuǎn)換與遷移過程中的應(yīng)急方案、實(shí)施舊系統(tǒng)數(shù)據(jù)到新系統(tǒng)的轉(zhuǎn)換與遷移工作、檢查轉(zhuǎn)換與遷移后數(shù)據(jù)的

7、完整性與正確性。1.數(shù)據(jù)格式檢查：檢查數(shù)據(jù)的格式是否一致和可用。2?數(shù)據(jù)長度檢查：檢查數(shù)據(jù)的有效長度。3.區(qū)間范圍檢查：檢查數(shù)據(jù)是否包含在定義的最大值和最小值的區(qū)間中；例如年齡為300,或錄入FI期在4000-1-1o4.空值、默認(rèn)值檢查：檢查新舊系統(tǒng)定義的空值、默認(rèn)值是否相同，不同數(shù)據(jù)庫系統(tǒng)對空值的定義可能不同，需要特別關(guān)注。5.完整性檢查：檢查數(shù)據(jù)的關(guān)聯(lián)完整性。如記錄引用的代碼值是否存在，特別