B端產(chǎn)品新老系統(tǒng)切換過(guò)程中的數(shù)據(jù)遷移總結(jié)

B端產(chǎn)品新老系統(tǒng)切換過(guò)程中的數(shù)據(jù)遷移總結(jié)01數(shù)據(jù)遷移場(chǎng)景企業(yè)業(yè)務(wù)發(fā)現(xiàn)，原系統(tǒng)無(wú)法滿足業(yè)務(wù)需求，需要開(kāi)發(fā)新的系統(tǒng)替換原有系統(tǒng)，而原系統(tǒng)中的歷史數(shù)據(jù)或正在進(jìn)行中的業(yè)務(wù)數(shù)據(jù)需要在新系統(tǒng)中體現(xiàn)，新系統(tǒng)上線前，需要完成舊系統(tǒng)向新系統(tǒng)的數(shù)據(jù)遷移。02系統(tǒng)切換方式系統(tǒng)的切換方式，會(huì)影響數(shù)據(jù)遷移方式的選擇。新老系統(tǒng)進(jìn)行切換時(shí)，常見(jiàn)的幾種操作方式：確定新系統(tǒng)上線時(shí)間后，新老系統(tǒng)并行運(yùn)行，新訂單使用新系統(tǒng)，在途訂單使用老系統(tǒng)，待老系統(tǒng)所有在途訂單都完成后，將歷史數(shù)據(jù)一次性遷移至新系統(tǒng)。確認(rèn)新系統(tǒng)上線時(shí)間后，老系統(tǒng)停用，所有數(shù)據(jù)及功能全部切換至新系統(tǒng)。新系統(tǒng)的調(diào)整比較大，業(yè)務(wù)流程也進(jìn)行了大規(guī)模調(diào)整的情況下，也會(huì)采用選擇年或月的結(jié)算區(qū)間選擇上線時(shí)間進(jìn)行切換，切換后，業(yè)務(wù)數(shù)據(jù)不進(jìn)行遷移，歷史數(shù)據(jù)保留在舊系統(tǒng)進(jìn)行查看。03數(shù)據(jù)遷移內(nèi)容1、數(shù)據(jù)：基礎(chǔ)數(shù)據(jù)：支撐各個(gè)模塊及各業(yè)務(wù)的主數(shù)據(jù)，如客戶、資產(chǎn)、項(xiàng)目、產(chǎn)品、車(chē)輛、工具信息等字典數(shù)據(jù)：系統(tǒng)全局的字典數(shù)據(jù)用戶數(shù)據(jù)：用戶賬號(hào)、組織、角色、權(quán)限等業(yè)務(wù)數(shù)據(jù)：業(yè)務(wù)進(jìn)行過(guò)程中產(chǎn)生的數(shù)據(jù)，如訂單數(shù)據(jù)、交易數(shù)據(jù)、賬單數(shù)據(jù)、操作數(shù)據(jù)、各環(huán)節(jié)的流轉(zhuǎn)數(shù)據(jù)等。業(yè)務(wù)數(shù)據(jù)還包括：歷史數(shù)據(jù)：業(yè)務(wù)上已經(jīng)完成結(jié)算的或其他完成節(jié)點(diǎn)已經(jīng)產(chǎn)生的數(shù)據(jù)。在途數(shù)據(jù)：系統(tǒng)升級(jí)或切換的同時(shí)，業(yè)務(wù)也在正常的運(yùn)行，系統(tǒng)中會(huì)存在很多在途數(shù)據(jù)，如未完成的訂單數(shù)據(jù)，在途中的運(yùn)單數(shù)據(jù)等；在途數(shù)據(jù)的處理需要特別關(guān)注。2、數(shù)據(jù)間的關(guān)聯(lián)關(guān)系：關(guān)系型數(shù)據(jù)通過(guò)ID或主鍵進(jìn)行數(shù)據(jù)關(guān)聯(lián)，遷移時(shí)數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系需要進(jìn)行重新對(duì)應(yīng)3、文件：部分附件、圖片等數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)直接關(guān)聯(lián)，需要重新存儲(chǔ)和建立聯(lián)系，一些單獨(dú)存儲(chǔ)的文件可直接轉(zhuǎn)移到新服務(wù)器，同時(shí)需要存儲(chǔ)對(duì)應(yīng)的URL等04遷移方式影響遷移方式選擇的要素很多：遷移數(shù)據(jù)量的大小、傳輸?shù)臅r(shí)長(zhǎng)、業(yè)務(wù)是否可暫停。1、離線遷移：Excel導(dǎo)出-導(dǎo)入：通過(guò)導(dǎo)出-導(dǎo)入Excel的方式，將數(shù)據(jù)導(dǎo)入到新系統(tǒng)，導(dǎo)出的數(shù)據(jù)可根據(jù)新系統(tǒng)的數(shù)據(jù)格式進(jìn)行調(diào)整后導(dǎo)入；數(shù)據(jù)庫(kù)同步：通過(guò)Sql或數(shù)據(jù)庫(kù)同步工具，將新系統(tǒng)和老系統(tǒng)的字段進(jìn)行對(duì)應(yīng)，批量導(dǎo)入到新系統(tǒng)中；2、在線遷移：接口傳輸，通過(guò)定義和編寫(xiě)接口，實(shí)現(xiàn)新老系統(tǒng)之間的數(shù)據(jù)同步，新舊系統(tǒng)切換需要雙系統(tǒng)并行的場(chǎng)景下，接口傳輸可實(shí)現(xiàn)新老系統(tǒng)之間的雙向同步。企業(yè)在信息化建設(shè)過(guò)程中，會(huì)存在外采轉(zhuǎn)自研的場(chǎng)景，項(xiàng)目不可控時(shí)，盡量實(shí)現(xiàn)系統(tǒng)一次性切換升級(jí)，避免系統(tǒng)并行。數(shù)據(jù)庫(kù)同步：面對(duì)遷移數(shù)據(jù)量比較大，耗時(shí)比較久的項(xiàng)目時(shí)，可以借助數(shù)據(jù)庫(kù)遷移工具等，采用部分?jǐn)?shù)據(jù)會(huì)進(jìn)行全量+增量遷移的方式，數(shù)據(jù)全量遷移到新系統(tǒng)，然后執(zhí)行每天的自動(dòng)增量遷移或手動(dòng)增量遷移，系統(tǒng)切換前，要完成最后一次增量備份。05數(shù)據(jù)驗(yàn)證遷移的過(guò)程中和遷移后需要做數(shù)據(jù)的驗(yàn)證，確保數(shù)據(jù)的準(zhǔn)確性、完整性、一致性，如：新舊系統(tǒng)的數(shù)據(jù)數(shù)量、數(shù)據(jù)內(nèi)容、遷移過(guò)程中未產(chǎn)生增量數(shù)據(jù)等。數(shù)據(jù)遷移一般需要多次的預(yù)演和多次的驗(yàn)證，保證正式系統(tǒng)正式切換時(shí)，數(shù)據(jù)遷移的成功率。驗(yàn)證需要準(zhǔn)備詳細(xì)的驗(yàn)證用例，和測(cè)試用例相似：基礎(chǔ)數(shù)據(jù)、數(shù)據(jù)字典的變化頻率較低，可預(yù)先進(jìn)行數(shù)據(jù)同步，屬于上線前的環(huán)境準(zhǔn)備工作，可提前同步到新系統(tǒng)并完成測(cè)試；已經(jīng)完成的業(yè)務(wù)歷史數(shù)據(jù)，同步后通過(guò)查詢、導(dǎo)出、BI等關(guān)聯(lián)功能驗(yàn)證數(shù)據(jù)是否正確，完整；未完成的業(yè)務(wù)在途數(shù)據(jù)，需額外進(jìn)行業(yè)務(wù)操作流程的驗(yàn)證，根據(jù)數(shù)據(jù)所處的流程階段，進(jìn)行下一步的業(yè)務(wù)正逆向業(yè)務(wù)操作，確保在途數(shù)據(jù)能順利完成。06結(jié)語(yǔ)近幾年傳統(tǒng)行業(yè)進(jìn)行信息化建設(shè)，完成了多個(gè)項(xiàng)目的外采轉(zhuǎn)自研，經(jīng)歷了多次