大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)分析_第1頁
大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)分析_第2頁
大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)分析_第3頁
大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)分析_第4頁
大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)分析_第5頁
已閱讀5頁,還剩8頁未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)分析大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)(一)大數(shù)據(jù)采集行業(yè)發(fā)展情況海量數(shù)據(jù)從生產(chǎn)到發(fā)揮價(jià)值,需要經(jīng)過采集、處理、分析等環(huán)節(jié),其中大數(shù)據(jù)采集與預(yù)處理作為大數(shù)據(jù)生命周期的第一環(huán)節(jié),是釋放數(shù)字價(jià)值的前提。數(shù)據(jù)復(fù)制軟件在大數(shù)據(jù)行業(yè)的應(yīng)用主要是作為數(shù)據(jù)采集的基礎(chǔ)工具,將來自不同數(shù)據(jù)庫、不同數(shù)據(jù)類型的數(shù)據(jù)實(shí)時(shí)傳輸至統(tǒng)一平臺(tái),為大數(shù)據(jù)分析提供實(shí)時(shí)、安全、可靠的數(shù)據(jù),屬于大數(shù)據(jù)產(chǎn)業(yè)的基礎(chǔ)支撐層。與傳統(tǒng)的數(shù)據(jù)采集不同,大數(shù)據(jù)采集需要面對(duì)海量數(shù)據(jù)、多種數(shù)據(jù)類型和多樣化的終端類型,對(duì)采樣數(shù)據(jù)的實(shí)時(shí)性要求也越來越高。在大數(shù)據(jù)采集時(shí),需要通過計(jì)算機(jī)進(jìn)行規(guī)則配置、任務(wù)調(diào)度,實(shí)現(xiàn)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的預(yù)處理,為后續(xù)的實(shí)時(shí)分析決策、數(shù)據(jù)查詢、分發(fā)、計(jì)算和分析提供堅(jiān)實(shí)基礎(chǔ)。(二)大數(shù)據(jù)采集行業(yè)發(fā)展趨勢(shì)1、大數(shù)據(jù)行業(yè)應(yīng)用的深入促進(jìn)大數(shù)據(jù)采集需求日益增長(zhǎng)在政策和技術(shù)的雙重驅(qū)動(dòng)下,我國大數(shù)據(jù)產(chǎn)業(yè)規(guī)??焖僭鲩L(zhǎng),大數(shù)據(jù)應(yīng)用的行業(yè)也越來越廣泛,從互聯(lián)網(wǎng)行業(yè)向金融、醫(yī)療、教育等各行各業(yè)拓展。根據(jù)中國信通院發(fā)布的《大數(shù)據(jù)白皮書2020》,2019年我國以云計(jì)算、大數(shù)據(jù)技術(shù)為基礎(chǔ)的平臺(tái)類運(yùn)營(yíng)技術(shù)服務(wù)收入2.2萬億元,其中,典型云服務(wù)和大數(shù)據(jù)服務(wù)收入達(dá)3284億元,提供服務(wù)的企業(yè)達(dá)2977家,大數(shù)據(jù)產(chǎn)業(yè)發(fā)展日益壯大。數(shù)據(jù)采集是大數(shù)據(jù)在各行各業(yè)應(yīng)用并且創(chuàng)造價(jià)值的前提。隨著大數(shù)據(jù)的行業(yè)應(yīng)用不斷深入,物聯(lián)網(wǎng)、智能家居等領(lǐng)域的大數(shù)據(jù)技應(yīng)用逐漸成熟,數(shù)據(jù)采集的需求也將被逐步激發(fā),帶動(dòng)數(shù)據(jù)采集軟件及服務(wù)的市場(chǎng)規(guī)模日益增長(zhǎng)。2、大數(shù)據(jù)采集環(huán)節(jié)更加注重異構(gòu)數(shù)據(jù)源兼容性隨著數(shù)據(jù)量的指數(shù)增長(zhǎng),數(shù)據(jù)的存儲(chǔ)、計(jì)算、部署等方式都在同步變化,各行業(yè)的業(yè)務(wù)系統(tǒng)也變得越來越復(fù)雜。以銀行為例,金融業(yè)是我國信息化程度最高、信息技術(shù)應(yīng)用最密集的行業(yè)之一,在數(shù)據(jù)爆發(fā)式增長(zhǎng)、數(shù)據(jù)庫、數(shù)據(jù)中心建設(shè)等大背景下,銀行的業(yè)務(wù)系統(tǒng)由單一系統(tǒng)逐漸演變成按業(yè)務(wù)、按部門劃分的復(fù)雜系統(tǒng)群,數(shù)據(jù)庫類型開始由Oracle、DB2數(shù)據(jù)庫變得更加多元,數(shù)據(jù)中心規(guī)模持續(xù)擴(kuò)張、逐漸云化,最終形成了復(fù)雜而龐大的業(yè)務(wù)系統(tǒng)和數(shù)據(jù)架構(gòu)。日益復(fù)雜的業(yè)務(wù)系統(tǒng)和數(shù)據(jù)架構(gòu)形成了數(shù)據(jù)結(jié)構(gòu)、存取方式、形式不同的異構(gòu)數(shù)據(jù)源,對(duì)大數(shù)據(jù)采集的異構(gòu)兼容性提出了更高的要求。工信部發(fā)布的《十四五大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃》中明確提出,以構(gòu)建穩(wěn)定高效產(chǎn)業(yè)鏈為主要目標(biāo),在數(shù)據(jù)生成采集環(huán)節(jié),著重提升產(chǎn)品的異構(gòu)數(shù)據(jù)源兼容性、大規(guī)模數(shù)據(jù)集采集與加工效率。3、大數(shù)據(jù)采集的安全與隱私保護(hù)需求持續(xù)上漲近年來,我國大數(shù)據(jù)的安全與隱私保護(hù)需求持續(xù)上漲,大數(shù)據(jù)采集過程中的安全流通和隱私計(jì)算技術(shù)也愈發(fā)得到重視。隨著大數(shù)據(jù)的不斷發(fā)展和應(yīng)用,越來越多的安全問題隨之浮現(xiàn)。在數(shù)據(jù)采集過程中,第三方可能在采集傳輸數(shù)據(jù)過程中截獲、偽造數(shù)據(jù),不但造成了用戶隱私、敏感數(shù)據(jù)泄露的嚴(yán)重后果,同時(shí)也影響了政府、企業(yè)后臺(tái)數(shù)據(jù)分析的準(zhǔn)確性。因此,在大數(shù)據(jù)采集及預(yù)處理過程中,除了假流量數(shù)據(jù)清洗、正常數(shù)據(jù)補(bǔ)全、無效數(shù)據(jù)剔除外,還存在數(shù)據(jù)格式化、數(shù)據(jù)隔離、數(shù)據(jù)加密、數(shù)據(jù)脫敏和攻擊識(shí)別等需求。近年來我國網(wǎng)絡(luò)安全市場(chǎng)規(guī)模持續(xù)增長(zhǎng),從2016年的269.5億元增長(zhǎng)至2020年的531.9億元,2021年將達(dá)到649.7億元,有望帶動(dòng)大數(shù)據(jù)采集的安全與隱私保護(hù)市場(chǎng)的持續(xù)擴(kuò)容。數(shù)據(jù)復(fù)制技術(shù)行業(yè)數(shù)據(jù)庫層復(fù)制技術(shù)概況數(shù)據(jù)庫層復(fù)制通常采用邏輯復(fù)制的方式,將源數(shù)據(jù)庫中的重做日志和歸檔日志解析出SQL語句后,發(fā)送至目標(biāo)數(shù)據(jù)庫,在目標(biāo)數(shù)據(jù)庫上重做SQL語句實(shí)現(xiàn)數(shù)據(jù)復(fù)制。邏輯復(fù)制的優(yōu)點(diǎn)在于可以實(shí)現(xiàn)不同品牌數(shù)據(jù)庫之間的數(shù)據(jù)復(fù)制,且能實(shí)現(xiàn)數(shù)據(jù)庫讀寫分離、多活,適用于各種數(shù)據(jù)庫數(shù)據(jù)容災(zāi)、高可用、讀寫分離等場(chǎng)景。數(shù)據(jù)復(fù)制軟件行業(yè)市場(chǎng)規(guī)模國內(nèi)市場(chǎng):中國災(zāi)備軟件市場(chǎng)規(guī)模從2016年的52.5億元增長(zhǎng)至2020年的114.40億元,最近5年平均增速為20%以上。未來幾年,我國的災(zāi)備軟件市場(chǎng)也將保持較穩(wěn)定的增速,預(yù)計(jì)2025年市場(chǎng)規(guī)模將達(dá)到207億元。大數(shù)據(jù)領(lǐng)域是數(shù)據(jù)復(fù)制軟件的一個(gè)新興應(yīng)用方向,從大數(shù)據(jù)軟件的整體市場(chǎng)規(guī)???,2020年全球大數(shù)據(jù)軟件市場(chǎng)規(guī)模達(dá)4,813.6億元。預(yù)測(cè)中國的大數(shù)據(jù)市場(chǎng)中,軟件市場(chǎng)占比將逐年提升,2025年超30%的市場(chǎng)支出將流向軟件,約510億元,未來五年平均復(fù)合增長(zhǎng)率達(dá)到26.7%。隨著大數(shù)據(jù)技術(shù)不斷演進(jìn)和應(yīng)用持續(xù)深化,數(shù)據(jù)復(fù)制軟件作為大數(shù)據(jù)產(chǎn)業(yè)的基礎(chǔ)支撐軟件,在數(shù)據(jù)匯聚、分發(fā)、采集、流通的環(huán)節(jié)將起到越來越重要的作用,市場(chǎng)規(guī)模有望快速增長(zhǎng)。云計(jì)算相較于傳統(tǒng)IT架構(gòu),具有資源配置效率高、運(yùn)維難度低等優(yōu)勢(shì)。隨著云計(jì)算技術(shù)和基礎(chǔ)設(shè)施的逐步成熟,越來越多的企業(yè)開始遷移上云。數(shù)據(jù)復(fù)制技術(shù)也從本地?cái)?shù)據(jù)復(fù)制向云端數(shù)據(jù)復(fù)制發(fā)展。云端復(fù)制和本地復(fù)制相比,傳輸環(huán)境存在較大的差異,云端復(fù)制的傳輸具有帶寬窄、傳輸不穩(wěn)定等特點(diǎn),對(duì)復(fù)制技術(shù)的壓縮能力、斷點(diǎn)續(xù)傳能力提出了更高的要求。同時(shí),云端復(fù)制還需兼顧數(shù)據(jù)隱私問題,特別是在公有云的場(chǎng)景下,云供應(yīng)商有較大的權(quán)限,可以對(duì)數(shù)據(jù)進(jìn)行管理,因此在云端復(fù)制場(chǎng)景下,數(shù)據(jù)的脫敏、加密也是云端復(fù)制技術(shù)需要考慮的重要問題。數(shù)據(jù)復(fù)制技術(shù)最早是由存儲(chǔ)硬件及數(shù)據(jù)庫廠商開發(fā),其優(yōu)點(diǎn)在于對(duì)本公司的存儲(chǔ)或數(shù)據(jù)庫產(chǎn)品的兼容良好、穩(wěn)定性高、數(shù)據(jù)復(fù)制速度快,但在靈活性和可擴(kuò)展性上有所欠缺。隨著信息技術(shù)的發(fā)展,各行業(yè)信息系統(tǒng)不斷升級(jí)和迭代,存儲(chǔ)及數(shù)據(jù)庫類型多樣化,數(shù)據(jù)量的提升也帶來了分級(jí)存儲(chǔ)、分級(jí)備份的需求,與硬件或數(shù)據(jù)庫綁定的復(fù)制技術(shù)功能單一、缺乏靈活性等缺點(diǎn)逐漸顯現(xiàn)。軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)可以實(shí)現(xiàn)不同存儲(chǔ)硬件、不同數(shù)據(jù)庫之間的數(shù)據(jù)復(fù)制,在信息系統(tǒng)升級(jí)、數(shù)據(jù)分級(jí)存儲(chǔ)等場(chǎng)景下具有較強(qiáng)的優(yōu)勢(shì),有望成為未來數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向。同時(shí),在國內(nèi)信息系統(tǒng)軟硬件安全可信的趨勢(shì)下,國產(chǎn)存儲(chǔ)設(shè)備和數(shù)據(jù)庫紛紛涌現(xiàn),軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)也將在信息系統(tǒng)國產(chǎn)化進(jìn)程中發(fā)揮重要作用,加速國產(chǎn)化進(jìn)程。大數(shù)據(jù)平臺(tái)是為了滿足大數(shù)據(jù)的存儲(chǔ)、運(yùn)算、分析、展現(xiàn)的軟件平臺(tái),主要功能包括數(shù)據(jù)接入、數(shù)據(jù)處理、數(shù)據(jù)存儲(chǔ)、查詢檢索、分析挖掘、數(shù)據(jù)集成等。隨著大數(shù)據(jù)技術(shù)不斷演進(jìn)和應(yīng)用持續(xù)深化,以數(shù)據(jù)為核心的大數(shù)據(jù)產(chǎn)業(yè)生態(tài)正在加速構(gòu)建。大數(shù)據(jù)平臺(tái)作為基礎(chǔ)工具,將隨著大數(shù)據(jù)行業(yè)應(yīng)用的不斷深化,得到越來越廣泛的應(yīng)用。同時(shí),傳統(tǒng)數(shù)據(jù)庫中的數(shù)據(jù)也將越來越多地匯聚至大數(shù)據(jù)平臺(tái),進(jìn)行數(shù)據(jù)分析挖掘等,以發(fā)揮更大地?cái)?shù)據(jù)價(jià)值。因此,大數(shù)據(jù)平臺(tái)實(shí)時(shí)復(fù)制技術(shù)是未來數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向之一。數(shù)據(jù)復(fù)制軟件在各應(yīng)用場(chǎng)景的具體情況備份是指對(duì)源數(shù)據(jù)形成一份同樣的拷貝,存放至其它設(shè)備中。在發(fā)生自然災(zāi)害、軟硬件故障、人為誤操作等原因?qū)е聰?shù)據(jù)失效時(shí),可通過恢復(fù)備份的方式重新找回失效數(shù)據(jù)。備份被認(rèn)為是數(shù)據(jù)保護(hù)的最后一道防線,確保在企業(yè)遭遇事故時(shí)至少擁有一份數(shù)據(jù)可以用來恢復(fù)數(shù)據(jù)復(fù)制軟件是數(shù)據(jù)備份的核心。備份數(shù)據(jù)的可用性依賴于數(shù)據(jù)復(fù)制的完整性和一致性。容災(zāi)是指在本地或異地,建立兩套或多套功能相同的業(yè)務(wù)系統(tǒng),互相之間可以進(jìn)行健康狀態(tài)監(jiān)視和功能切換,當(dāng)主生產(chǎn)系統(tǒng)非計(jì)劃性停止工作時(shí),整個(gè)應(yīng)用系統(tǒng)可以切換到備用業(yè)務(wù)系統(tǒng),使得該系統(tǒng)功能可以繼續(xù)正常工作。根據(jù)保障等級(jí)由低至高,容災(zāi)可以分為數(shù)據(jù)級(jí)、應(yīng)用級(jí)和業(yè)務(wù)級(jí)。數(shù)據(jù)級(jí)容災(zāi)重點(diǎn)在于數(shù)據(jù),災(zāi)難發(fā)生后可以確保用戶原有的數(shù)據(jù)不會(huì)丟失或丟失量最少,通過備份可以實(shí)現(xiàn)數(shù)據(jù)級(jí)容災(zāi)應(yīng)用級(jí)容災(zāi)的重點(diǎn)在于應(yīng)用系統(tǒng)的不間斷服務(wù),讓終端用戶感受不到災(zāi)難的發(fā)生,應(yīng)用的服務(wù)請(qǐng)求能夠繼續(xù)平穩(wěn)運(yùn)行并對(duì)外提供服務(wù)。數(shù)據(jù)復(fù)制軟件是實(shí)現(xiàn)應(yīng)用級(jí)容災(zāi)的重要工具,只有兩套業(yè)務(wù)系統(tǒng)擁有相同或幾乎相同的數(shù)據(jù),才能保證應(yīng)用的順利切換。數(shù)據(jù)復(fù)制的實(shí)時(shí)性決定了系統(tǒng)切換后的數(shù)據(jù)丟失量,是衡量容災(zāi)系統(tǒng)等級(jí)的重要指標(biāo)業(yè)務(wù)級(jí)容災(zāi)是最高級(jí)別的容災(zāi),超過了IT系統(tǒng)層面的保障,還包括對(duì)辦公地點(diǎn)、場(chǎng)所、人員、網(wǎng)絡(luò)等的保障。大數(shù)據(jù)可以總結(jié)事物發(fā)展規(guī)律、預(yù)測(cè)發(fā)展趨勢(shì)并指導(dǎo)決策,因此在生產(chǎn)和生活中得到了越來越廣泛的應(yīng)用。而海量數(shù)據(jù)從生產(chǎn)到發(fā)揮價(jià)值,需要經(jīng)過采集、處理、分析等環(huán)節(jié),其中大數(shù)據(jù)采集與預(yù)處理作為大數(shù)據(jù)生命周期的第一環(huán)節(jié),是釋放數(shù)字價(jià)值的前提數(shù)據(jù)復(fù)制軟件是大數(shù)據(jù)采集的基礎(chǔ)工具,可以將海量數(shù)據(jù)實(shí)時(shí)傳輸至大數(shù)據(jù)平臺(tái)或分發(fā)至各數(shù)據(jù)需求部門,為數(shù)據(jù)仿真、分析、決策、風(fēng)控等場(chǎng)景提供實(shí)時(shí)、安全、可靠的數(shù)據(jù)。在早期階段,數(shù)據(jù)復(fù)制軟件主要是依托存儲(chǔ)硬件存在,是存儲(chǔ)硬件的重要附加功能。近年來,隨著技術(shù)發(fā)展,存儲(chǔ)介質(zhì)也不斷變化,數(shù)據(jù)復(fù)制的內(nèi)容及應(yīng)用場(chǎng)景也逐步拓寬,目前進(jìn)入云計(jì)算和大數(shù)據(jù)時(shí)代的數(shù)據(jù)復(fù)制階段。數(shù)據(jù)復(fù)制技術(shù)行業(yè)存儲(chǔ)硬件層復(fù)制技術(shù)發(fā)展概況存儲(chǔ)硬件層復(fù)制主要指基于存儲(chǔ)磁盤陣列之間的直接鏡像,是通過存儲(chǔ)系統(tǒng)內(nèi)建的固件或操作系統(tǒng),利用IP網(wǎng)絡(luò)或光纖等傳輸介質(zhì)連結(jié),將數(shù)據(jù)以同步或異步的方式復(fù)制到目標(biāo)端。存儲(chǔ)硬件層復(fù)制的優(yōu)勢(shì)在于復(fù)制工作僅在存儲(chǔ)硬件層面進(jìn)行,與操作系統(tǒng)層無關(guān),因此可以避免服務(wù)器的性能開銷過大的問題,適用于關(guān)鍵任務(wù)和高端交易應(yīng)用,也是目前最廣泛用于容災(zāi)場(chǎng)景的數(shù)據(jù)復(fù)制技術(shù)之一。存儲(chǔ)硬件層復(fù)制的劣勢(shì)在于主要適用于同品牌且同型號(hào)的同構(gòu)存儲(chǔ)系統(tǒng),并需配備低延遲和大帶寬的物理鏈路,成本較高,給異地復(fù)制帶來極大困難。存儲(chǔ)硬件層的復(fù)制技術(shù)通常依賴于特定存儲(chǔ)硬件,因此使用該技術(shù)的主要是存儲(chǔ)硬件廠商,代表產(chǎn)品為DELLEMC的SRDF軟件、IBM的PPRC軟件等。數(shù)據(jù)復(fù)制軟件的發(fā)展階段分析(一)數(shù)據(jù)復(fù)制軟件行業(yè)發(fā)展第一階段:數(shù)據(jù)的定時(shí)復(fù)制早期依托存儲(chǔ)硬件的數(shù)據(jù)復(fù)制是以數(shù)據(jù)的定時(shí)復(fù)制為主。該階段數(shù)據(jù)復(fù)制軟件基于存儲(chǔ)硬件而存在,是存儲(chǔ)的重要附加功能,存在備份窗口長(zhǎng)、重復(fù)數(shù)據(jù)量大、產(chǎn)品結(jié)構(gòu)單一、缺乏獨(dú)立性等缺陷。產(chǎn)品需求以成本低、容量大為主,應(yīng)用場(chǎng)景包括存儲(chǔ)磁帶庫的數(shù)據(jù)拷貝、搬遷等。(二)數(shù)據(jù)復(fù)制軟件行業(yè)發(fā)展第二階段:數(shù)據(jù)的實(shí)時(shí)復(fù)制數(shù)據(jù)的實(shí)時(shí)復(fù)制是隨著行業(yè)對(duì)持續(xù)數(shù)據(jù)保護(hù)、容災(zāi)、備份中心雙活等需求的不斷提升應(yīng)運(yùn)而生的。持續(xù)數(shù)據(jù)保護(hù)通過將變化的數(shù)據(jù)實(shí)時(shí)復(fù)制到目標(biāo)服務(wù)器的同時(shí),把數(shù)據(jù)的變化以日志方式記錄下來,在系統(tǒng)故障時(shí)根據(jù)日志快速恢復(fù)至指定時(shí)間點(diǎn);容災(zāi)則需要通過數(shù)據(jù)的實(shí)時(shí)復(fù)制保證兩套或多套IT系統(tǒng)的數(shù)據(jù)一致性,才能實(shí)現(xiàn)故障情況下的切換;備份中心雙活則要求備份IT系統(tǒng)同時(shí)承擔(dān)業(yè)務(wù),對(duì)數(shù)據(jù)復(fù)制的實(shí)時(shí)性提出了更高的要求。(三)數(shù)據(jù)復(fù)制軟件行業(yè)發(fā)展第三階段:云計(jì)算和大數(shù)據(jù)時(shí)代的數(shù)據(jù)復(fù)制隨著云計(jì)算和大數(shù)據(jù)時(shí)代的到來,數(shù)據(jù)復(fù)制正在逐步走向下一個(gè)階段。云計(jì)算具有部署靈活、運(yùn)維成本低的特點(diǎn),數(shù)據(jù)復(fù)制的內(nèi)容開始從本地?cái)?shù)據(jù)向云端數(shù)據(jù),數(shù)據(jù)復(fù)制軟件的產(chǎn)品形態(tài)也開始由傳統(tǒng)的軟件向SaaS服務(wù)拓展。同時(shí),大數(shù)據(jù)時(shí)代下數(shù)據(jù)流動(dòng)性進(jìn)一步加強(qiáng),衍生出更多的應(yīng)用場(chǎng)景。大數(shù)據(jù)時(shí)代下數(shù)據(jù)復(fù)制軟件將起到打破數(shù)據(jù)孤島的作用,將大量冷數(shù)據(jù)安全且高效地輸送至大數(shù)據(jù)平臺(tái),為數(shù)據(jù)分析提供真實(shí)有效的源數(shù)據(jù),使數(shù)據(jù)價(jià)值最大化,為數(shù)字經(jīng)濟(jì)的發(fā)展保駕護(hù)航。數(shù)據(jù)復(fù)制技術(shù)發(fā)展趨勢(shì)數(shù)據(jù)復(fù)制技術(shù)最早是由存儲(chǔ)硬件及數(shù)據(jù)庫廠商開發(fā),作為其存儲(chǔ)硬件或數(shù)據(jù)庫軟件的輔助工具,通常與存儲(chǔ)硬件或數(shù)據(jù)庫綁定,只能用于本公司的存儲(chǔ)硬件或數(shù)據(jù)庫之間的數(shù)據(jù)復(fù)制。其優(yōu)點(diǎn)在于對(duì)本公司的存儲(chǔ)或數(shù)據(jù)庫產(chǎn)品的兼容良好、穩(wěn)定性高、數(shù)據(jù)復(fù)制速度快,但在靈活性和可擴(kuò)展性。隨著信息技術(shù)的發(fā)展,各行業(yè)信息系統(tǒng)不斷升級(jí)和迭代,存儲(chǔ)及數(shù)據(jù)庫類型多樣化,數(shù)據(jù)量的提升也帶來了分級(jí)存儲(chǔ)、分級(jí)備份的需求,與硬件或數(shù)據(jù)庫綁定的復(fù)制技術(shù)功能單一、缺乏靈活性等缺點(diǎn)逐漸顯現(xiàn)。軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)可以實(shí)現(xiàn)不同存儲(chǔ)硬件、不同數(shù)據(jù)庫之間的數(shù)據(jù)復(fù)制,在信息系統(tǒng)升級(jí)、數(shù)據(jù)分級(jí)存儲(chǔ)等場(chǎng)景下具有較強(qiáng)的優(yōu)勢(shì),有望成為未來數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向。同時(shí),在國內(nèi)信息系統(tǒng)軟硬件安全可信的趨勢(shì)下,國產(chǎn)存儲(chǔ)設(shè)備和數(shù)據(jù)庫紛紛涌現(xiàn),軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)也將在信息系統(tǒng)國產(chǎn)化進(jìn)程中發(fā)揮重要作用,加速國產(chǎn)化進(jìn)程。云計(jì)算相較于傳統(tǒng)IT架構(gòu),具有資源配置效率高、運(yùn)維難度低等優(yōu)勢(shì)。隨著云計(jì)算技術(shù)和基礎(chǔ)設(shè)施的逐步成熟,越來越多的企業(yè)開始遷移上云。數(shù)據(jù)復(fù)制技術(shù)也從本地?cái)?shù)據(jù)復(fù)制向云端數(shù)據(jù)復(fù)制發(fā)展。和本地IT架構(gòu)不同的是,云計(jì)算架構(gòu)將底層硬件設(shè)備虛擬化后形成統(tǒng)一的計(jì)算資源、存儲(chǔ)資源和網(wǎng)絡(luò)資源,企業(yè)在云端的業(yè)務(wù)系統(tǒng)均統(tǒng)一部署在數(shù)據(jù)中心的虛擬平臺(tái)上,因此云端復(fù)制和本地復(fù)制相比,傳輸環(huán)境存在較大的差異,云端復(fù)制的傳輸具有帶寬窄、傳輸不穩(wěn)定等特點(diǎn),對(duì)復(fù)制技術(shù)的壓縮能力、斷點(diǎn)續(xù)傳能力提出了更高的要求。同時(shí),云端復(fù)制還需兼顧數(shù)據(jù)隱私問題,特別是在公有云的場(chǎng)景下,云供應(yīng)商有較大的權(quán)限,可以對(duì)數(shù)據(jù)進(jìn)行管理,因此在云端復(fù)制場(chǎng)景下,數(shù)據(jù)的脫敏、加密也是云端復(fù)制技術(shù)需要考慮的重要問題。大數(shù)據(jù)平臺(tái)是為了滿足大數(shù)據(jù)的存儲(chǔ)、運(yùn)算、分析、展現(xiàn)的軟件平臺(tái),主要功能包括數(shù)據(jù)接入、數(shù)據(jù)處理、數(shù)據(jù)存儲(chǔ)、查詢檢索、分析挖掘、數(shù)據(jù)集成等。大數(shù)據(jù)平臺(tái)擁有特殊的文件系統(tǒng)、數(shù)據(jù)庫及數(shù)據(jù)處理模塊,以適配大數(shù)據(jù)的查詢、存儲(chǔ)和計(jì)算。以Hadoop為例,Hadoop平臺(tái)采用HDFS分布式文件系統(tǒng)和HBase分布式數(shù)據(jù)庫,通過Hive數(shù)據(jù)倉庫進(jìn)行數(shù)據(jù)的存儲(chǔ)、查詢和分析,與傳統(tǒng)的數(shù)據(jù)庫結(jié)構(gòu)存在較大的差別,因此傳統(tǒng)的數(shù)據(jù)庫數(shù)據(jù)復(fù)制技術(shù)無法實(shí)現(xiàn)大數(shù)據(jù)平臺(tái)間的數(shù)據(jù)實(shí)時(shí)復(fù)制,亦無法實(shí)現(xiàn)由傳統(tǒng)數(shù)據(jù)庫向大數(shù)據(jù)平臺(tái)的數(shù)據(jù)實(shí)時(shí)復(fù)制。隨著大數(shù)據(jù)技術(shù)不斷演進(jìn)和應(yīng)用持續(xù)深化,以數(shù)據(jù)為核心的大數(shù)據(jù)產(chǎn)業(yè)生態(tài)正在加速構(gòu)建。大數(shù)據(jù)平臺(tái)作為基礎(chǔ)工具,將隨著大數(shù)據(jù)行業(yè)應(yīng)用的不斷深化,得到越來越廣泛的應(yīng)用。同時(shí),傳統(tǒng)數(shù)據(jù)庫中的數(shù)據(jù)也將越來越多地匯聚至大數(shù)據(jù)平臺(tái),進(jìn)行數(shù)據(jù)分析挖掘等,以發(fā)揮更大地?cái)?shù)據(jù)價(jià)值。因此,大數(shù)據(jù)平臺(tái)實(shí)時(shí)復(fù)制技術(shù)是未來數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向之一。數(shù)據(jù)復(fù)制技術(shù)行業(yè)整體市場(chǎng)空間廣闊根據(jù)IDC2統(tǒng)計(jì),2021年公司產(chǎn)品主要涉及到的災(zāi)備市場(chǎng)規(guī)模為6.01億美元,其中純軟件和一體機(jī)市場(chǎng)分別為2.35億美元和3.66億美元,約合人民幣14.80億元、23.06億元3。IDC預(yù)測(cè),在2026年,公司產(chǎn)品主要涉及到的災(zāi)備市場(chǎng)規(guī)模將達(dá)到12.2億美元,其中純

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論