分析大數(shù)據(jù)的應(yīng)用現(xiàn)狀與發(fā)展趨勢(shì),職稱(chēng)論文

分析大數(shù)據(jù)的應(yīng)用現(xiàn)在狀況與發(fā)展趨勢(shì),職稱(chēng)論文內(nèi)容摘要：大數(shù)據(jù)是當(dāng)今信息化時(shí)代的一個(gè)重要研究領(lǐng)域，隨著社會(huì)科學(xué)技術(shù)的不斷發(fā)展，大數(shù)據(jù)已成為信息科技前沿的一個(gè)研究熱門(mén)，同時(shí)大數(shù)據(jù)在實(shí)際應(yīng)用中也表現(xiàn)出宏大的價(jià)值。首先介紹了大數(shù)據(jù)的基本概念與特征表現(xiàn)，然后研究了大數(shù)據(jù)在應(yīng)用經(jīng)過(guò)中的數(shù)據(jù)處理流程及關(guān)鍵技術(shù)，并進(jìn)一步分析了大數(shù)據(jù)的應(yīng)用現(xiàn)在狀況與將來(lái)發(fā)展趨勢(shì)。本文關(guān)鍵詞語(yǔ)：大數(shù)據(jù);大數(shù)據(jù)處理;大數(shù)據(jù)應(yīng)用;大數(shù)據(jù)應(yīng)用現(xiàn)在狀況;隨著社會(huì)信息化的快速發(fā)展和生活網(wǎng)絡(luò)化的廣泛普及，大數(shù)據(jù)的科學(xué)技術(shù)研究也在不斷獲得進(jìn)步，而且在社會(huì)生活中各個(gè)領(lǐng)域的實(shí)際應(yīng)用中發(fā)揮出很大的價(jià)值與作用。但是，由于當(dāng)今信息時(shí)代帶來(lái)的多樣化海量數(shù)據(jù)具有更為復(fù)雜的數(shù)據(jù)分析需求，并且需要更為高效的數(shù)據(jù)處理方式，使得大數(shù)據(jù)的研究與應(yīng)用成為科技前沿的重要領(lǐng)域之一。1大數(shù)據(jù)的概念1.1大數(shù)據(jù)的定義大數(shù)據(jù)是當(dāng)今科學(xué)技術(shù)發(fā)展下的信息產(chǎn)物，指在一定時(shí)間內(nèi)通過(guò)全新高效的數(shù)據(jù)處理形式并具有更有效優(yōu)化能力的規(guī)模大和多樣化的數(shù)據(jù)信息資產(chǎn)[1]。因而，大數(shù)據(jù)的概念不是單獨(dú)表現(xiàn)出數(shù)據(jù)的規(guī)模大小，而更多的意義是指對(duì)于種類(lèi)繁多的數(shù)據(jù)信息體系進(jìn)行高效處理的方式。大數(shù)據(jù)的戰(zhàn)略意義是對(duì)數(shù)據(jù)開(kāi)發(fā)挖掘并實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)的潛在價(jià)值，而在整個(gè)經(jīng)過(guò)中最關(guān)鍵的部分在于怎樣提高對(duì)數(shù)據(jù)的加工處理能力，進(jìn)而實(shí)現(xiàn)數(shù)據(jù)信息的價(jià)值[2]。1.2大數(shù)據(jù)的特征在大數(shù)據(jù)的應(yīng)用領(lǐng)域，大數(shù)據(jù)具有很多特點(diǎn)，但基本特征主要有五個(gè)[3]:(1)數(shù)據(jù)規(guī)模大。由于數(shù)據(jù)體系具有較大規(guī)模，使得大數(shù)據(jù)在處理經(jīng)過(guò)中需要采集和分析的數(shù)據(jù)量很大。(2)數(shù)據(jù)種類(lèi)多。大數(shù)據(jù)的來(lái)源非常復(fù)雜，導(dǎo)致數(shù)據(jù)的類(lèi)別具有多樣化，數(shù)據(jù)形式主要包括構(gòu)造化、半構(gòu)造化和非構(gòu)造化等。(3)處理速度快。數(shù)據(jù)信息的增長(zhǎng)較快，促使在數(shù)據(jù)處理經(jīng)過(guò)中所需的實(shí)時(shí)分析方式要求更高層次，否則海量數(shù)據(jù)的價(jià)值難以有效得到開(kāi)發(fā)與應(yīng)用。(4)數(shù)據(jù)價(jià)值高。在社會(huì)各個(gè)生活領(lǐng)域存在的數(shù)據(jù)資產(chǎn)都隱含著宏大的潛在信息，而通過(guò)大數(shù)據(jù)的應(yīng)用，能夠提取出有用的數(shù)據(jù)信息并能夠解釋當(dāng)下數(shù)據(jù)以及預(yù)測(cè)將來(lái)數(shù)據(jù)，進(jìn)而創(chuàng)造出較高的價(jià)值。(5)數(shù)據(jù)真實(shí)性。繁多的數(shù)據(jù)固然代表著不同的信息，但在大數(shù)據(jù)的實(shí)際分析處理經(jīng)過(guò)中，確保數(shù)據(jù)的質(zhì)量，才能使信息的真實(shí)性得以保證，這也是大數(shù)據(jù)處理在獲取數(shù)據(jù)價(jià)值經(jīng)過(guò)中的前提。隨著科技的不斷發(fā)展，大數(shù)據(jù)的特點(diǎn)也在陸續(xù)出現(xiàn)新的概念，使得大數(shù)據(jù)的特點(diǎn)與傳統(tǒng)數(shù)據(jù)有了很大區(qū)別，不僅在數(shù)據(jù)量方面具有廣泛性，而且還有對(duì)于海量數(shù)據(jù)信息的專(zhuān)業(yè)分析和高效處理方式，包括數(shù)據(jù)的時(shí)間快速性和形式復(fù)雜度，以及最終能夠獲取的有價(jià)值數(shù)據(jù)信息的能力。2大數(shù)據(jù)的處理與分析針對(duì)當(dāng)前各個(gè)領(lǐng)域中種類(lèi)復(fù)雜繁多且規(guī)模宏大的海量數(shù)據(jù)，計(jì)算機(jī)的處理方式也是多種多樣的，但在大數(shù)據(jù)的實(shí)際應(yīng)用中，無(wú)論數(shù)據(jù)處理形式怎樣發(fā)生變化，大數(shù)據(jù)的處理流程主要包括下面幾個(gè)部分。2.1數(shù)據(jù)獲取數(shù)據(jù)獲取是大數(shù)據(jù)處理流程的開(kāi)場(chǎng)階段，是利用一種數(shù)據(jù)采集裝置，從系統(tǒng)外端接口獲取特定數(shù)據(jù)經(jīng)過(guò)轉(zhuǎn)化輸入到系統(tǒng)內(nèi)端的存儲(chǔ)空間[4]。在數(shù)據(jù)源已有的前提下，數(shù)據(jù)采集的關(guān)鍵步驟是怎樣根據(jù)用戶(hù)或軟件的需求獲取更有效更準(zhǔn)確的數(shù)據(jù)信息。當(dāng)前，在各個(gè)領(lǐng)域得以應(yīng)用的數(shù)據(jù)采集技術(shù)有較多種類(lèi)。在數(shù)據(jù)采集經(jīng)過(guò)中，操作技術(shù)固然相對(duì)簡(jiǎn)單，但怎樣處理海量數(shù)據(jù)的并發(fā)需求以及提高數(shù)據(jù)庫(kù)的儲(chǔ)存能力，是大數(shù)據(jù)領(lǐng)域在數(shù)據(jù)獲取方面的主要研究方向[5]。隨著社會(huì)科技的飛速發(fā)展，數(shù)據(jù)獲取的方式在很多方面也發(fā)生了本質(zhì)上的變化，主要表如今智能數(shù)據(jù)采集系統(tǒng)的不斷研發(fā)應(yīng)用，促使大數(shù)據(jù)領(lǐng)域的數(shù)據(jù)獲取進(jìn)入一個(gè)全新科技時(shí)代[6]。2.2數(shù)據(jù)處理數(shù)據(jù)處理是大數(shù)據(jù)處理流程中的過(guò)渡階段，是后續(xù)數(shù)據(jù)分析階段的準(zhǔn)備，數(shù)據(jù)處理包括對(duì)各種原始數(shù)據(jù)的分析、整理、計(jì)算、編輯等的加工和處理，通過(guò)關(guān)聯(lián)分析和歸類(lèi)分析等特殊方式方法，對(duì)各種類(lèi)型的初始數(shù)據(jù)進(jìn)行統(tǒng)一過(guò)濾和梳理。數(shù)據(jù)處理的經(jīng)過(guò)主要包括數(shù)據(jù)清洗和數(shù)據(jù)集成等部分，通過(guò)整個(gè)處理流程能夠使各種數(shù)據(jù)類(lèi)型和構(gòu)造得以簡(jiǎn)化與統(tǒng)一，進(jìn)而保障了后續(xù)數(shù)據(jù)分析經(jīng)過(guò)的效果。數(shù)據(jù)處理階段是社會(huì)生活中系統(tǒng)工程和自動(dòng)控制的基礎(chǔ)部分，在很多領(lǐng)域都能夠具體表現(xiàn)出其重要作用[7]。數(shù)據(jù)處理方式的不斷創(chuàng)新及其實(shí)際應(yīng)用，在很大程度上促進(jìn)了大數(shù)據(jù)領(lǐng)域的發(fā)展。2.3數(shù)據(jù)分析數(shù)據(jù)分析是大數(shù)據(jù)處理流程的核心階段，通過(guò)數(shù)據(jù)分析最大程度挖掘數(shù)據(jù)的潛在價(jià)值，以發(fā)揮大數(shù)據(jù)在社會(huì)生活實(shí)際應(yīng)用中的效果[8]。數(shù)據(jù)分析經(jīng)過(guò)的目的是發(fā)現(xiàn)并提取數(shù)據(jù)體系包含的內(nèi)在規(guī)律并構(gòu)成結(jié)論信息，進(jìn)而對(duì)數(shù)據(jù)進(jìn)行具體研究和總結(jié)。在數(shù)據(jù)分析的經(jīng)過(guò)中，其數(shù)據(jù)分析結(jié)果信息能夠幫助人們?cè)谏顖?chǎng)景中作出判定，進(jìn)而采取適當(dāng)?shù)男袨楸憩F(xiàn)，這也是大數(shù)據(jù)分析的價(jià)值所在[9]。2.4數(shù)據(jù)解釋數(shù)據(jù)解釋是大數(shù)據(jù)處理流程的最后階段，其本質(zhì)為對(duì)大數(shù)據(jù)處理和分析的最終成果進(jìn)行可視化展示。在大數(shù)據(jù)的應(yīng)用領(lǐng)域中，經(jīng)過(guò)處理分析的數(shù)據(jù)結(jié)果不再局限于通過(guò)可讀或可見(jiàn)的形式傳輸呈現(xiàn)給用戶(hù)，而更多的是需要融合人機(jī)交互、人工智能、計(jì)算機(jī)圖形學(xué)和圖像處理的相關(guān)最新技術(shù)成果，將數(shù)據(jù)分析的結(jié)果通過(guò)更為豐富多樣和更直觀便利的形式展現(xiàn)并傳達(dá)給用戶(hù)。然而，大數(shù)據(jù)處理流程中，怎樣提高數(shù)據(jù)交互應(yīng)用經(jīng)過(guò)的實(shí)時(shí)性和準(zhǔn)確性是數(shù)據(jù)解釋的核心問(wèn)題，進(jìn)而保證大數(shù)據(jù)處理流程的完好度與價(jià)值感。3大數(shù)據(jù)應(yīng)用現(xiàn)在狀況與挑戰(zhàn)3.1應(yīng)用現(xiàn)在狀況當(dāng)下，大數(shù)據(jù)在社會(huì)各個(gè)領(lǐng)域都得以廣泛應(yīng)用，但主要集中表如今電商、交通、醫(yī)療等領(lǐng)域，在這些應(yīng)用領(lǐng)域中，大數(shù)據(jù)創(chuàng)造出宏大的價(jià)值，為社會(huì)的快速發(fā)展帶來(lái)了很強(qiáng)的科技支撐，同時(shí)也為人們?cè)谌粘Ｉ钪袔?lái)了很多便利。在電商領(lǐng)域，大數(shù)據(jù)的廣泛應(yīng)用使各個(gè)電商平臺(tái)的運(yùn)營(yíng)體系與交易形式發(fā)生了很大變化。如今的電商平臺(tái)如淘寶、京東等，都主要以客戶(hù)的數(shù)據(jù)為運(yùn)營(yíng)導(dǎo)向，通過(guò)數(shù)據(jù)處理與分析得出顧客的需求意向，預(yù)測(cè)平臺(tái)的產(chǎn)品在最近與將來(lái)的銷(xiāo)售情況，為商戶(hù)在日常經(jīng)營(yíng)中運(yùn)營(yíng)決策提供輔助參考與有效建議，進(jìn)而到達(dá)最大化獲取產(chǎn)品銷(xiāo)售利潤(rùn)的目的，不僅給商戶(hù)帶來(lái)了效益，同時(shí)也促進(jìn)了電商平臺(tái)的持續(xù)發(fā)展。例如，在淘寶平臺(tái)進(jìn)行購(gòu)物時(shí)，在系統(tǒng)頁(yè)面會(huì)出現(xiàn)個(gè)性化的產(chǎn)品推薦，這是電商平臺(tái)的廣告投放系統(tǒng)通過(guò)大數(shù)據(jù)分析作出的判定，根據(jù)用戶(hù)日常生活中搜索和購(gòu)買(mǎi)產(chǎn)品時(shí)表現(xiàn)出的系列數(shù)據(jù)，利用大數(shù)據(jù)技術(shù)分析得出用戶(hù)的產(chǎn)品偏好和行為意向等信息，進(jìn)而讓系統(tǒng)對(duì)不同客戶(hù)做出符合其個(gè)人的產(chǎn)品廣告推薦[10]。在交通領(lǐng)域，大數(shù)據(jù)也得以被廣泛應(yīng)用，為城市的交通與建設(shè)帶來(lái)了很大效益，當(dāng)前出現(xiàn)的智慧城市系統(tǒng)，正是利用大數(shù)據(jù)分析技術(shù)輔助與個(gè)人管理城市的交通與建設(shè)等信息，有效提高了城市管理的智能化水平[11]。例如，在城市交通系統(tǒng)中，高德地圖和百度地圖等系統(tǒng)軟件通過(guò)在平臺(tái)顯示各個(gè)路段的擁堵?tīng)顩r，實(shí)時(shí)為人們分析得出省時(shí)快速的出行道路與方案信息。在醫(yī)療領(lǐng)域，大數(shù)據(jù)能夠?qū)︶t(yī)療數(shù)據(jù)信息進(jìn)行有效的數(shù)據(jù)存儲(chǔ)和查詢(xún)等，同時(shí)通過(guò)數(shù)據(jù)處理與分析得出醫(yī)療數(shù)據(jù)的潛在信息價(jià)值。例如，在生活中得以應(yīng)用的健康狀況監(jiān)測(cè)系統(tǒng)，其原理是通過(guò)系統(tǒng)對(duì)醫(yī)療信息進(jìn)行數(shù)據(jù)處理與分析，得出個(gè)人健康狀況的信息，同時(shí)可以以給出相關(guān)醫(yī)生的建議以幫助恢復(fù)身體健康，大數(shù)據(jù)在醫(yī)療方面的應(yīng)用為人們?nèi)粘Ｉ畹慕】倒芾韼?lái)了很大便利。3.2將來(lái)挑戰(zhàn)大數(shù)據(jù)廣泛應(yīng)用于多個(gè)領(lǐng)域，固然產(chǎn)生了很大作用并帶來(lái)了宏大效益，但在實(shí)際應(yīng)用經(jīng)過(guò)中還存在著很多問(wèn)題與挑戰(zhàn)，主要具體表現(xiàn)出在下面幾個(gè)方面[12]:(1)數(shù)據(jù)獲取。大數(shù)據(jù)的數(shù)據(jù)來(lái)源比擬復(fù)雜，使得數(shù)據(jù)在構(gòu)造與形式上不能統(tǒng)一，進(jìn)而導(dǎo)致在大數(shù)據(jù)的數(shù)據(jù)獲取階段存在一個(gè)很大的挑戰(zhàn)，就是怎樣在融合不同形式數(shù)據(jù)的情況下能夠自動(dòng)定義數(shù)據(jù)的構(gòu)造形式，并且能保證其實(shí)時(shí)和有效[13]。(2)數(shù)據(jù)存儲(chǔ)。大數(shù)據(jù)的特點(diǎn)決定了數(shù)據(jù)存儲(chǔ)方式的特殊性，不僅要知足數(shù)據(jù)的海量規(guī)模，而且還能匹配數(shù)據(jù)的多樣類(lèi)型。在大數(shù)據(jù)的存儲(chǔ)技術(shù)上，國(guó)內(nèi)外也研發(fā)出比擬有效的系統(tǒng)，但仍然會(huì)存在一些問(wèn)題，同時(shí)為了促進(jìn)大數(shù)據(jù)更大程度發(fā)揮出應(yīng)有價(jià)值，數(shù)據(jù)存儲(chǔ)方面需要不斷優(yōu)化[14]。(3)數(shù)據(jù)分析。大數(shù)據(jù)的規(guī)模大和種類(lèi)多是數(shù)據(jù)分析經(jīng)過(guò)中需要十分考慮的一個(gè)因素，使得大數(shù)據(jù)在不同的應(yīng)用場(chǎng)景中需要采用不同的數(shù)據(jù)分析方式方法[15]。在大數(shù)據(jù)的整個(gè)發(fā)展經(jīng)過(guò)中，固然存在著不同的挑戰(zhàn)，但與此同時(shí)也促進(jìn)了大數(shù)據(jù)技術(shù)的不斷創(chuàng)新，使大數(shù)據(jù)領(lǐng)域在將來(lái)有了更大的發(fā)展空間。4總結(jié)與瞻望根據(jù)大數(shù)據(jù)應(yīng)用與分析的綜述，發(fā)現(xiàn)大數(shù)據(jù)在社會(huì)各個(gè)領(lǐng)域的應(yīng)用中表現(xiàn)出宏大的潛力，然而大數(shù)據(jù)在數(shù)據(jù)獲取、存儲(chǔ)和分析等方面仍然面臨著眾多挑戰(zhàn)。同時(shí)，這些挑戰(zhàn)也在促進(jìn)大數(shù)據(jù)技術(shù)不斷進(jìn)步。因而，對(duì)于大數(shù)據(jù)的將來(lái)應(yīng)用，大數(shù)據(jù)會(huì)愈加多樣化、高層次和寬領(lǐng)域，同時(shí)大數(shù)據(jù)領(lǐng)域會(huì)與其他領(lǐng)域進(jìn)行融合交互，例如人工智能等[16]。總之，大數(shù)據(jù)在將來(lái)的應(yīng)用領(lǐng)域會(huì)愈加廣泛，為社會(huì)發(fā)展帶來(lái)更大的價(jià)值。以下為參考文獻(xiàn)[1]袁冰.大數(shù)據(jù)行業(yè)應(yīng)用現(xiàn)在狀況與發(fā)展趨勢(shì)[J].中國(guó)新通信，2020(24):75-76.[2]梁巧琴.大數(shù)據(jù)應(yīng)用的現(xiàn)在狀況與瞻望[J].信息通信，2021(1):133-134.[3]俞立平.大數(shù)據(jù)與大數(shù)據(jù)經(jīng)濟(jì)學(xué)[J].中國(guó)軟科學(xué)，2020(7):177-183.[4]程學(xué)旗.大數(shù)據(jù)系統(tǒng)和分析技術(shù)綜述[J].軟件學(xué)報(bào)，2020(9):1889-1908.[5]DOBREC,XHAFAF.Intelligentservicesforbigdatascience[J].FutureGenerationComputerSystems,2020,37(2):267-281.[6]WONGHT,YINQ,GUOYQ,etal.Bigdataasanewapproachinemergencymedicineresearch[J].JournalofAcuteDisease,2021,4(3):178-179.[7]BEGENAUJ,FARBOODIM,VELDKAMPL.Bigdatainfinanceandthegrowthoflargefirms[J].JournalofMonetaryEconomics,2021(5):13.[8]黃永勤.國(guó)外大數(shù)據(jù)研究熱門(mén)及發(fā)展趨勢(shì)探析[J].情報(bào)雜志，2021(6):99-104.[9]OMOLARAAE,JANTANA,ABIODUNOI,etal.State-of-The-Artinbigdataapplicationtechniquestofinancialcrime:asurvey[J].InternationalJournalofComputerScienceandNetworkSecurity,2021,18(7):6-16.[10]FEINLEIBD.ThebigdataLandscape[M].City:Apress,2020.[11]王珊，王會(huì)舉.架構(gòu)大數(shù)據(jù)：挑戰(zhàn)、現(xiàn)在狀況與瞻望[J].計(jì)算機(jī)學(xué)報(bào)，2018(10):1741-1752.[12]JAINP,GYANCHANDANIM,KHAREN.Bigdataprivacy:atechnologicalperspectiveandreview[J].JournalofBigData,2021,3(1):25.[13]任磊，杜一.大數(shù)據(jù)可視分析綜述[J].軟件學(xué)報(bào)，2020(9):1909-1936.[14]SIVARAJAHU,KAMALMM,IRANIZ,etal.Criticalanalysisofbigdatachallengesandanalyticalmethods[J].JournalofBusinessResearch,2021(70):263-286.[15]ABAWAJYJH,KELAREVA,CHOWDHURYM.Largeiterativemultitierensembleclassifiersforsecu