美國大數(shù)據(jù)應(yīng)用狀況分析對實踐的啟示

1、精選優(yōu)質(zhì)文檔-傾情為你奉上美國大數(shù)據(jù)應(yīng)用狀況分析對實踐的啟示 美國是最先推出大數(shù)據(jù)戰(zhàn)略的國家。2012年5月，美國政府宣布投資2億美元提高大數(shù)據(jù)技術(shù)（包括數(shù)據(jù)的儲存、分析、收集），以加快科學(xué)研究、加強國家安全、改革教學(xué)和培訓(xùn)體系以及促進專業(yè)人才發(fā)展。大數(shù)據(jù)與開放政府?dāng)?shù)據(jù)對電子公共服務(wù)、開放和透明政府以及政府公眾與企業(yè)間的互動，都蘊藏著巨大的變革潛力。大數(shù)據(jù)與開放政府?dāng)?shù)據(jù)可推動多方協(xié)作，為農(nóng)業(yè)、健康和交通運輸?shù)雀鱾€領(lǐng)域面臨的挑戰(zhàn)提出實時解決方案，推動更大程度的開放，并引領(lǐng)政策制定走向新時代。本文以美國為背景，對有關(guān)開放政府?dāng)?shù)據(jù)與大數(shù)據(jù)的關(guān)鍵政策問題進行評論，然后為大數(shù)據(jù)和開放政府?dāng)?shù)據(jù)的實踐提供建

2、議，以推進數(shù)據(jù)驅(qū)動的創(chuàng)新。大數(shù)據(jù)應(yīng)用2012年3月奧巴馬政府發(fā)布了“大數(shù)據(jù)研究和發(fā)展計劃”。作為回應(yīng)，美國國家科學(xué)基金會、美國國家衛(wèi)生研究院、國防部、能源部和美國地質(zhì)調(diào)查局都在投資大數(shù)據(jù)創(chuàng)新。美國很多公司正在圍繞大數(shù)據(jù)的采集和利用能力來開展他們的商業(yè)活動，并將這些活動作為其產(chǎn)品或運營后端的一部分。科研群體、政府和私營部門也正在加速生成各種主題的大規(guī)模數(shù)據(jù)集，包括：氣候變化、交通模式、健康和疾病數(shù)據(jù)、購買行為以及通過社會化媒體互動表現(xiàn)出的社會行為。大數(shù)據(jù)應(yīng)用的案例有：Inrix公司和新澤西州運輸部之間的合作伙伴關(guān)系。Inrix公司通過汽車和移動電話GPS裝置上的信號和數(shù)據(jù)，采集主干道上的車速數(shù)據(jù)

3、，然后實時向新澤西州運輸部警示任意主干道上的路況險情，同時向司機的車載GPS裝置或移動電話發(fā)送警示來提醒司機注意路況險情。氣候公司(TheClimateCorporation)是一家天氣保險公司，他們制作保單來彌補聯(lián)邦農(nóng)作物保險和因氣候造成的農(nóng)民損失之間的差額。該公司通過龐大的傳感器網(wǎng)絡(luò)分析和預(yù)測2000萬美國農(nóng)田的氣溫、降水、土壤濕度和產(chǎn)量。在知曉高溫天的天數(shù)以及土壤濕度數(shù)據(jù)后，建立的模型來幫助其預(yù)判農(nóng)民需要的天氣保險金額以及公司需要支付的保費。紐約州能源研究和發(fā)展管理局運用一系列的大數(shù)據(jù)技術(shù)來評估氣候變化對紐約州的影響，并為農(nóng)業(yè)、公共衛(wèi)生、能源和交通運輸?shù)阮I(lǐng)域提供應(yīng)對氣候變化的策略。這一應(yīng)

4、用也被引入美國疾病控制中心，它正與美國其他10個州和城市一起開展“閱讀州和城市計劃”，共同研究和應(yīng)對氣候變化，而大數(shù)據(jù)技術(shù)是其中一個非常重要的組成部分。開放政府?dāng)?shù)據(jù)大數(shù)據(jù)戰(zhàn)略，往往建立在開放政府?dāng)?shù)據(jù)的基礎(chǔ)上。開放政府?dāng)?shù)據(jù)在美國并不是一個全新的概念。多年來，政府的信息和數(shù)據(jù)在不斷變化，采集和發(fā)布政府?dāng)?shù)據(jù)的方法和途徑也同樣經(jīng)歷了這些變化。開放政府?dāng)?shù)據(jù)在催生新的科學(xué)研究成果、加快經(jīng)濟增長、為政策制定提供信息以及制定為民服務(wù)的新政策方面都深具潛力。有關(guān)開放政府?dāng)?shù)據(jù)的政策選擇將對大規(guī)模數(shù)據(jù)集應(yīng)用的創(chuàng)新和研究、政府開放和透明以及其他眾多領(lǐng)域產(chǎn)生深遠影響。作為奧巴馬政府開放政府計劃的一部分，2010年美國政

5、府建立網(wǎng)站，向公眾開放“高價值”的數(shù)據(jù)集。這一政府開放數(shù)據(jù)平臺現(xiàn)已可直接為用戶提供海量的原始政府?dāng)?shù)據(jù)，并期待用戶能挖掘這些數(shù)據(jù)的新的利用價值，從而以過去無法實現(xiàn)的方式加深我們對政府活動和更龐雜的社會事務(wù)的認知。這些技術(shù)方法推動了數(shù)據(jù)的可獲取、開放和透明，同時又讓公眾、組織、社區(qū)和其他社會成員在現(xiàn)有數(shù)據(jù)的基礎(chǔ)上產(chǎn)生新的創(chuàng)新性認知。作為一個面向公眾的平臺，它可成為一個促進協(xié)作、存儲數(shù)據(jù)集、推動社區(qū)參與和提供參與機會的工具。除此之外，數(shù)據(jù)還可通過這些平臺以多種格式(如CSV，XML和Excel等)儲存和開放。每種數(shù)據(jù)格式都有其特定含義，可限制或促進數(shù)據(jù)的應(yīng)用。現(xiàn)行政策分析關(guān)于大數(shù)據(jù)和

6、開放政府?dāng)?shù)據(jù)的一個關(guān)鍵問題是，政府信息和數(shù)據(jù)的管理、使用、再利用和可獲取政策。美國有一整套復(fù)雜且不斷變化的信息政策(法律、法規(guī)和備忘錄)，用來管理信息的生命周期，從信息的生成、信息的傳播、再到信息處理和歸檔，涉及到如何在數(shù)據(jù)可獲取、隱私、安全問題、數(shù)字資產(chǎn)管理、歸檔和保存等問題上尋求平衡。這個政策框架盡管也不斷調(diào)整，但仍落后于技術(shù)的進步，這一脫節(jié)使人們對美國現(xiàn)行政策框架是否足以應(yīng)對大數(shù)據(jù)帶來的問題產(chǎn)生了疑問，并提出以下幾個關(guān)鍵問題：我們能確保數(shù)據(jù)的可獲取性嗎?在大數(shù)據(jù)時代我們?nèi)绾伪Ｗo隱私?我們?nèi)绾未_保數(shù)據(jù)的質(zhì)量和準(zhǔn)確性?在目前的歸檔和保存條件下，如何管理我們的數(shù)字資產(chǎn)?大數(shù)據(jù)時代我們能否發(fā)展有

7、力的數(shù)據(jù)再利用政策?下文將具體分析在大數(shù)據(jù)和開放政府?dāng)?shù)據(jù)時代，當(dāng)前美國的信息政策框架的現(xiàn)狀和滯后性，并給出了信息政策調(diào)整的建議。(一)數(shù)據(jù)可獲取和發(fā)布美國管理和預(yù)算辦公室在數(shù)據(jù)獲取和發(fā)布方面為政府機構(gòu)提供了廣泛的指導(dǎo)，他們確立了以下原則：政府機構(gòu)必須及時、公平、有效地以適當(dāng)?shù)姆绞桨研畔l(fā)布給公眾。政府機構(gòu)必須建立和維護“信息發(fā)布產(chǎn)品清單”。政府機構(gòu)必須考慮到公民獲取能力的差異，讓那些不能上網(wǎng)的公眾也能獲得重要信息。政府機構(gòu)應(yīng)制定多種策略來發(fā)布信息。當(dāng)使用電子媒體時，那些涉及妥善管理和文件歸檔的規(guī)定同樣適用。政府機構(gòu)需要評估并確定最合適的方法來采集和保存文件。美國管理和預(yù)算辦公室也為政府機構(gòu)網(wǎng)站

8、的信息管理提供廣泛的指導(dǎo)。要求政府機構(gòu)對提供的所有在線應(yīng)用進行標(biāo)準(zhǔn)化的風(fēng)險評估，并要求政府機構(gòu)執(zhí)行多項與隱私相關(guān)的措施。其他有關(guān)信息獲取和傳播的政策工具還包括：1.要求政府機構(gòu)對英語能力有限的人提供適當(dāng)?shù)男畔@取方式，涉及所有的“聯(lián)邦的項目和活動”。這個政策的目標(biāo)是為了解決公民使用電子政務(wù)的鴻溝，尤其是那些不以英語為母語的人。2.規(guī)定殘疾人在公共教育中可平等獲取所有的電子材料。規(guī)定政府在提供服務(wù)和福利，以及開展政民溝通時，不得將殘疾人排除在外。保證殘疾人平等地參與政府活動和獲取政府信息，并確立了他們獲取信息和使用通信技術(shù)的一般權(quán)利。3.推進和實施了線上信息和通信技術(shù)的可獲取性。4.由聯(lián)邦政府采

9、購、維護或使用的電子和信息技術(shù)必須滿足特定的獲取性標(biāo)準(zhǔn)，以確保殘疾人能夠獲取在線信息和服務(wù)。(二)隱私、安全、準(zhǔn)確性和歸檔政府網(wǎng)站正變成雙向社區(qū)，增加了網(wǎng)絡(luò)病毒或其他攻擊載體侵入政府環(huán)境的可能性，同時也增加了信息意外泄露的可能性。信息政策框架也做出了相應(yīng)調(diào)整以應(yīng)對這一變化。比如，管理和預(yù)算辦公室要求政府機構(gòu)盡可能采取足夠的安全措施，以確保信息不被篡改，并確保其準(zhǔn)確性、保密性和可獲取性，以符合政府機構(gòu)的預(yù)期和用戶的需求。然而，當(dāng)前的相關(guān)政策并不能保證解決大數(shù)據(jù)所帶來的大量使用不當(dāng)問題。對個人身份信息、政府?dāng)?shù)據(jù)與信息的安全性以及對公開數(shù)據(jù)的準(zhǔn)確性的擔(dān)憂，都與大數(shù)據(jù)相關(guān)。大數(shù)據(jù)的質(zhì)量、可靠性和權(quán)威性

10、是政府、科研群體以及非政府組織和私營部門最關(guān)注的問題。未經(jīng)確認或驗證的數(shù)據(jù)、或用錯誤方法采集到的低質(zhì)量數(shù)據(jù)可能會導(dǎo)致錯誤的研究發(fā)現(xiàn)，進而嚴(yán)重影響一系列的決策和政策制定。的數(shù)據(jù)管理政策，致力于解決這些問題，具體包括：規(guī)定負責(zé)采集和發(fā)布數(shù)據(jù)的政府機構(gòu)要確保數(shù)據(jù)的準(zhǔn)確性、及時性和整體質(zhì)量。要求政府機構(gòu)進行版本控制，確保數(shù)據(jù)集具有明確的標(biāo)簽。要求政府機構(gòu)確保上發(fā)布的數(shù)據(jù)不涉及國家安全。要求政府機構(gòu)確保發(fā)布的數(shù)據(jù)符合保密和隱私保護的相關(guān)規(guī)定。沿著信息的生命周期繼續(xù)往下走，大數(shù)據(jù)的使用、儲存和保存等方面也面臨各種挑戰(zhàn)。推動大數(shù)據(jù)的開放和可獲取，與促進大數(shù)據(jù)的利用具有顯著差別

11、。此外，特定領(lǐng)域的數(shù)據(jù)應(yīng)用(即只有某個特定領(lǐng)域的科學(xué)家們使用)和廣泛的跨學(xué)科數(shù)據(jù)應(yīng)用(即跨學(xué)科領(lǐng)域和跨常見研究領(lǐng)域的應(yīng)用)之間也有不同。同時，需要為大規(guī)?？蒲袛?shù)據(jù)集建立專門的數(shù)據(jù)庫。構(gòu)建數(shù)據(jù)社區(qū)的一個要素是迫切需要整合和管理來自不同源頭和不同部門的數(shù)據(jù)。這些數(shù)據(jù)流必須在政府、私營部門、公共事業(yè)公司、各種設(shè)備和個人之間流動交匯，才能真正有用，并為社區(qū)和國家發(fā)展提供信息。因此，有必要在各個實體間建立、采用并遵守一套正式的數(shù)據(jù)管理標(biāo)準(zhǔn)和操作辦法，以保障數(shù)據(jù)兼容性、命名規(guī)則和組織架構(gòu)。而且，為確保研究人員們對于數(shù)據(jù)集的知情使用，也需要制作具有明確定義的數(shù)據(jù)文件和編碼本。“聚合”指的是用戶將從不同網(wǎng)站得

12、到的數(shù)據(jù)結(jié)合起來，大數(shù)據(jù)使當(dāng)下信息政策環(huán)境變得更為復(fù)雜。管理和預(yù)算辦公室要求各政府機構(gòu)的公共網(wǎng)站，提供開放且符合業(yè)界標(biāo)準(zhǔn)格式的數(shù)據(jù)，使得用戶能夠整合、分解、操縱或分析數(shù)據(jù)以滿足他們的需求。目前經(jīng)過聚合的數(shù)據(jù)往往缺乏正式的授權(quán)和驗證程序。正如網(wǎng)站所提出的，“一旦數(shù)據(jù)從該政府機構(gòu)頁面被下載后，政府不再能保證其質(zhì)量和即時性。此外，美國政府無法對取自的數(shù)據(jù)的任何分析結(jié)果做擔(dān)?！?。雖然這一免責(zé)聲明限定了的責(zé)任，但二次數(shù)據(jù)使用問題仍需要解決。大數(shù)據(jù)的監(jiān)管也是一個不可忽視的問題。數(shù)字化監(jiān)管涉及對電子研究數(shù)據(jù)的維護、保存和增值，并貫穿其整個生命周期，例如數(shù)字資產(chǎn)

13、的概念問題、數(shù)字資產(chǎn)的創(chuàng)造、獲取和使用問題，以及數(shù)字資產(chǎn)的評價和選擇工作。隨著新的電子數(shù)據(jù)資產(chǎn)的持續(xù)增長，有必要為大數(shù)據(jù)的整個生命周期制定有效的數(shù)據(jù)管理策略。最后，在諸如社區(qū)這樣的數(shù)字“開放空間”里，永久的、最終的文件越來越少，而幾乎所有文件管理和歸檔工作都是基于這些文件建立起來的。可現(xiàn)在由于使用非政府的第三方應(yīng)用程序或軟件，且數(shù)據(jù)調(diào)整和修改不斷發(fā)生，使得數(shù)據(jù)所有權(quán)、儲存進度以及歸檔工作都面臨巨大的挑戰(zhàn)。政策和治理原則當(dāng)政策制定者考慮、辯論并制定政策時，當(dāng)私有部門、非營利部門與政府在進行合作時，我們會發(fā)現(xiàn)對開放政府?dāng)?shù)據(jù)和大數(shù)據(jù)立法或者制定一套政策和治理結(jié)構(gòu)非常困難。政府需要在進

14、行數(shù)據(jù)開放并利用大數(shù)據(jù)技術(shù)的時候，需要制定一套指導(dǎo)原則。而且這些指導(dǎo)原則只是一個開始，并非結(jié)束。隨著對大數(shù)據(jù)創(chuàng)新的理解不斷深入，我們需要建立并維持一個強有力的政策和治理框架。這些指導(dǎo)原則是：1.不造成傷害。在政府、私有部門和公眾社會間共享數(shù)據(jù)可能涉及到私人的、敏感的個人信息，而這些組織中的大多數(shù)并不擁有相匹配的數(shù)據(jù)管理、利用和再利用政策。當(dāng)非政府組織也是大數(shù)據(jù)合作項目的參與者時，個人不應(yīng)該被強制或被要求將政府出于某種目的而采集的數(shù)據(jù)共享給這些非政府組織。2.長遠眼光。數(shù)據(jù)的長期共享、保存、檢索以及獲取將要求超越當(dāng)前技術(shù)水平，具有長遠眼光。需要保證大數(shù)據(jù)及其附屬產(chǎn)品能在未來的10年、20年乃至更

15、長的時間里都能獲得。從一開始就堅持遵守開放數(shù)據(jù)標(biāo)準(zhǔn)及技術(shù)標(biāo)準(zhǔn)可有效推動這一過程。3.數(shù)據(jù)表述。我們需要保證數(shù)據(jù)元素、數(shù)據(jù)采集單位(例如，是個人層級還是社區(qū)層級)、或數(shù)據(jù)的其他方面都被很好地界定，同時數(shù)據(jù)采集和使用政策得到清楚地表述。4.承擔(dān)責(zé)任。大數(shù)據(jù)對于提供信息和制定政策潛力巨大，但也可能造成損害。大數(shù)據(jù)通常包含了多種數(shù)據(jù)集的聚合，而這些數(shù)據(jù)集最初并不是出于整合的目的而生成的。在大數(shù)據(jù)創(chuàng)新中，政府需要對他人使用其數(shù)據(jù)所造成的損害承擔(dān)責(zé)任，確保對公眾的保護。政策建議大數(shù)據(jù)帶來了一系列問題，而當(dāng)前的政策框架卻無力解決這些問題，這就需要一個大數(shù)據(jù)的治理模式。這一治理模式需要考慮以下具體問題：隱私。在個人、家庭、設(shè)備或其他層面，大數(shù)據(jù)包含了各種個人信息數(shù)據(jù)。隱私保護法律和政策可能會與