大數(shù)據(jù)的介紹課件

大數(shù)據(jù)介紹1大數(shù)據(jù)介紹1目錄大數(shù)據(jù)的概念大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的區(qū)別？大數(shù)據(jù)的典型特征（3V）廣義的大數(shù)據(jù)大數(shù)據(jù)應(yīng)用案例2目錄大數(shù)據(jù)的概念2大數(shù)據(jù)的概念大數(shù)據(jù)(BigData)是指無法用現(xiàn)有的軟件工具提取、存儲、搜索、共享、分析和處理的海量的、復(fù)雜的數(shù)據(jù)集合簡單一點(diǎn)的說，就是用現(xiàn)有一般技術(shù)難以管理的數(shù)據(jù)。3大數(shù)據(jù)的概念大數(shù)據(jù)(BigData)是指無法用現(xiàn)有的軟件工大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的區(qū)別？小明去了一百次書店

傳統(tǒng)數(shù)據(jù)：要回答的問題是他第一百零一次買不買書，即業(yè)績和經(jīng)營指標(biāo)的問題；大數(shù)據(jù)：要回答的是他第一百零一次買什么書，需要將什么樣的內(nèi)容推薦給他。群體和個(gè)體的區(qū)別傳統(tǒng)定義上，更多關(guān)注的是一類人群，用同一類規(guī)則制訂套餐給他們；互聯(lián)網(wǎng)時(shí)代，要把每個(gè)人都精準(zhǔn)刻畫出來，進(jìn)行精準(zhǔn)匹配。4大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的區(qū)別？小明去了一百次書店4大數(shù)據(jù)的典型特征（3V）Volume（容量）現(xiàn)在基本上是指從幾十TB到幾PB這樣的數(shù)量級，未來，可能只有幾EB數(shù)量級的數(shù)據(jù)量才能稱得上是大數(shù)據(jù)了。(1T=1024G,1P=1024T)Variety（多樣性）結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)Velocity（速度）數(shù)據(jù)產(chǎn)生和更新的頻率5大數(shù)據(jù)的典型特征（3V）Volume（容量）5廣義的大數(shù)據(jù)所謂大數(shù)據(jù)，是一個(gè)綜合性概念，它包括：（1）因具備3V特征而難以進(jìn)行管理的數(shù)據(jù)（2）對這些數(shù)據(jù)進(jìn)行存儲、處理、分析的技術(shù)（3）以及能夠通過分析這些數(shù)據(jù)獲得實(shí)用意義和觀點(diǎn)的人才和組織6廣義的大數(shù)據(jù)所謂大數(shù)據(jù)，是一個(gè)綜合性概念，它包括：6大數(shù)據(jù)的應(yīng)用案例7大數(shù)據(jù)的應(yīng)用案例7穿孔卡片與美國人口普查美國在1880年進(jìn)行的人口普查，耗時(shí)8年才完成數(shù)據(jù)匯總。因此，他們獲得的很多數(shù)據(jù)都是過時(shí)的。1890年進(jìn)行的人口普查，預(yù)計(jì)要花費(fèi)13年的時(shí)間來匯總數(shù)據(jù)。后來，美國人口普查局通過用赫爾曼-霍爾瑞斯發(fā)明的穿孔卡片制表機(jī)來進(jìn)行1890年的人口普查，耗時(shí)一年。8穿孔卡片與美國人口普查美國在1880年進(jìn)行的人口普查，耗時(shí)8麻省理工與通貨緊縮預(yù)測軟件美國勞工統(tǒng)計(jì)局的人員每個(gè)月都要公布消費(fèi)物價(jià)指數(shù)（CPI），這是用來測試通貨膨脹率的。政府通過人工采集價(jià)格信息數(shù)據(jù)每年大概需要花費(fèi)兩億五千萬美元。這些數(shù)據(jù)是精確的也是有序的，但是數(shù)據(jù)往往會(huì)有幾周的滯后。麻省理工學(xué)院（MIT）的兩位經(jīng)濟(jì)學(xué)家，通過一個(gè)軟件在互聯(lián)網(wǎng)上每天可以收集到50萬種商品的價(jià)格，他們能比官方數(shù)據(jù)提前發(fā)現(xiàn)通貨緊縮趨勢。9麻省理工與通貨緊縮預(yù)測軟件美國勞工統(tǒng)計(jì)局的人員每個(gè)月都要公布沃爾瑪，請把蛋撻與颶風(fēng)用品擺在一起通過對歷史交易記錄這個(gè)龐大數(shù)據(jù)庫進(jìn)行觀察，沃爾瑪注意到，每當(dāng)季節(jié)性颶風(fēng)來臨之前，不僅手電筒銷量增加，而且美式早餐含糖零食蛋撻銷量也增加了。因此每當(dāng)季節(jié)性颶風(fēng)來臨時(shí)，沃爾瑪就會(huì)把蛋撻與颶風(fēng)用品擺放在一起，從而增加銷量。10沃爾瑪，請把蛋撻與颶風(fēng)用品擺在一起通過對歷史交易記錄這個(gè)龐大沃爾瑪：東海岸——中海岸——西海岸在美國，東海岸、中海岸、西海岸之間有兩小時(shí)時(shí)差。東海岸的沃爾瑪營業(yè)兩小時(shí)后之后，中海岸才開始營業(yè)，沃爾瑪就會(huì)把東海岸當(dāng)天這兩小時(shí)的營業(yè)情況、相關(guān)數(shù)據(jù)傳給中海岸。中海岸就會(huì)根據(jù)這個(gè)數(shù)據(jù)知道了這天人們的購物喜好，決定貨品怎么擺放，哪些貨物擺放在一起會(huì)比較好。這種方式給沃爾瑪帶來了很大的利潤。11沃爾瑪：東海岸——中海岸——西海岸在美國，東海岸、中海岸、西美國折扣零售商塔吉特與懷孕預(yù)測塔吉特公司能在不被清楚告知的情況下預(yù)測出一個(gè)女性的懷孕情況該公司找出了大概20多種與懷孕的關(guān)聯(lián)物，給顧客進(jìn)行“懷孕趨勢”評分這些數(shù)據(jù)甚至使得零售商能夠比較準(zhǔn)確地預(yù)測預(yù)產(chǎn)期，這樣就能夠在孕期的每個(gè)階段給客戶寄送相應(yīng)的優(yōu)惠券12美國折扣零售商塔吉特與懷孕預(yù)測塔吉特公司能在不被清楚告知的情Hitwise，通過流量判斷消費(fèi)者喜好數(shù)據(jù)創(chuàng)新再利用的一個(gè)典型例子是搜索關(guān)鍵詞。消費(fèi)者和搜索引擎之間的瞬時(shí)交互形成了一個(gè)網(wǎng)站和廣告的列表，實(shí)現(xiàn)了那一刻的特定功能。這些信息除了實(shí)現(xiàn)基本用途之外，它還可以變得非常有價(jià)值。如數(shù)據(jù)代理益百利旗下的網(wǎng)頁流量測量公司Hitwise，讓客戶采集搜索流量來揭示消費(fèi)者的喜好。13Hitwise，通過流量判斷消費(fèi)者喜好數(shù)據(jù)創(chuàng)新再利用的一個(gè)典物聯(lián)網(wǎng)物聯(lián)網(wǎng)（InternetofThings，縮寫IOT）是一個(gè)基于互聯(lián)網(wǎng)、傳統(tǒng)電信網(wǎng)等信息承載體，讓所有能夠被獨(dú)立尋址的普通物理對象實(shí)現(xiàn)互聯(lián)互通的網(wǎng)絡(luò)。在物聯(lián)網(wǎng)上，每個(gè)人都可以應(yīng)用電子標(biāo)簽將真實(shí)的物體上網(wǎng)聯(lián)結(jié)，在物聯(lián)網(wǎng)上都可以查找出它們的具體位置。通過物聯(lián)網(wǎng)可以用中心計(jì)算機(jī)對機(jī)器、設(shè)備、人員進(jìn)行集中管理、控制，也可以對家庭設(shè)備、汽車進(jìn)行遙控，以及搜尋位置、防止物品被盜等各種應(yīng)用。14物聯(lián)網(wǎng)物聯(lián)網(wǎng)（InternetofThings，縮寫IORFID技術(shù)RFID是RadioFrequencyIdentification的縮寫，即射頻識別，俗稱電子標(biāo)簽。RFID是一種簡單的無線系統(tǒng)，由一個(gè)詢問器(或閱讀器)和很多應(yīng)答器(或標(biāo)簽)組成。該系統(tǒng)用于控制、檢測和跟蹤物體。RFID技術(shù)在超市和圖書館中的應(yīng)用15RFID技術(shù)RFID是RadioFrequencyIde車聯(lián)網(wǎng)未來車聯(lián)網(wǎng)技術(shù)將重新定義汽車DNA。借助無線通訊，城市內(nèi)車與車之間，車與建筑之間，車與人之間都將建立更加智能緊密的互聯(lián)。通過裝載在車輛上的電子標(biāo)簽利用無線射頻等識別技術(shù)，實(shí)現(xiàn)在信息網(wǎng)絡(luò)平臺上對所有車輛的屬性信息和靜、動(dòng)態(tài)信息進(jìn)行提取和有效利用，并根據(jù)不同的功能需求對所有車輛的運(yùn)行狀態(tài)進(jìn)行有效的監(jiān)管和提供綜合服務(wù)。16車聯(lián)網(wǎng)未來車聯(lián)網(wǎng)技術(shù)將重新定義汽車DNA。借助無線通訊，城市無人駕駛無人駕駛被人認(rèn)為是車聯(lián)網(wǎng)的終極目標(biāo)無人駕駛車依賴的技術(shù)很多，比如導(dǎo)航、雷達(dá)、龐大數(shù)據(jù)計(jì)算等，要實(shí)現(xiàn)這些技術(shù)需要和物聯(lián)網(wǎng)緊密結(jié)合起來。無人駕駛是通過車載傳感系統(tǒng)感知道路環(huán)境，自動(dòng)規(guī)劃行車路線并控制車輛到達(dá)預(yù)定目標(biāo)的智能汽車。17無人駕駛無人駕駛被人認(rèn)為是車聯(lián)網(wǎng)的終極目標(biāo)17自動(dòng)泊車系統(tǒng)自動(dòng)泊車系統(tǒng)，顧名思義駕駛者雙手可以離開方向盤，在車輛停好之前要做的只是等待。自動(dòng)泊車系統(tǒng)主要由兩部分組成：控制單元和位于前后保險(xiǎn)杠以及兩側(cè)的超聲波雷達(dá)探頭。按動(dòng)自動(dòng)泊車輔助系統(tǒng)激活按鈕之后，雷達(dá)探頭可在車輛行駛時(shí)對車輛兩側(cè)進(jìn)行掃描?？刂茊卧獙走_(dá)反饋的信息進(jìn)行分析，從而估算出車位是否足以容納車輛停放。自動(dòng)泊車系統(tǒng)隨后將通過助力轉(zhuǎn)向系統(tǒng)對車輛行駛方向進(jìn)行干預(yù)，并以控制單元規(guī)劃好的路徑將車輛停入車位。18自動(dòng)泊車系統(tǒng)自動(dòng)泊車系統(tǒng)，顧名思義駕駛者雙手可以離開方向盤，日本先進(jìn)工業(yè)技術(shù)研究院的坐姿研究與汽車防盜系統(tǒng)該研究所教授把每個(gè)駕車者的坐姿量化為精確的數(shù)據(jù)，使其對司機(jī)識別的正確率高達(dá)98%。這項(xiàng)技術(shù)作為汽車防盜系統(tǒng)，一旦識別駕車者不是車主，就會(huì)自動(dòng)熄火。這一技術(shù)還可匯集事故發(fā)生前駕車者的姿勢變化數(shù)據(jù)，分析坐姿與行駛安全的關(guān)系，在司機(jī)疲勞駕駛時(shí)發(fā)出警示或自動(dòng)剎車。19日本先進(jìn)工業(yè)技術(shù)研究院的坐姿研究與汽車防盜系統(tǒng)該研究所教授把UPS快遞——大數(shù)據(jù)技術(shù)下的最佳行車路徑

UPS快遞多效地利用了地理定位數(shù)據(jù)。為了使總部能在車輛出現(xiàn)晚點(diǎn)的時(shí)候跟蹤到車輛的位置和預(yù)防引擎故障，它的貨車上裝有傳感器、無線適配器和GPS。同時(shí)，這些設(shè)備也方便了公司監(jiān)督管理員工并優(yōu)化行車線路。UPS為貨車定制的最佳行車路徑是根據(jù)過去的行車經(jīng)驗(yàn)總結(jié)而來的。2011年，UPS的駕駛員少跑了近4828萬公里的路程，節(jié)省了300萬加侖的燃料并且減少了3萬公噸的二氧化碳排放量。20UPS快遞——大數(shù)據(jù)技術(shù)下的最佳行車路徑

UPS快遞多效地利UPS與汽車修理預(yù)測UPS國際快遞公司從2000年就開始使用預(yù)測性分析來監(jiān)測自己全美60000輛車規(guī)模的車隊(duì)，這樣就能及時(shí)地進(jìn)行防御性的修理。通過監(jiān)測車輛的各個(gè)部位，UPS只需要更換需要更換的零件，從而節(jié)省了好幾百萬美元。21UPS與汽車修理預(yù)測UPS國際快遞公司從2000年就開始使用谷歌與甲型H1N1流感2009年出現(xiàn)的甲型H1N1流感，當(dāng)時(shí)還沒有研發(fā)出對抗這種新型流感病毒的疫苗，公共衛(wèi)生專家能做的只是減慢它傳播的速度。但要做到這一點(diǎn)，他們必須先知道這種流感出現(xiàn)在哪里。疾控中心得到流感方面的信息往往會(huì)有一兩周的滯后，這種滯后導(dǎo)致公共衛(wèi)生機(jī)構(gòu)在疫情爆發(fā)的關(guān)鍵時(shí)期反而無所適從。谷歌通過觀察人們在網(wǎng)上的搜索記錄來預(yù)測流感的傳播，得到的信息是非常準(zhǔn)確和及時(shí)的。22谷歌與甲型H1N1流感2009年出現(xiàn)的甲型H1N1流感，當(dāng)時(shí)“量化自我”通過一種非干預(yù)的手段，把一些所謂的醫(yī)療傳感器放到我們的身邊，比如我們戴一個(gè)腕表、一枚戒指、一個(gè)耳塞、一副眼鏡等，通過這些設(shè)備我們可以了解自己的心跳、血壓情況，甚至包括我們體表的健康狀況，從而對一些大?。ㄈ绨d癇等）進(jìn)行早期預(yù)測。美國Fitbit公司近期就推出了一款免費(fèi)的蘋果手機(jī)應(yīng)用，用戶可用于記錄食物和液體攝入量，從而跟蹤其活動(dòng)水平和營養(yǎng)攝入情況，通過分析這些數(shù)據(jù)可以很好的控制體重。23“量化自我”通過一種非干預(yù)的手段，把一些所謂的醫(yī)療傳感器放到小兒床墊通過床墊上的壓力與濕度傳感器分析，來判斷小孩子有沒有比較嚴(yán)重的打鼾或者睡姿不正確等問題。24小兒床墊通過床墊上的壓力與濕度傳感器分析，來判斷小孩子有沒有在線教育如著名的在線教育公司Coursera，已經(jīng)和普林斯頓、伯克利、賓夕法尼亞大學(xué)等30多所大學(xué)合作，在互聯(lián)網(wǎng)上免費(fèi)開放大學(xué)課程分布在世界各地的學(xué)習(xí)者不僅可以在同一時(shí)間實(shí)時(shí)聽取同一位老師的授課，還和在校生一樣，做同樣的作業(yè)、接受同樣的評分和考試。在線教育是一個(gè)“行為評價(jià)和誘導(dǎo)”的智能平臺25在線教育如著名的在線教育公司Coursera，已經(jīng)和普林斯頓在線教育服務(wù)Knewton在線教育服務(wù)Knewton是大數(shù)據(jù)應(yīng)用于教育行業(yè)的典型，通過數(shù)據(jù)分析區(qū)分出每個(gè)學(xué)生的優(yōu)缺點(diǎn)，從而給學(xué)生有效的指導(dǎo)。美國最大的公立大學(xué)亞利桑那州公立大學(xué)曾運(yùn)用這一系統(tǒng)來提高學(xué)生的數(shù)學(xué)水平，全校2000名學(xué)生使用該系統(tǒng)兩學(xué)期之后，該大學(xué)的輟學(xué)率下降了56%，畢業(yè)率從64%升高到75%。26在線教育服務(wù)Knewton在線教育服務(wù)Knewton是大數(shù)據(jù)購買飛機(jī)票同一架飛機(jī)上的座位，票價(jià)卻千差萬別，個(gè)中原因，只有航空公司知道。奧倫-埃齊奧尼開發(fā)了一個(gè)系統(tǒng)，用來推測當(dāng)前網(wǎng)頁上的機(jī)票價(jià)格是否合理，預(yù)測當(dāng)前的機(jī)票價(jià)格在未來一段時(shí)間內(nèi)會(huì)上漲還是下降，從而幫助乘客明智購票。這個(gè)預(yù)測系統(tǒng)建立在41天內(nèi)價(jià)格波動(dòng)產(chǎn)生的12000個(gè)價(jià)格樣本基礎(chǔ)之上。27購買飛機(jī)票同一架飛機(jī)上的座位，票價(jià)卻千差萬別，個(gè)中原因，只有航班延誤之候機(jī)經(jīng)濟(jì)學(xué)美國建立了一個(gè)統(tǒng)一的數(shù)據(jù)開放門戶網(wǎng)站——Data.Gov。Data.Gov上線以后，美國交通部開放了全美航班起飛、到達(dá)、延誤的數(shù)據(jù)。航班延誤時(shí)間的分析系統(tǒng)（Flyontime.us）：幫助消費(fèi)者找到表現(xiàn)最佳，最符合自己需要的航班。該系統(tǒng)向全社會(huì)免費(fèi)開放，任何人都可以通過它查詢分析全國各次航班的延誤率及機(jī)場等候時(shí)間。28航班延誤之候機(jī)經(jīng)濟(jì)學(xué)美國建立了一個(gè)統(tǒng)一的數(shù)據(jù)開放門戶網(wǎng)站——The-N與電影票房預(yù)測The-N在好萊塢電影上映之前，就能利用海量數(shù)據(jù)和特定算法預(yù)測出一部電影的票房。該公司擁有一個(gè)包括了過去幾十年美國所有商業(yè)電影大約3000萬條記錄的數(shù)據(jù)庫；數(shù)據(jù)庫里有所有關(guān)于預(yù)算、電影流派、拍攝、陣容、獲得獎(jiǎng)項(xiàng)和收入等數(shù)據(jù)。29The-N與電影票房預(yù)測The-NumbVISA＆MasterCard與商戶推薦像VISA和MasterCard這樣的信用卡發(fā)行商，它們能夠從自己的服務(wù)網(wǎng)獲取更多的交易信息和顧客的消費(fèi)信息它們的商業(yè)模式從單純的處理支付行為轉(zhuǎn)變成了收集數(shù)據(jù)一個(gè)稱為MasterCardAdvisors的部門收集和分析了來自210個(gè)國家的15億信用卡用戶的650億條交易記錄，用來預(yù)測商業(yè)發(fā)展和客戶的消費(fèi)趨勢。然后，它把這些分析結(jié)果賣給其他公司30VISA＆MasterCard與商戶推薦像VISA和MastFICO，“我們知道你明天會(huì)做什么”2011年，F(xiàn)ICO提出了“遵從醫(yī)囑評分”——它分析一系列的變量來確定這個(gè)人是否會(huì)按時(shí)吃藥，包括一些看起來有點(diǎn)怪異的變量。比方說，一個(gè)人在某地居住了多久，這個(gè)人結(jié)婚了沒有，他多久換一個(gè)工作以及他是否有私家車。這個(gè)評分會(huì)幫助醫(yī)療機(jī)構(gòu)節(jié)省開支，因?yàn)樗鼈儠?huì)知道哪些人需要得到它們的用藥提醒。有私家車和使用抗生素并沒有因果關(guān)系，這只是一種相關(guān)關(guān)系。31FICO，“我們知道你明天會(huì)做什么”2011年，F(xiàn)ICO提出中英人壽保險(xiǎn)有限公司（Aviva）中英人壽保險(xiǎn)有限公司（Aviva）是一家大型保險(xiǎn)公司，他們想利用信用報(bào)告和顧客市場分析數(shù)據(jù)來作為部分申請人的血液和尿液分析的關(guān)聯(lián)物。這些分析結(jié)果被用來找出更有可能患高血壓、糖尿病和抑郁癥的人。其中用來分析的數(shù)據(jù)包括好幾百種生活方式的數(shù)據(jù)，比如愛好、常瀏覽的網(wǎng)站、常看的節(jié)目、收入估計(jì)等。通過利用相關(guān)關(guān)系，保險(xiǎn)公司可以在每人身上節(jié)省125美元，然而這個(gè)純數(shù)據(jù)分析法只需要花費(fèi)5美元。32中英人壽保險(xiǎn)有限公司（Aviva）中英人壽保險(xiǎn)有限公司（AvXoom與跨境匯款異常交易報(bào)警Xoom是一個(gè)專門從事跨境匯款業(yè)務(wù)的公司，它會(huì)分析一筆交易的所有相關(guān)數(shù)據(jù)，一旦發(fā)現(xiàn)用“發(fā)現(xiàn)卡”從新澤西州匯款的交易比平常多的話，系統(tǒng)就會(huì)報(bào)警。33Xoom與跨境匯款異常交易報(bào)警Xoom是一個(gè)專門從事跨境匯款無所不包的谷歌翻譯系統(tǒng)2006年，谷歌公司開始涉足機(jī)器翻譯。這被當(dāng)作實(shí)現(xiàn)“收集全世界的數(shù)據(jù)資源，并讓人人都可享受這些資源”這個(gè)目標(biāo)的一個(gè)步驟。谷歌翻譯利用一個(gè)更大更繁雜的數(shù)據(jù)庫，也就是全球的互聯(lián)網(wǎng)。谷歌翻譯系統(tǒng)為了訓(xùn)練計(jì)算機(jī)，會(huì)吸收它能找到的所有翻譯。它增加了很多各種各樣的數(shù)據(jù)，還接受了有錯(cuò)誤的數(shù)據(jù)。谷歌語料庫的內(nèi)容來自于未經(jīng)過濾的網(wǎng)頁內(nèi)容，所以會(huì)包含各種錯(cuò)誤。但谷歌語料庫是其他語料庫的好幾百萬倍大，這樣的優(yōu)勢完全壓倒了缺點(diǎn)34無所不包的谷歌翻譯系統(tǒng)2006年，谷歌公司開始涉足機(jī)器翻譯。谷歌，從大的“噪音”數(shù)據(jù)中受益谷歌知道人們在搜索時(shí)點(diǎn)擊的是第1頁的第8個(gè)鏈接還是第8頁的第1個(gè)鏈接，或者是干脆放棄了所有搜索點(diǎn)擊。谷歌就是依據(jù)用戶的點(diǎn)擊情況通過排名算法自動(dòng)地在隨后的搜索中將信息排位?！皵?shù)據(jù)廢氣”：看似“沒用”的，“錯(cuò)誤”的數(shù)據(jù)。35谷歌，從大的“噪音”數(shù)據(jù)中受益谷歌知道人們在搜索時(shí)點(diǎn)擊的是第IBM，電動(dòng)汽車動(dòng)力與電力供應(yīng)系統(tǒng)優(yōu)化預(yù)測基于大量的信息輸入，如汽車的電池電量、汽車的位置、一天中的時(shí)間以及附近充電站的可用插槽等，IBM開發(fā)了一套復(fù)雜的預(yù)測模型。它將這些數(shù)據(jù)與電網(wǎng)的電流消耗以及歷史功率使用模式相結(jié)合。通過分析來自多個(gè)數(shù)據(jù)源的巨大實(shí)時(shí)數(shù)據(jù)流和歷史數(shù)據(jù)，能夠確定司機(jī)為汽車電池充電的最佳時(shí)間和地點(diǎn)，并揭示充電站的最佳設(shè)置點(diǎn)。36IBM，電動(dòng)汽車動(dòng)力與電力供應(yīng)系統(tǒng)優(yōu)化預(yù)測基于大量的信息輸入謝謝！37謝謝！37空間大數(shù)據(jù)空間大數(shù)據(jù)38目錄一、大數(shù)據(jù)的涵義與研究意義二、與空間信息和位置相關(guān)的大數(shù)據(jù)三、空間大數(shù)據(jù)的應(yīng)用四、空間大數(shù)據(jù)的存儲五、總結(jié)目錄一、大數(shù)據(jù)的涵義與研究意義39一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)：大型復(fù)雜數(shù)據(jù)集的聚合，這些數(shù)據(jù)集的規(guī)模和復(fù)雜程度常超出目前數(shù)據(jù)庫管理軟件和傳統(tǒng)數(shù)據(jù)處理技術(shù)在可接受時(shí)間下的獲取、管理、檢索、分析、挖掘和可視化能力。一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)：大型復(fù)雜數(shù)據(jù)集的聚合，這些40一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)的特點(diǎn)：１）Volume（體量大）：大量TB級以上已有的數(shù)據(jù)等待處理；２）Velocity（速度快）：需要響應(yīng)以s甚至ms計(jì)的流數(shù)據(jù)不斷產(chǎn)生；３）Variety（模態(tài)多樣）：數(shù)據(jù)來源和類型繁多文本、圖片、視頻等結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)并存；４）Veracity（真?zhèn)坞y辨）：由于數(shù)據(jù)的噪音、缺失、不一致性、歧義等引起的數(shù)據(jù)不確定性；５）Value（價(jià)值）：大數(shù)據(jù)使得人們以前所未有的維度量化和理解世界，蘊(yùn)含了巨大的價(jià)值，大數(shù)據(jù)的終極目標(biāo)在于從數(shù)據(jù)中挖掘價(jià)值。大數(shù)據(jù)的核心：預(yù)測一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)的特點(diǎn)：１）Volume（體41一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：科學(xué)進(jìn)步圖靈獎(jiǎng)獲得者吉姆?格雷提出：大數(shù)據(jù)是科學(xué)研究的第四范式，是從計(jì)算密集型科研發(fā)展到以大數(shù)據(jù)為基礎(chǔ)的數(shù)據(jù)密集型科研方法。科學(xué)研究方法的發(fā)展

真正的革命并不發(fā)生在分析數(shù)據(jù)的機(jī)器，而在于數(shù)據(jù)本身和我們?nèi)绾芜\(yùn)用數(shù)據(jù)。一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：科學(xué)進(jìn)步圖靈獎(jiǎng)獲42一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：社會(huì)變革2009至今美國政府全面開放了40萬聯(lián)邦政府原始數(shù)據(jù)集。大數(shù)據(jù)已成為美國國家創(chuàng)新戰(zhàn)略、國家安全戰(zhàn)略、國家IT產(chǎn)業(yè)發(fā)展戰(zhàn)略以及國家信息網(wǎng)絡(luò)戰(zhàn)略的交叉領(lǐng)域、核心領(lǐng)域。21世紀(jì)數(shù)據(jù)的價(jià)值有可能等同于20世紀(jì)的石油，大數(shù)據(jù)研究使得人們降低了對因果關(guān)系的渴求，而關(guān)注相關(guān)關(guān)系。只需要知道是什么，而不需知道為什么。這將使得理解現(xiàn)實(shí)和做決定的基礎(chǔ)也將受到根本性挑戰(zhàn)。社會(huì)價(jià)值一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：社會(huì)變革200943一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：經(jīng)濟(jì)增長一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：經(jīng)濟(jì)增長44二、與空間信息和位置相關(guān)的大數(shù)據(jù)指直接或間接關(guān)聯(lián)著相對于地球的某個(gè)地點(diǎn)的數(shù)據(jù)，包括自然地理數(shù)據(jù)和社會(huì)經(jīng)濟(jì)數(shù)據(jù)?？臻g媒體數(shù)據(jù)地理數(shù)據(jù)軌跡數(shù)據(jù)包含位置的數(shù)字化的文字、圖形、圖像、視頻影像等媒體數(shù)據(jù)，主要來源于移動(dòng)社交網(wǎng)絡(luò)、微博等新型互聯(lián)網(wǎng)應(yīng)用指通過GNSS等測量手段以及網(wǎng)絡(luò)簽到等方法獲得的用戶活動(dòng)數(shù)據(jù)，可以被用來反映用戶的位置和用戶的社會(huì)偏好。位置大數(shù)據(jù)的分類二、與空間信息和位置相關(guān)的大數(shù)據(jù)空間媒體數(shù)據(jù)地理數(shù)據(jù)軌跡45二、與空間信息和位置相關(guān)的大數(shù)據(jù)地理數(shù)據(jù)內(nèi)容：土地覆蓋類型數(shù)據(jù)、地貌數(shù)據(jù)、土壤數(shù)據(jù)、水文數(shù)據(jù)、植被數(shù)據(jù)、居民地?cái)?shù)據(jù)、河流數(shù)據(jù)、行政境界及社會(huì)經(jīng)濟(jì)方面的數(shù)據(jù)等。特點(diǎn)：數(shù)據(jù)體量大、較為規(guī)則化、變化較慢。二、與空間信息和位置相關(guān)的大數(shù)據(jù)地理數(shù)據(jù)46二、與空間信息和位置相關(guān)的大數(shù)據(jù)軌跡數(shù)據(jù)內(nèi)容：個(gè)人軌跡數(shù)據(jù)、群體軌跡數(shù)據(jù)、車輛軌跡數(shù)據(jù)等特點(diǎn)：數(shù)據(jù)體量大、信息碎片化、準(zhǔn)確性較低、半結(jié)構(gòu)化出租車軌跡數(shù)據(jù)示例二、與空間信息和位置相關(guān)的大數(shù)據(jù)軌跡數(shù)據(jù)47二、與空間信息和位置相關(guān)的大數(shù)據(jù)社會(huì)交流、個(gè)性化信息推送、駕駛安全、智能駕駛為個(gè)人生活服務(wù)城市規(guī)劃、疾病控制、智能交通、節(jié)能減排、環(huán)境保護(hù)、應(yīng)急響應(yīng)企業(yè)調(diào)度、門店選址、廣告推送、位置營銷為企業(yè)經(jīng)濟(jì)服務(wù)為城市運(yùn)行服務(wù)位置大數(shù)據(jù)的作用二、與空間信息和位置相關(guān)的大數(shù)據(jù)為城市運(yùn)行服務(wù)48三、空間大數(shù)據(jù)的應(yīng)用1.空間大數(shù)據(jù)與智能交通Inrix是美國的一家交通數(shù)據(jù)處理公司，也是全球領(lǐng)先的道路交通信息和駕駛員服務(wù)供應(yīng)商。他們設(shè)計(jì)的APP是一款致力于為全球交通問題帶來智能數(shù)據(jù)和先進(jìn)的分析方法的交通智能化平臺。三、空間大數(shù)據(jù)的應(yīng)用1.空間大數(shù)據(jù)與智能交通Inri49三、空間大數(shù)據(jù)的應(yīng)用利用大數(shù)據(jù)預(yù)判未來交通信息和路況是核心2012年英國倫敦奧運(yùn)會(huì)利用INRIX軟件和在線服務(wù)確保交通順暢;在美國有超過25個(gè)州的交通部門使用INRIX數(shù)據(jù)輔助交通管理。三、空間大數(shù)據(jù)的應(yīng)用利用大數(shù)據(jù)預(yù)判未來交通信息和路況是核心50三、空間大數(shù)據(jù)的應(yīng)用

2015年2月11日，國內(nèi)智能交通行業(yè)領(lǐng)軍企業(yè)北京千方科技股份有限公司與INRIX簽署戰(zhàn)略合作協(xié)議。千方科技在國內(nèi)智能交通行業(yè)具有深厚的理解和市場、技術(shù)積累，INRIX在歐美地區(qū)具有成熟的交通信息化解決方案和先進(jìn)理念。雙方將結(jié)合各自的優(yōu)勢，整合交通信息化及數(shù)據(jù)分析解決方案和產(chǎn)品，共同拓展智能交通行業(yè)市場，雙方將在交通大數(shù)據(jù)分析、增值挖掘、交通仿真等技術(shù)方向深度交流，提升雙方專業(yè)化及技術(shù)能力。

不過，由于涉及國內(nèi)職能部門的數(shù)據(jù)保護(hù)問題，國內(nèi)手機(jī)用戶還未能夠體驗(yàn)這款A(yù)pp。三、空間大數(shù)據(jù)的應(yīng)用2015年2月11日，國內(nèi)智能交通51三、空間大數(shù)據(jù)的應(yīng)用2.空間大數(shù)據(jù)與社會(huì)生活2014年春節(jié)期間，百度地圖定位可視化大數(shù)據(jù)播報(bào)的國內(nèi)春節(jié)人口遷徙情況。2015年最近一周南京夫子廟景區(qū)熱力圖三、空間大數(shù)據(jù)的應(yīng)用2.空間大數(shù)據(jù)與社會(huì)生活2014年春52三、空間大數(shù)據(jù)的應(yīng)用3.空間大數(shù)據(jù)與應(yīng)急管理2013年4月15日，波士頓馬拉松爆炸案事發(fā)幾小時(shí)內(nèi)，數(shù)以千計(jì)的在場群眾將事發(fā)現(xiàn)場拍攝的照片和視頻放到了公共網(wǎng)絡(luò)平臺上，這些照片和視頻圖像來自各種相機(jī)，手機(jī)和平板電腦。不到一天時(shí)間，嫌犯被確認(rèn)并在紐約被抓獲這是一種典型的利用空間社會(huì)媒體的位置大數(shù)據(jù)與反犯罪機(jī)構(gòu)的專業(yè)能力結(jié)合，建立的城市安全與應(yīng)急新體制三、空間大數(shù)據(jù)的應(yīng)用3.空間大數(shù)據(jù)與應(yīng)急管理53

位置大數(shù)據(jù)研究涉及到數(shù)據(jù)采集、數(shù)據(jù)處理、計(jì)算和存儲以及可視化等一套完整的方法體系

四、空間大數(shù)據(jù)的存儲

位置大數(shù)據(jù)研究涉及到數(shù)據(jù)采集、數(shù)據(jù)處理、計(jì)算和存儲以及可54四、空間大數(shù)據(jù)的存儲海量數(shù)據(jù)的高效存儲支持豐富的數(shù)據(jù)類型處理速度快數(shù)據(jù)庫應(yīng)當(dāng)易于擴(kuò)展大數(shù)據(jù)下對于數(shù)據(jù)庫的需求四、空間大數(shù)據(jù)的存儲海量數(shù)據(jù)的高效存儲支持豐富的數(shù)據(jù)類型處理55四、空間大數(shù)據(jù)的存儲CAPNOSQLBASE不保證遵循ACID原則分布式的非關(guān)系型的四、空間大數(shù)據(jù)的存儲CAPNOSQLBASE不保證遵循分布式56四、位置大數(shù)據(jù)的存儲必須保證兩者權(quán)衡一致性可用性分區(qū)容錯(cuò)性BASE四、位置大數(shù)據(jù)的存儲必須保證兩者權(quán)衡一致性可用性分區(qū)容57四、空間大數(shù)據(jù)的存儲靈活高可用性高性能易擴(kuò)展NoSQL數(shù)據(jù)庫的特點(diǎn)四、空間大數(shù)據(jù)的存儲靈活高可用性高性能易擴(kuò)展NoSQL數(shù)據(jù)庫58四、空間大數(shù)據(jù)的存儲Key-value型文檔型圖形數(shù)據(jù)庫列式存儲四、空間大數(shù)據(jù)的存儲Key-value型文檔型圖形數(shù)據(jù)庫列式59四、空間大數(shù)據(jù)的存儲定義一個(gè)大的有序結(jié)構(gòu)數(shù)組HashValue[m]，用來存放各信息查詢哈希表哈希函數(shù)當(dāng)查詢的時(shí)候再使用哈希函數(shù)得到這個(gè)下標(biāo)值編寫一個(gè)哈希函數(shù)將關(guān)鍵值的名字轉(zhuǎn)換為HashValue[m]中的某個(gè)下標(biāo)值xKey-value型四、空間大數(shù)據(jù)的存儲定義一個(gè)大的有序結(jié)查詢哈希表哈希函數(shù)60四、空間大數(shù)據(jù)的存儲文檔集合數(shù)據(jù)庫集合就是一組文檔。集合是無模式的。多個(gè)文檔組成集合多個(gè)集合數(shù)據(jù)庫。它包含多個(gè)鍵/值對文檔中的鍵/值對是有序的文檔型數(shù)據(jù)庫四、空間大數(shù)據(jù)的存儲文檔集合數(shù)據(jù)庫集合就是一組文檔。多個(gè)文檔61四、空間大數(shù)據(jù)的存儲四、空間大數(shù)據(jù)的存儲62四、空間大數(shù)據(jù)的存儲四、空間大數(shù)據(jù)的存儲63四、空間大數(shù)據(jù)的存儲分類Examples舉例典型應(yīng)用場景數(shù)據(jù)模型優(yōu)點(diǎn)缺點(diǎn)鍵值（key-value）TokyoCabinet/Tyrant,Redis,Voldemort,OracleBDB內(nèi)容緩存，主要用于處理大量數(shù)據(jù)的高訪問負(fù)載，也用于一些日志系統(tǒng)等等。Key指向Value的鍵值對，通常用hashtable來實(shí)現(xiàn)查找速度快數(shù)據(jù)無結(jié)構(gòu)化，通常只被當(dāng)作字符串或者二進(jìn)制數(shù)據(jù)列存儲數(shù)據(jù)庫Cassandra,HBase,Riak分布式的文件系統(tǒng)以列簇式存儲，將同一列數(shù)據(jù)存在一起查找速度快，可擴(kuò)展性強(qiáng)，更容易進(jìn)行分布式擴(kuò)展功能相對局限文檔型數(shù)據(jù)庫CouchDB,MongoDbWeb應(yīng)用（與Key-Value類似，Value是結(jié)構(gòu)化的，不同的是數(shù)據(jù)庫能夠了解Value的內(nèi)容）Key-Value對應(yīng)的鍵值對，Value為結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)結(jié)構(gòu)要求不嚴(yán)格，表結(jié)構(gòu)可變，不需要像關(guān)系型數(shù)據(jù)庫一樣需要預(yù)先定義表結(jié)構(gòu)查詢性能不高，而且缺乏統(tǒng)一的查詢語法。圖形(Graph)數(shù)據(jù)庫Neo4J,InfoGrid,InfiniteGraph社交網(wǎng)絡(luò)，推薦系統(tǒng)等。專注于構(gòu)建關(guān)系圖譜圖結(jié)構(gòu)利用圖結(jié)構(gòu)相關(guān)算法。比如最短路徑尋址，N度關(guān)系查找等很多時(shí)候需要對整個(gè)圖做計(jì)算才能得出需要的信息，而且這種結(jié)構(gòu)不太好做分布式的集群方案。四、空間大數(shù)據(jù)的存儲分類Examples舉例典型應(yīng)用場景數(shù)據(jù)64四、空間大數(shù)據(jù)的存儲四、空間大數(shù)據(jù)的存儲65四、空間大數(shù)據(jù)的存儲這便是一個(gè)document，使用JSON格式，一目了然。其中的"geom"即為Geometry類型的數(shù)據(jù)，即地理空間數(shù)據(jù)，也是采用JSON格式存儲，這樣后續(xù)的空間索引與空間查詢將十分方便。四、空間大數(shù)據(jù)的存儲這便是一個(gè)document，使用JSON66四、空間大數(shù)據(jù)的存儲>db.xqpoint.find({"geom.coordinates":[122.53233,52.968872]})精確查詢鄰域查詢>db.xqpoint.find({"geom.coordinates":{$near:[122,52]}})

>db.xqpoint.find({"geom.coordinates":{$near:[122,52]}}).limit(5)>db.xqpoint.find({"geom.coordinates":{$near:[122,52],$maxDistance:5}}).limit(5)四、空間大數(shù)據(jù)的存儲>db.xqpoint.find({"g67四、空間大數(shù)據(jù)的存儲范圍查詢>box=[[80,40],[100,50]]

>db.xqpoint.find({"geom.coordinates":{$within:{$box:box}}})>center=[80,44]

>radius=5

>db.xqpoint.find({"geom.coordinates":{$within:{$center:[center,radius]}}})>polygon1=[[75,35],[80,35],[80,45],[60,40]]

>db.xqpoint.find({"geom.coordinates":{$within:{$polygon:polygon1}}})

四、空間大數(shù)據(jù)的存儲范圍查詢>box=[[80,40]68五、總結(jié)大數(shù)據(jù)研究帶來的挑戰(zhàn)多源數(shù)據(jù)的分析和挖掘空間大數(shù)據(jù)的位置安全結(jié)合地理計(jì)算的可視分析可擴(kuò)展的動(dòng)態(tài)海量數(shù)據(jù)管理新的數(shù)據(jù)共享機(jī)制需要建立五、總結(jié)大數(shù)據(jù)研究帶來的挑戰(zhàn)多源數(shù)據(jù)的空間大數(shù)據(jù)結(jié)合地理計(jì)算69大數(shù)據(jù)介紹70大數(shù)據(jù)介紹1目錄大數(shù)據(jù)的概念大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的區(qū)別？大數(shù)據(jù)的典型特征（3V）廣義的大數(shù)據(jù)大數(shù)據(jù)應(yīng)用案例71目錄大數(shù)據(jù)的概念2大數(shù)據(jù)的概念大數(shù)據(jù)(BigData)是指無法用現(xiàn)有的軟件工具提取、存儲、搜索、共享、分析和處理的海量的、復(fù)雜的數(shù)據(jù)集合簡單一點(diǎn)的說，就是用現(xiàn)有一般技術(shù)難以管理的數(shù)據(jù)。72大數(shù)據(jù)的概念大數(shù)據(jù)(BigData)是指無法用現(xiàn)有的軟件工大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的區(qū)別？小明去了一百次書店

傳統(tǒng)數(shù)據(jù)：要回答的問題是他第一百零一次買不買書，即業(yè)績和經(jīng)營指標(biāo)的問題；大數(shù)據(jù)：要回答的是他第一百零一次買什么書，需要將什么樣的內(nèi)容推薦給他。群體和個(gè)體的區(qū)別傳統(tǒng)定義上，更多關(guān)注的是一類人群，用同一類規(guī)則制訂套餐給他們；互聯(lián)網(wǎng)時(shí)代，要把每個(gè)人都精準(zhǔn)刻畫出來，進(jìn)行精準(zhǔn)匹配。73大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的區(qū)別？小明去了一百次書店4大數(shù)據(jù)的典型特征（3V）Volume（容量）現(xiàn)在基本上是指從幾十TB到幾PB這樣的數(shù)量級，未來，可能只有幾EB數(shù)量級的數(shù)據(jù)量才能稱得上是大數(shù)據(jù)了。(1T=1024G,1P=1024T)Variety（多樣性）結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)Velocity（速度）數(shù)據(jù)產(chǎn)生和更新的頻率74大數(shù)據(jù)的典型特征（3V）Volume（容量）5廣義的大數(shù)據(jù)所謂大數(shù)據(jù)，是一個(gè)綜合性概念，它包括：（1）因具備3V特征而難以進(jìn)行管理的數(shù)據(jù)（2）對這些數(shù)據(jù)進(jìn)行存儲、處理、分析的技術(shù)（3）以及能夠通過分析這些數(shù)據(jù)獲得實(shí)用意義和觀點(diǎn)的人才和組織75廣義的大數(shù)據(jù)所謂大數(shù)據(jù)，是一個(gè)綜合性概念，它包括：6大數(shù)據(jù)的應(yīng)用案例76大數(shù)據(jù)的應(yīng)用案例7穿孔卡片與美國人口普查美國在1880年進(jìn)行的人口普查，耗時(shí)8年才完成數(shù)據(jù)匯總。因此，他們獲得的很多數(shù)據(jù)都是過時(shí)的。1890年進(jìn)行的人口普查，預(yù)計(jì)要花費(fèi)13年的時(shí)間來匯總數(shù)據(jù)。后來，美國人口普查局通過用赫爾曼-霍爾瑞斯發(fā)明的穿孔卡片制表機(jī)來進(jìn)行1890年的人口普查，耗時(shí)一年。77穿孔卡片與美國人口普查美國在1880年進(jìn)行的人口普查，耗時(shí)8麻省理工與通貨緊縮預(yù)測軟件美國勞工統(tǒng)計(jì)局的人員每個(gè)月都要公布消費(fèi)物價(jià)指數(shù)（CPI），這是用來測試通貨膨脹率的。政府通過人工采集價(jià)格信息數(shù)據(jù)每年大概需要花費(fèi)兩億五千萬美元。這些數(shù)據(jù)是精確的也是有序的，但是數(shù)據(jù)往往會(huì)有幾周的滯后。麻省理工學(xué)院（MIT）的兩位經(jīng)濟(jì)學(xué)家，通過一個(gè)軟件在互聯(lián)網(wǎng)上每天可以收集到50萬種商品的價(jià)格，他們能比官方數(shù)據(jù)提前發(fā)現(xiàn)通貨緊縮趨勢。78麻省理工與通貨緊縮預(yù)測軟件美國勞工統(tǒng)計(jì)局的人員每個(gè)月都要公布沃爾瑪，請把蛋撻與颶風(fēng)用品擺在一起通過對歷史交易記錄這個(gè)龐大數(shù)據(jù)庫進(jìn)行觀察，沃爾瑪注意到，每當(dāng)季節(jié)性颶風(fēng)來臨之前，不僅手電筒銷量增加，而且美式早餐含糖零食蛋撻銷量也增加了。因此每當(dāng)季節(jié)性颶風(fēng)來臨時(shí)，沃爾瑪就會(huì)把蛋撻與颶風(fēng)用品擺放在一起，從而增加銷量。79沃爾瑪，請把蛋撻與颶風(fēng)用品擺在一起通過對歷史交易記錄這個(gè)龐大沃爾瑪：東海岸——中海岸——西海岸在美國，東海岸、中海岸、西海岸之間有兩小時(shí)時(shí)差。東海岸的沃爾瑪營業(yè)兩小時(shí)后之后，中海岸才開始營業(yè)，沃爾瑪就會(huì)把東海岸當(dāng)天這兩小時(shí)的營業(yè)情況、相關(guān)數(shù)據(jù)傳給中海岸。中海岸就會(huì)根據(jù)這個(gè)數(shù)據(jù)知道了這天人們的購物喜好，決定貨品怎么擺放，哪些貨物擺放在一起會(huì)比較好。這種方式給沃爾瑪帶來了很大的利潤。80沃爾瑪：東海岸——中海岸——西海岸在美國，東海岸、中海岸、西美國折扣零售商塔吉特與懷孕預(yù)測塔吉特公司能在不被清楚告知的情況下預(yù)測出一個(gè)女性的懷孕情況該公司找出了大概20多種與懷孕的關(guān)聯(lián)物，給顧客進(jìn)行“懷孕趨勢”評分這些數(shù)據(jù)甚至使得零售商能夠比較準(zhǔn)確地預(yù)測預(yù)產(chǎn)期，這樣就能夠在孕期的每個(gè)階段給客戶寄送相應(yīng)的優(yōu)惠券81美國折扣零售商塔吉特與懷孕預(yù)測塔吉特公司能在不被清楚告知的情Hitwise，通過流量判斷消費(fèi)者喜好數(shù)據(jù)創(chuàng)新再利用的一個(gè)典型例子是搜索關(guān)鍵詞。消費(fèi)者和搜索引擎之間的瞬時(shí)交互形成了一個(gè)網(wǎng)站和廣告的列表，實(shí)現(xiàn)了那一刻的特定功能。這些信息除了實(shí)現(xiàn)基本用途之外，它還可以變得非常有價(jià)值。如數(shù)據(jù)代理益百利旗下的網(wǎng)頁流量測量公司Hitwise，讓客戶采集搜索流量來揭示消費(fèi)者的喜好。82Hitwise，通過流量判斷消費(fèi)者喜好數(shù)據(jù)創(chuàng)新再利用的一個(gè)典物聯(lián)網(wǎng)物聯(lián)網(wǎng)（InternetofThings，縮寫IOT）是一個(gè)基于互聯(lián)網(wǎng)、傳統(tǒng)電信網(wǎng)等信息承載體，讓所有能夠被獨(dú)立尋址的普通物理對象實(shí)現(xiàn)互聯(lián)互通的網(wǎng)絡(luò)。在物聯(lián)網(wǎng)上，每個(gè)人都可以應(yīng)用電子標(biāo)簽將真實(shí)的物體上網(wǎng)聯(lián)結(jié)，在物聯(lián)網(wǎng)上都可以查找出它們的具體位置。通過物聯(lián)網(wǎng)可以用中心計(jì)算機(jī)對機(jī)器、設(shè)備、人員進(jìn)行集中管理、控制，也可以對家庭設(shè)備、汽車進(jìn)行遙控，以及搜尋位置、防止物品被盜等各種應(yīng)用。83物聯(lián)網(wǎng)物聯(lián)網(wǎng)（InternetofThings，縮寫IORFID技術(shù)RFID是RadioFrequencyIdentification的縮寫，即射頻識別，俗稱電子標(biāo)簽。RFID是一種簡單的無線系統(tǒng)，由一個(gè)詢問器(或閱讀器)和很多應(yīng)答器(或標(biāo)簽)組成。該系統(tǒng)用于控制、檢測和跟蹤物體。RFID技術(shù)在超市和圖書館中的應(yīng)用84RFID技術(shù)RFID是RadioFrequencyIde車聯(lián)網(wǎng)未來車聯(lián)網(wǎng)技術(shù)將重新定義汽車DNA。借助無線通訊，城市內(nèi)車與車之間，車與建筑之間，車與人之間都將建立更加智能緊密的互聯(lián)。通過裝載在車輛上的電子標(biāo)簽利用無線射頻等識別技術(shù)，實(shí)現(xiàn)在信息網(wǎng)絡(luò)平臺上對所有車輛的屬性信息和靜、動(dòng)態(tài)信息進(jìn)行提取和有效利用，并根據(jù)不同的功能需求對所有車輛的運(yùn)行狀態(tài)進(jìn)行有效的監(jiān)管和提供綜合服務(wù)。85車聯(lián)網(wǎng)未來車聯(lián)網(wǎng)技術(shù)將重新定義汽車DNA。借助無線通訊，城市無人駕駛無人駕駛被人認(rèn)為是車聯(lián)網(wǎng)的終極目標(biāo)無人駕駛車依賴的技術(shù)很多，比如導(dǎo)航、雷達(dá)、龐大數(shù)據(jù)計(jì)算等，要實(shí)現(xiàn)這些技術(shù)需要和物聯(lián)網(wǎng)緊密結(jié)合起來。無人駕駛是通過車載傳感系統(tǒng)感知道路環(huán)境，自動(dòng)規(guī)劃行車路線并控制車輛到達(dá)預(yù)定目標(biāo)的智能汽車。86無人駕駛無人駕駛被人認(rèn)為是車聯(lián)網(wǎng)的終極目標(biāo)17自動(dòng)泊車系統(tǒng)自動(dòng)泊車系統(tǒng)，顧名思義駕駛者雙手可以離開方向盤，在車輛停好之前要做的只是等待。自動(dòng)泊車系統(tǒng)主要由兩部分組成：控制單元和位于前后保險(xiǎn)杠以及兩側(cè)的超聲波雷達(dá)探頭。按動(dòng)自動(dòng)泊車輔助系統(tǒng)激活按鈕之后，雷達(dá)探頭可在車輛行駛時(shí)對車輛兩側(cè)進(jìn)行掃描?？刂茊卧獙走_(dá)反饋的信息進(jìn)行分析，從而估算出車位是否足以容納車輛停放。自動(dòng)泊車系統(tǒng)隨后將通過助力轉(zhuǎn)向系統(tǒng)對車輛行駛方向進(jìn)行干預(yù)，并以控制單元規(guī)劃好的路徑將車輛停入車位。87自動(dòng)泊車系統(tǒng)自動(dòng)泊車系統(tǒng)，顧名思義駕駛者雙手可以離開方向盤，日本先進(jìn)工業(yè)技術(shù)研究院的坐姿研究與汽車防盜系統(tǒng)該研究所教授把每個(gè)駕車者的坐姿量化為精確的數(shù)據(jù)，使其對司機(jī)識別的正確率高達(dá)98%。這項(xiàng)技術(shù)作為汽車防盜系統(tǒng)，一旦識別駕車者不是車主，就會(huì)自動(dòng)熄火。這一技術(shù)還可匯集事故發(fā)生前駕車者的姿勢變化數(shù)據(jù)，分析坐姿與行駛安全的關(guān)系，在司機(jī)疲勞駕駛時(shí)發(fā)出警示或自動(dòng)剎車。88日本先進(jìn)工業(yè)技術(shù)研究院的坐姿研究與汽車防盜系統(tǒng)該研究所教授把UPS快遞——大數(shù)據(jù)技術(shù)下的最佳行車路徑

UPS快遞多效地利用了地理定位數(shù)據(jù)。為了使總部能在車輛出現(xiàn)晚點(diǎn)的時(shí)候跟蹤到車輛的位置和預(yù)防引擎故障，它的貨車上裝有傳感器、無線適配器和GPS。同時(shí)，這些設(shè)備也方便了公司監(jiān)督管理員工并優(yōu)化行車線路。UPS為貨車定制的最佳行車路徑是根據(jù)過去的行車經(jīng)驗(yàn)總結(jié)而來的。2011年，UPS的駕駛員少跑了近4828萬公里的路程，節(jié)省了300萬加侖的燃料并且減少了3萬公噸的二氧化碳排放量。89UPS快遞——大數(shù)據(jù)技術(shù)下的最佳行車路徑

UPS快遞多效地利UPS與汽車修理預(yù)測UPS國際快遞公司從2000年就開始使用預(yù)測性分析來監(jiān)測自己全美60000輛車規(guī)模的車隊(duì)，這樣就能及時(shí)地進(jìn)行防御性的修理。通過監(jiān)測車輛的各個(gè)部位，UPS只需要更換需要更換的零件，從而節(jié)省了好幾百萬美元。90UPS與汽車修理預(yù)測UPS國際快遞公司從2000年就開始使用谷歌與甲型H1N1流感2009年出現(xiàn)的甲型H1N1流感，當(dāng)時(shí)還沒有研發(fā)出對抗這種新型流感病毒的疫苗，公共衛(wèi)生專家能做的只是減慢它傳播的速度。但要做到這一點(diǎn)，他們必須先知道這種流感出現(xiàn)在哪里。疾控中心得到流感方面的信息往往會(huì)有一兩周的滯后，這種滯后導(dǎo)致公共衛(wèi)生機(jī)構(gòu)在疫情爆發(fā)的關(guān)鍵時(shí)期反而無所適從。谷歌通過觀察人們在網(wǎng)上的搜索記錄來預(yù)測流感的傳播，得到的信息是非常準(zhǔn)確和及時(shí)的。91谷歌與甲型H1N1流感2009年出現(xiàn)的甲型H1N1流感，當(dāng)時(shí)“量化自我”通過一種非干預(yù)的手段，把一些所謂的醫(yī)療傳感器放到我們的身邊，比如我們戴一個(gè)腕表、一枚戒指、一個(gè)耳塞、一副眼鏡等，通過這些設(shè)備我們可以了解自己的心跳、血壓情況，甚至包括我們體表的健康狀況，從而對一些大?。ㄈ绨d癇等）進(jìn)行早期預(yù)測。美國Fitbit公司近期就推出了一款免費(fèi)的蘋果手機(jī)應(yīng)用，用戶可用于記錄食物和液體攝入量，從而跟蹤其活動(dòng)水平和營養(yǎng)攝入情況，通過分析這些數(shù)據(jù)可以很好的控制體重。92“量化自我”通過一種非干預(yù)的手段，把一些所謂的醫(yī)療傳感器放到小兒床墊通過床墊上的壓力與濕度傳感器分析，來判斷小孩子有沒有比較嚴(yán)重的打鼾或者睡姿不正確等問題。93小兒床墊通過床墊上的壓力與濕度傳感器分析，來判斷小孩子有沒有在線教育如著名的在線教育公司Coursera，已經(jīng)和普林斯頓、伯克利、賓夕法尼亞大學(xué)等30多所大學(xué)合作，在互聯(lián)網(wǎng)上免費(fèi)開放大學(xué)課程分布在世界各地的學(xué)習(xí)者不僅可以在同一時(shí)間實(shí)時(shí)聽取同一位老師的授課，還和在校生一樣，做同樣的作業(yè)、接受同樣的評分和考試。在線教育是一個(gè)“行為評價(jià)和誘導(dǎo)”的智能平臺94在線教育如著名的在線教育公司Coursera，已經(jīng)和普林斯頓在線教育服務(wù)Knewton在線教育服務(wù)Knewton是大數(shù)據(jù)應(yīng)用于教育行業(yè)的典型，通過數(shù)據(jù)分析區(qū)分出每個(gè)學(xué)生的優(yōu)缺點(diǎn)，從而給學(xué)生有效的指導(dǎo)。美國最大的公立大學(xué)亞利桑那州公立大學(xué)曾運(yùn)用這一系統(tǒng)來提高學(xué)生的數(shù)學(xué)水平，全校2000名學(xué)生使用該系統(tǒng)兩學(xué)期之后，該大學(xué)的輟學(xué)率下降了56%，畢業(yè)率從64%升高到75%。95在線教育服務(wù)Knewton在線教育服務(wù)Knewton是大數(shù)據(jù)購買飛機(jī)票同一架飛機(jī)上的座位，票價(jià)卻千差萬別，個(gè)中原因，只有航空公司知道。奧倫-埃齊奧尼開發(fā)了一個(gè)系統(tǒng)，用來推測當(dāng)前網(wǎng)頁上的機(jī)票價(jià)格是否合理，預(yù)測當(dāng)前的機(jī)票價(jià)格在未來一段時(shí)間內(nèi)會(huì)上漲還是下降，從而幫助乘客明智購票。這個(gè)預(yù)測系統(tǒng)建立在41天內(nèi)價(jià)格波動(dòng)產(chǎn)生的12000個(gè)價(jià)格樣本基礎(chǔ)之上。96購買飛機(jī)票同一架飛機(jī)上的座位，票價(jià)卻千差萬別，個(gè)中原因，只有航班延誤之候機(jī)經(jīng)濟(jì)學(xué)美國建立了一個(gè)統(tǒng)一的數(shù)據(jù)開放門戶網(wǎng)站——Data.Gov。Data.Gov上線以后，美國交通部開放了全美航班起飛、到達(dá)、延誤的數(shù)據(jù)。航班延誤時(shí)間的分析系統(tǒng)（Flyontime.us）：幫助消費(fèi)者找到表現(xiàn)最佳，最符合自己需要的航班。該系統(tǒng)向全社會(huì)免費(fèi)開放，任何人都可以通過它查詢分析全國各次航班的延誤率及機(jī)場等候時(shí)間。97航班延誤之候機(jī)經(jīng)濟(jì)學(xué)美國建立了一個(gè)統(tǒng)一的數(shù)據(jù)開放門戶網(wǎng)站——The-N與電影票房預(yù)測The-N在好萊塢電影上映之前，就能利用海量數(shù)據(jù)和特定算法預(yù)測出一部電影的票房。該公司擁有一個(gè)包括了過去幾十年美國所有商業(yè)電影大約3000萬條記錄的數(shù)據(jù)庫；數(shù)據(jù)庫里有所有關(guān)于預(yù)算、電影流派、拍攝、陣容、獲得獎(jiǎng)項(xiàng)和收入等數(shù)據(jù)。98The-N與電影票房預(yù)測The-NumbVISA＆MasterCard與商戶推薦像VISA和MasterCard這樣的信用卡發(fā)行商，它們能夠從自己的服務(wù)網(wǎng)獲取更多的交易信息和顧客的消費(fèi)信息它們的商業(yè)模式從單純的處理支付行為轉(zhuǎn)變成了收集數(shù)據(jù)一個(gè)稱為MasterCardAdvisors的部門收集和分析了來自210個(gè)國家的15億信用卡用戶的650億條交易記錄，用來預(yù)測商業(yè)發(fā)展和客戶的消費(fèi)趨勢。然后，它把這些分析結(jié)果賣給其他公司99VISA＆MasterCard與商戶推薦像VISA和MastFICO，“我們知道你明天會(huì)做什么”2011年，F(xiàn)ICO提出了“遵從醫(yī)囑評分”——它分析一系列的變量來確定這個(gè)人是否會(huì)按時(shí)吃藥，包括一些看起來有點(diǎn)怪異的變量。比方說，一個(gè)人在某地居住了多久，這個(gè)人結(jié)婚了沒有，他多久換一個(gè)工作以及他是否有私家車。這個(gè)評分會(huì)幫助醫(yī)療機(jī)構(gòu)節(jié)省開支，因?yàn)樗鼈儠?huì)知道哪些人需要得到它們的用藥提醒。有私家車和使用抗生素并沒有因果關(guān)系，這只是一種相關(guān)關(guān)系。100FICO，“我們知道你明天會(huì)做什么”2011年，F(xiàn)ICO提出中英人壽保險(xiǎn)有限公司（Aviva）中英人壽保險(xiǎn)有限公司（Aviva）是一家大型保險(xiǎn)公司，他們想利用信用報(bào)告和顧客市場分析數(shù)據(jù)來作為部分申請人的血液和尿液分析的關(guān)聯(lián)物。這些分析結(jié)果被用來找出更有可能患高血壓、糖尿病和抑郁癥的人。其中用來分析的數(shù)據(jù)包括好幾百種生活方式的數(shù)據(jù)，比如愛好、常瀏覽的網(wǎng)站、?？吹墓?jié)目、收入估計(jì)等。通過利用相關(guān)關(guān)系，保險(xiǎn)公司可以在每人身上節(jié)省125美元，然而這個(gè)純數(shù)據(jù)分析法只需要花費(fèi)5美元。101中英人壽保險(xiǎn)有限公司（Aviva）中英人壽保險(xiǎn)有限公司（AvXoom與跨境匯款異常交易報(bào)警Xoom是一個(gè)專門從事跨境匯款業(yè)務(wù)的公司，它會(huì)分析一筆交易的所有相關(guān)數(shù)據(jù)，一旦發(fā)現(xiàn)用“發(fā)現(xiàn)卡”從新澤西州匯款的交易比平常多的話，系統(tǒng)就會(huì)報(bào)警。102Xoom與跨境匯款異常交易報(bào)警Xoom是一個(gè)專門從事跨境匯款無所不包的谷歌翻譯系統(tǒng)2006年，谷歌公司開始涉足機(jī)器翻譯。這被當(dāng)作實(shí)現(xiàn)“收集全世界的數(shù)據(jù)資源，并讓人人都可享受這些資源”這個(gè)目標(biāo)的一個(gè)步驟。谷歌翻譯利用一個(gè)更大更繁雜的數(shù)據(jù)庫，也就是全球的互聯(lián)網(wǎng)。谷歌翻譯系統(tǒng)為了訓(xùn)練計(jì)算機(jī)，會(huì)吸收它能找到的所有翻譯。它增加了很多各種各樣的數(shù)據(jù)，還接受了有錯(cuò)誤的數(shù)據(jù)。谷歌語料庫的內(nèi)容來自于未經(jīng)過濾的網(wǎng)頁內(nèi)容，所以會(huì)包含各種錯(cuò)誤。但谷歌語料庫是其他語料庫的好幾百萬倍大，這樣的優(yōu)勢完全壓倒了缺點(diǎn)103無所不包的谷歌翻譯系統(tǒng)2006年，谷歌公司開始涉足機(jī)器翻譯。谷歌，從大的“噪音”數(shù)據(jù)中受益谷歌知道人們在搜索時(shí)點(diǎn)擊的是第1頁的第8個(gè)鏈接還是第8頁的第1個(gè)鏈接，或者是干脆放棄了所有搜索點(diǎn)擊。谷歌就是依據(jù)用戶的點(diǎn)擊情況通過排名算法自動(dòng)地在隨后的搜索中將信息排位。“數(shù)據(jù)廢氣”：看似“沒用”的，“錯(cuò)誤”的數(shù)據(jù)。104谷歌，從大的“噪音”數(shù)據(jù)中受益谷歌知道人們在搜索時(shí)點(diǎn)擊的是第IBM，電動(dòng)汽車動(dòng)力與電力供應(yīng)系統(tǒng)優(yōu)化預(yù)測基于大量的信息輸入，如汽車的電池電量、汽車的位置、一天中的時(shí)間以及附近充電站的可用插槽等，IBM開發(fā)了一套復(fù)雜的預(yù)測模型。它將這些數(shù)據(jù)與電網(wǎng)的電流消耗以及歷史功率使用模式相結(jié)合。通過分析來自多個(gè)數(shù)據(jù)源的巨大實(shí)時(shí)數(shù)據(jù)流和歷史數(shù)據(jù)，能夠確定司機(jī)為汽車電池充電的最佳時(shí)間和地點(diǎn)，并揭示充電站的最佳設(shè)置點(diǎn)。105IBM，電動(dòng)汽車動(dòng)力與電力供應(yīng)系統(tǒng)優(yōu)化預(yù)測基于大量的信息輸入謝謝！106謝謝！37空間大數(shù)據(jù)空間大數(shù)據(jù)107目錄一、大數(shù)據(jù)的涵義與研究意義二、與空間信息和位置相關(guān)的大數(shù)據(jù)三、空間大數(shù)據(jù)的應(yīng)用四、空間大數(shù)據(jù)的存儲五、總結(jié)目錄一、大數(shù)據(jù)的涵義與研究意義108一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)：大型復(fù)雜數(shù)據(jù)集的聚合，這些數(shù)據(jù)集的規(guī)模和復(fù)雜程度常超出目前數(shù)據(jù)庫管理軟件和傳統(tǒng)數(shù)據(jù)處理技術(shù)在可接受時(shí)間下的獲取、管理、檢索、分析、挖掘和可視化能力。一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)：大型復(fù)雜數(shù)據(jù)集的聚合，這些109一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)的特點(diǎn)：１）Volume（體量大）：大量TB級以上已有的數(shù)據(jù)等待處理；２）Velocity（速度快）：需要響應(yīng)以s甚至ms計(jì)的流數(shù)據(jù)不斷產(chǎn)生；３）Variety（模態(tài)多樣）：數(shù)據(jù)來源和類型繁多文本、圖片、視頻等結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)并存；４）Veracity（真?zhèn)坞y辨）：由于數(shù)據(jù)的噪音、缺失、不一致性、歧義等引起的數(shù)據(jù)不確定性；５）Value（價(jià)值）：大數(shù)據(jù)使得人們以前所未有的維度量化和理解世界，蘊(yùn)含了巨大的價(jià)值，大數(shù)據(jù)的終極目標(biāo)在于從數(shù)據(jù)中挖掘價(jià)值。大數(shù)據(jù)的核心：預(yù)測一、大數(shù)據(jù)的涵義與研究意義大數(shù)據(jù)的特點(diǎn)：１）Volume（體110一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：科學(xué)進(jìn)步圖靈獎(jiǎng)獲得者吉姆?格雷提出：大數(shù)據(jù)是科學(xué)研究的第四范式，是從計(jì)算密集型科研發(fā)展到以大數(shù)據(jù)為基礎(chǔ)的數(shù)據(jù)密集型科研方法?？茖W(xué)研究方法的發(fā)展

真正的革命并不發(fā)生在分析數(shù)據(jù)的機(jī)器，而在于數(shù)據(jù)本身和我們?nèi)绾芜\(yùn)用數(shù)據(jù)。一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：科學(xué)進(jìn)步圖靈獎(jiǎng)獲111一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：社會(huì)變革2009至今美國政府全面開放了40萬聯(lián)邦政府原始數(shù)據(jù)集。大數(shù)據(jù)已成為美國國家創(chuàng)新戰(zhàn)略、國家安全戰(zhàn)略、國家IT產(chǎn)業(yè)發(fā)展戰(zhàn)略以及國家信息網(wǎng)絡(luò)戰(zhàn)略的交叉領(lǐng)域、核心領(lǐng)域。21世紀(jì)數(shù)據(jù)的價(jià)值有可能等同于20世紀(jì)的石油，大數(shù)據(jù)研究使得人們降低了對因果關(guān)系的渴求，而關(guān)注相關(guān)關(guān)系。只需要知道是什么，而不需知道為什么。這將使得理解現(xiàn)實(shí)和做決定的基礎(chǔ)也將受到根本性挑戰(zhàn)。社會(huì)價(jià)值一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：社會(huì)變革2009112一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：經(jīng)濟(jì)增長一、大數(shù)據(jù)的涵義與研究意義研究大數(shù)據(jù)的意義：經(jīng)濟(jì)增長113二、與空間信息和位置相關(guān)的大數(shù)據(jù)指直接或間接關(guān)聯(lián)著相對于地球的某個(gè)地點(diǎn)的數(shù)據(jù)，包括自然地理數(shù)據(jù)和社會(huì)經(jīng)濟(jì)數(shù)據(jù)?？臻g媒體數(shù)據(jù)地理數(shù)據(jù)軌跡數(shù)據(jù)包含位置的數(shù)字化的文字、圖形、圖像、視頻影像等媒體數(shù)據(jù)，主要來源于移動(dòng)社交網(wǎng)絡(luò)、微博等新型互聯(lián)網(wǎng)應(yīng)用指通過GNSS等測量手段以及網(wǎng)絡(luò)簽到等方法獲得的用戶活動(dòng)數(shù)據(jù)，可以被用來反映用戶的位置和用戶的社會(huì)偏好。位置大數(shù)據(jù)的分類二、與空間信息和位置相關(guān)的大數(shù)據(jù)空間媒體數(shù)據(jù)地理數(shù)據(jù)軌跡114二、與空間信息和位置相關(guān)的大數(shù)據(jù)地理數(shù)據(jù)內(nèi)容：土地覆蓋類型數(shù)據(jù)、地貌數(shù)據(jù)、土壤數(shù)據(jù)、水文數(shù)據(jù)、植被數(shù)據(jù)、居民地?cái)?shù)據(jù)、河流數(shù)據(jù)、行政境界及社會(huì)經(jīng)濟(jì)方面的數(shù)據(jù)等。特點(diǎn)：數(shù)據(jù)體量大、較為規(guī)則化、變化較慢。二、與空間信息和位置相關(guān)的大數(shù)據(jù)地理數(shù)據(jù)115二、與空間信息和位置相關(guān)的大數(shù)據(jù)軌跡數(shù)據(jù)內(nèi)容：個(gè)人軌跡數(shù)據(jù)、群體軌跡數(shù)據(jù)、車輛軌跡數(shù)據(jù)等特點(diǎn)：數(shù)據(jù)體量大、信息碎片化、準(zhǔn)確性較低、半結(jié)構(gòu)化出租車軌跡數(shù)據(jù)示例二、與空間信息和位置相關(guān)的大數(shù)據(jù)軌跡數(shù)據(jù)116二、與空間信息和位置相關(guān)的大數(shù)據(jù)社會(huì)交流、個(gè)性化信息推送、駕駛安全、智能駕駛為個(gè)人生活服務(wù)城市規(guī)劃、疾病控制、智能交通、節(jié)能減排、環(huán)境保護(hù)、應(yīng)急響應(yīng)企業(yè)調(diào)度、門店選址、廣告推送、位置營銷為企業(yè)經(jīng)濟(jì)服務(wù)為城市運(yùn)行服務(wù)位置大數(shù)據(jù)的作用二、與空間信息和位置相關(guān)的大數(shù)據(jù)為城市運(yùn)行服務(wù)117三、空間大數(shù)據(jù)的應(yīng)用1.空間大數(shù)據(jù)與智能交通Inrix是美國的一家交通數(shù)據(jù)處理公司，也是全球領(lǐng)先的道路交通信息和駕駛員服務(wù)供應(yīng)商。他們設(shè)計(jì)的APP是一款致力于為全球交通問題帶來智能數(shù)據(jù)和先進(jìn)的分析方法的交通智能化平臺。三、空間大數(shù)據(jù)的應(yīng)用1.空間大數(shù)據(jù)與智能交通Inri118三、空間大數(shù)據(jù)的應(yīng)用利用大數(shù)據(jù)預(yù)判未來交通信息和路況是核心2012年英國倫敦奧運(yùn)會(huì)利用INRIX軟件和在線服務(wù)確保交通順暢;在美國有超過25個(gè)州的交通部門使用INRIX數(shù)據(jù)輔助交通管理。三、空間大數(shù)據(jù)的應(yīng)用利用大數(shù)據(jù)預(yù)判未來交通信息和路況是核心119三、空間大數(shù)據(jù)的應(yīng)用

2015年2月11日，國內(nèi)智能交通行業(yè)領(lǐng)軍企業(yè)北京千方科技股份有限公司與INRIX簽署戰(zhàn)略合作協(xié)議。千方科技在國內(nèi)智能交通行業(yè)具有深厚的理解和市場、技術(shù)積累，INRIX在歐美地區(qū)具有成熟的交通信息化解決方案和先進(jìn)理念。雙方將結(jié)合各自的優(yōu)勢，整合交通信息化及數(shù)據(jù)分析解決方案和產(chǎn)品，共同拓展智能交通行業(yè)市場，雙方將在交通大數(shù)據(jù)分析、增值挖掘、交通仿真等技術(shù)方向深度交流，提升雙方專業(yè)化及技術(shù)能力。

不過，由于涉及國內(nèi)職能部門的數(shù)據(jù)保護(hù)問題，國內(nèi)手機(jī)用戶還未能夠體驗(yàn)這款A(yù)pp。三、空間大數(shù)據(jù)的應(yīng)用2015年2月11日，國內(nèi)智能交通120三、空間大數(shù)據(jù)的應(yīng)用2.空間大數(shù)據(jù)與社會(huì)生活2014年春節(jié)期間，百度地圖定位可視化大數(shù)據(jù)播報(bào)的國內(nèi)春節(jié)人口遷徙情況。2015年最近一周南京夫子廟景區(qū)熱力圖三、空間大數(shù)據(jù)的應(yīng)用2.空間大數(shù)據(jù)與社會(huì)生活2014年春121三、空間大數(shù)據(jù)的應(yīng)用3.空間大數(shù)據(jù)與應(yīng)急管理2013年4月15日，波士頓馬拉松爆炸案事發(fā)幾小時(shí)內(nèi)，數(shù)以千計(jì)的在場群眾將事發(fā)現(xiàn)場拍攝的照片和視頻放到了公共網(wǎng)絡(luò)平臺上，這些照片和視頻圖像來自各種相機(jī)，手機(jī)和平板電腦。不到一天時(shí)間，嫌犯被確認(rèn)并在紐約被抓獲這是一種典型的利用空間社會(huì)媒體的位置大數(shù)據(jù)與反犯罪機(jī)構(gòu)的專業(yè)能力結(jié)合，建立的城市安全與應(yīng)急新體制三、空間大數(shù)據(jù)的應(yīng)用3.空間大數(shù)據(jù)與應(yīng)急管理122

位置大數(shù)據(jù)研究涉及到數(shù)據(jù)采集、數(shù)據(jù)處理、計(jì)算和存儲以及可視化等一套完整的方法體系

四、空間大數(shù)據(jù)的存儲

位置大數(shù)據(jù)研究涉及到數(shù)據(jù)采集、數(shù)據(jù)處理、計(jì)算和存儲以及可123四、空間大數(shù)據(jù)的存儲海量數(shù)據(jù)的高效存儲支持豐富的數(shù)據(jù)類型處理速度快數(shù)據(jù)庫應(yīng)當(dāng)易于擴(kuò)展大數(shù)據(jù)下對于數(shù)據(jù)庫的需求四、空間大數(shù)據(jù)的存儲海量數(shù)據(jù)的高效存儲支持豐富的數(shù)據(jù)類型處理124四、空間大數(shù)據(jù)的存儲CAPNOSQLBASE不保證遵循A