it新技術云計算大數(shù)據與物聯(lián)網

云計算、大數(shù)據和物聯(lián)網IT新技術第1頁第2頁第3頁云計算CloudComputing第4頁計算資源演進：從集中到分散再到集中全世界只需要5臺電腦就足夠了

——托馬斯·沃森個人用戶內存只需640K足矣

——比爾·蓋茨計算時代網絡時代云時代第5頁（1）數(shù)據在云端不怕丟失無須備份（2）軟件在云端無須下載自動升級（3）無所不在云計算任何設備登錄后就是你（4）無限強大云計算無限空間無限速度業(yè)界趨勢：云計算時代到來第6頁1.用戶輸入查詢關鍵字CloudComputing2.分布式預處理數(shù)據方便為搜索提供服務:GoogleInfrastructure(thousandsofcommodityserversaroundtheworld)MapReduceformassdataprocessingGoogleFileSystem3.返回搜索結果互聯(lián)網搜索：云計算例子第7頁谷歌企業(yè)（G）圍繞因特網搜索創(chuàng)建了一個超動力商業(yè)模式。如今，他們又以應用托管、企業(yè)搜索以及其它更多形式向企業(yè)開放了他們“云”。4月，谷歌推出了谷歌應用軟件引擎（GoogleAppEngine，下稱GAE），這種服務讓開發(fā)人員能夠編譯基于Python應用程序，并可無償使用谷歌基礎設施來進行托管（最高存放空間達500MB）。對于超出此上限存放空間，谷歌按“每CPU內核每小時”10至12美分及1GB空間15至18美分標準進行收費。最近，谷歌還公布了提供可由企業(yè)自定義托管企業(yè)搜索服務計劃。第8頁亞馬遜網站（A）亞馬遜網站是以在線書店和電子零售業(yè)起家，如今已在業(yè)界享受盛譽，不過它最新業(yè)務卻與云計算相關。兩年多以前，亞馬遜作為首批進軍云計算新興市場廠商之一，為嘗試進入該領域企業(yè)開創(chuàng)了良好開端。亞馬遜云名為亞馬遜網絡服務（AmazonWebServices，下稱AWS），當前主要由4塊關鍵服務組成：簡單存放服務（SimpleStorageService，S3）；彈性計算云（ElasticComputeCloud，EC2）；簡單排列服務（SimpleQueuingService）以及尚處于測試階段SimpleDB。換句話說，亞馬遜現(xiàn)在提供是能夠經過網絡訪問存放、計算機處理、信息排隊和數(shù)據庫管理系統(tǒng)接入式服務。第9頁微軟企業(yè)(M)在云計算起步階段，微軟曾經歷過不少周折。經過幾年磨合調整之后，這個軟件巨頭云計算戰(zhàn)略終于走上了正軌。依據有些廠商預想，未來絕大部分IT資源都未來自云計算，但微軟卻并不這么認為。幾個月前，微軟首席軟件架構師（CSA）雷;奧茲（RayOzzie）曾表示，微軟宏偉計劃是“提供均衡搭配企業(yè)級軟件、合作搭檔托管服務以及云服務”。簡而言之，微軟將其稱為“軟件加服務”（softwareplusservices）。微軟將在今年推出首批軟件即服務產品包含DynamicsCRMOnline、ExchangeOnline、OfficeCommunicationsOnline以及SharePointOnline。每種產品都含有多客戶共享版本，其主要服務對象是中小型企業(yè)。單客戶版本授權費用在5,000美元以上。針對普通用戶，微軟在線服務還包含WindowsLive、OfficeLive和XboxLive等。第10頁中國移動云計算作為中國移動藍海戰(zhàn)略一個主要部分，于由移動研究院組織力量，聯(lián)合中科院計算所，著手起步了一個叫做“大云”項目。中移動大云建設包含兩個方向：一是基礎架構建設。第二部分是平臺及服務建設?；谶@兩方面之上，中國移動將推出“軟件即服務”，方便中小企業(yè)降低IT投入成本和IT運行復雜性，同時提供辦公自動化處理方案。大云1.0版于年正式公布。以此為基礎，中國移動將逐步展開云計算商業(yè)化步伐。第11頁云計算——方便您生活數(shù)據中心（多終端同時-透明）PC/筆記本客戶端瀏覽器PDA/手機/相機電子相冊電視運算中心拍出相片馬上編輯修改在線編寫文檔、匯報隨時隨地寫日志隨時隨地身體健康情況監(jiān)控云第12頁計算云——提供超大規(guī)模計算資源服務器集群超大規(guī)模虛擬化（透明）云第13頁云計算產生和演進計算能力需求增加第14頁云計算——中小企業(yè)機遇創(chuàng)業(yè)前期成本大大降低IT硬件投入低按需租用第15頁云計算發(fā)展障礙云計算當前困境第16頁云計算何時從云端到地面標準不統(tǒng)一Google、Amazon、IBM、微軟等平臺互不兼容兩大巨頭“云計算”之爭

第17頁云計算何時從云端到地面數(shù)據真安全？云服務提供商信譽——留后門？！面臨著全世界黑客——需要高強度安全系統(tǒng)美國“棱鏡門”事件第18頁第19頁密不可分大數(shù)據與云計算商業(yè)模式驅動應用需求驅動云計算本身也是大數(shù)據一個業(yè)務模式大數(shù)據是落地云云計算模式是業(yè)務模式，本質是數(shù)據處理技術。數(shù)據是資產，云為數(shù)據資產提供存放、訪問和計算。當前云計算更偏重海量存放和計算，以及提供云服務，運行云應用，不過缺乏盤活數(shù)據資產能力，挖掘價值性信息和預測性分析，為國家、企業(yè)、個人提供決議和服務，是大數(shù)據關鍵議題，也是云計算最終方向。第20頁不知道BIGDATA?你out了!反對派認為，我們現(xiàn)在處在一個盲目大數(shù)據崇拜時代第21頁大數(shù)據定義了解大數(shù)據相關技術與應用第22頁二十一世紀是數(shù)據信息大發(fā)展時代，移動互聯(lián)、社交網絡、電子商務等極大拓展了互聯(lián)網邊界和應用范圍，各種數(shù)據正在迅速膨脹并變大。互聯(lián)網（社交、搜索、電商）、移動互聯(lián)網（微博）、物聯(lián)網（傳感器，智慧地球）、車聯(lián)網、GPS、醫(yī)學影像、安全監(jiān)控、金融（銀行、股市、保險）、電信（通話、短信）都在瘋狂產生著數(shù)據?！按髷?shù)據”誕生：半個世紀以來，伴隨計算機技術全方面融入社會生活，信息爆炸已經積累到了一個開始引發(fā)變革程度。它不但使世界充滿著比以往更多信息，而且其增加速度也在加緊。信息爆炸學科如天文學和基因學，創(chuàng)造出了“大數(shù)據”這個概念*。如今，這個概念幾乎應用到了全部些人類智力與發(fā)展領域中。大數(shù)據時代背景第23頁想駕馭這龐大數(shù)據，我們必須了解大數(shù)據特征。地球上至今總共數(shù)據量：在

年，個人用戶才剛才前進TB時代，全球一共新產生了約180EB數(shù)據；在

年，這個數(shù)字到達了1.8ZB。而有市場研究機構預測：到

年，整個世界數(shù)據總量將會增加44倍，到達35.2ZB（1ZB=10億TB）！1PB

=2^50字節(jié)1EB

=2^60字節(jié)1ZB=2^70字節(jié)大數(shù)據時代爆炸增加第24頁“大量化(Volume)、多樣化(Variety)、快速化(Velocity)、價值密度低（Value）”就是“大數(shù)據”顯著特征，或者說，只有具備這些特點數(shù)據，才是大數(shù)據。VolumeVelocityValueVariety大數(shù)據4V特征第25頁大數(shù)據=海量數(shù)據+復雜類型數(shù)據海量交易數(shù)據：企業(yè)內部經營交易信息主要包含聯(lián)機交易數(shù)據和聯(lián)機分析數(shù)據，是結構化、經過關系數(shù)據庫進行管理和訪問靜態(tài)、歷史數(shù)據。經過這些數(shù)據，我們能了解過去發(fā)生了什么。大數(shù)據包含：交易數(shù)據和交互數(shù)據集在內全部數(shù)據集海量交互數(shù)據：源于Facebook、Twitter、LinkedIn及其它起源社交媒體數(shù)據組成。它包含了呼叫詳細統(tǒng)計CDR、設備和傳感器信息、GPS和地理定位映射數(shù)據、經過管理文件傳輸ManageFileTransfer協(xié)議傳送海量圖像文件、Web文本和點擊流數(shù)據、科學信息、電子郵件等等。能夠告訴我們未來會發(fā)生什么。海量數(shù)據處理：大數(shù)據涌現(xiàn)已經催生出了設計用于數(shù)據密集型處理架構。比如含有開放源碼、在商品硬件群中運行ApacheHadoop。大數(shù)據組成第26頁大數(shù)據定義了解大數(shù)據相關技術與應用第27頁1、密不可分大數(shù)據與云計算商業(yè)模式驅動應用需求驅動云計算本身也是大數(shù)據一個業(yè)務模式大數(shù)據是落地云云計算模式是業(yè)務模式，本質是數(shù)據處理技術。數(shù)據是資產，云為數(shù)據資產提供存放、訪問和計算。當前云計算更偏重海量存放和計算，以及提供云服務，運行云應用，不過缺乏盤活數(shù)據資產能力，挖掘價值性信息和預測性分析，為國家、企業(yè)、個人提供決議和服務，是大數(shù)據關鍵議題，也是云計算最終方向。第28頁2、大數(shù)據不但僅是“大”多大？最少PB級比大更主要是數(shù)據復雜性，有時甚至大數(shù)據中小數(shù)據如一條微博就含有顛覆性價值第29頁3、軟件是大數(shù)據引擎和數(shù)據中心（DataCenter）一樣，軟件是大數(shù)據驅動力，軟件改變世界第30頁4、大數(shù)據應用不但僅是精準營銷經過用戶行為分析實現(xiàn)精準營銷是大數(shù)據經典應用，不過大數(shù)據在各行各業(yè)尤其是公共服務領域含有遼闊應用前景消費行業(yè)金融服務食品安全醫(yī)療衛(wèi)生軍事交通環(huán)境保護電子商務氣象第31頁5、管理大數(shù)據“易”了解大數(shù)據“難”即使大數(shù)據是一個重大問題，真正問題是讓大數(shù)據更有意義當前大數(shù)據管理多從架構和并行等方面考慮，處理高并發(fā)數(shù)據存取性能要求及數(shù)據存放橫向擴展，但對非結構化數(shù)據內容了解仍缺乏實質性突破和進展，這是實現(xiàn)大數(shù)據資源化、知識化、普適化關鍵非結構化海量信息智能化處理：自然語言了解、多媒體內容了解、機器學習等第32頁行業(yè)拓展者，打造大數(shù)據行業(yè)基石：IBM：IBM大數(shù)據提供服務包含數(shù)據分析，文本分析，藍色云杉（混搭供電合作網絡平臺）;業(yè)務事件處理；IBMMashupCenter計量，監(jiān)測，和商業(yè)化服務（MMMS）IBM大數(shù)據產品組合中最新系列產品InfoSpherebigInsights，基于ApacheHadoop。該產品組合包含：打包ApacheHadoop軟件和服務，代號是bigInsights關鍵，用于開始大數(shù)據分析軟件被稱為bigsheet，軟件目標是幫助從大量數(shù)據中輕松、簡單、直觀提取、批注相關信息為金融，風險管理，媒體和娛樂等行業(yè)量身定做行業(yè)處理方案微軟：1月與惠普（詳細而言是HP數(shù)據庫綜合應用部門）合作目標是開發(fā)了一系列能夠提升生產力和提升決議速度設備。 EMC：EMC斬獲了紐交所和Nasdaq；大數(shù)據處理方案已包含40多個產品。Oracle：Oracle大數(shù)據機與OracleExalogic中間件云服務器、OracleExadata數(shù)據庫云服務器以及OracleExalytics商務智能云服務器一起組成了甲骨文最廣泛、高度集成化系統(tǒng)產品組合。大數(shù)據應用

——企業(yè)在投入第33頁政府職能變革重視應用大數(shù)據技術，盤活各地云計算中心資產：把原來大規(guī)模投資產業(yè)園、物聯(lián)網產業(yè)園從政績工程，改造成智慧工程；在安防領域，應用大數(shù)據技術，提升應急處置能力和安全防范能力；在民生領域，應用大數(shù)據技術，提升服務能力和運作效率，以及個性化服務，比如醫(yī)療、衛(wèi)生、教育等部門；處理在金融，電信領域等中數(shù)據分析問題：一直得到得極大重視，但受困于存放能力和計算能力限制，只局限在交易數(shù)型數(shù)據統(tǒng)計分析；政府投入將形成示范效應，大大推進大數(shù)據發(fā)展。大數(shù)據應用

——政府第34頁美國奧巴馬政府在白宮網站公布《大數(shù)據研究和發(fā)展倡議》，提出“經過搜集、處理龐大而復雜數(shù)據信息，從中取得知識和洞見，提升能力，加緊科學、工程領域創(chuàng)新步伐，強化美國國土安全，轉變教育和學習模式”；中國工程院院士鄔賀銓說道，“智慧城市是使用智能計算技術使得城市關鍵基礎設施組成和服務更智能、互聯(lián)和有效，伴隨智慧城市建設，社會將步入“大數(shù)據”時代?！彪y點：1、在最初就合理規(guī)劃智慧城市（深度思索哪些領域能夠利用）；2、在城市發(fā)展基礎設施和“云產業(yè)”同時，更多重視“數(shù)據”價值；3、在大數(shù)據處理領域關鍵技術不足，需要政府更大投入。大數(shù)據應用

——熱點：智慧城市第35頁政府、金融、電信等行業(yè)投資建立大數(shù)據處理分析伎倆，實現(xiàn)綜合治理、業(yè)務開拓等目標；應用到制造等更多行業(yè)。更多行業(yè)應用第36頁大數(shù)據賦予我們洞察未來能力馬云成功預測

年經濟危機“

年初,阿里巴巴平臺上整個買家詢盤數(shù)急劇下滑，歐美對中國采購在下滑。海關是賣了貨，出去以后再取得數(shù)據；我們提前六個月時間從詢盤上推斷出世界貿易發(fā)生改變了?！蓖ǔ６裕I家在采購商品前，會比較多家供給商產品，反應到阿里巴巴網站統(tǒng)計數(shù)據中，就是查詢點擊數(shù)量和購置點擊數(shù)量會保持一個相正確數(shù)值，綜合各個維度數(shù)據可建立用戶行為模型。因為數(shù)據樣本巨大,確保用戶行為模型準確性。所以在這個案例中，詢盤數(shù)據下降，自然造成買盤下降。人類從依靠本身判斷做決定到依靠數(shù)據做決定轉變，也是大數(shù)據作出最大貢獻之一?！洞髷?shù)據時代》大數(shù)據帶來機遇第37頁物聯(lián)網概念及應用第38頁ITU:ITUInternetReportsIBM:智慧地球中國政府工作匯報歐盟：CERP-IoTSRA中國工信部：物聯(lián)網白皮書MIT:ElectronicProductCode

1999物聯(lián)網概念第39頁ITU:ITUInternetReportsIBM:智慧地球中國政府工作匯報歐盟：CERP-IoTSRA中國工信部：物聯(lián)網白皮書MIT:ElectronicProductCode1999物聯(lián)網是指依靠射頻識別RFID技術和設備，按約定通信協(xié)議與互聯(lián)網相結合，使物品信息實現(xiàn)智能化識別和管理，實現(xiàn)物品信息互聯(lián)而形成網絡MIT:ElectronicProductCode1999信息與通信技術發(fā)展已經從任何時間、任何地點連接任何人，發(fā)展到連接任何物品階段，萬物連接就形成了物聯(lián)網。ITU:ITUInternetReports歐盟：CERP-IoTSRA物聯(lián)網是未來互聯(lián)網集成部分，被定義為動態(tài)全球網絡框架，含有自配置能力標準和互操作通信協(xié)議。在物聯(lián)網中，“物體”被期望參加商業(yè)、信息和社會過程，它們相互之間能夠通信和交互，感知環(huán)境并與之交互。同時，在人工干預或無需人工干預下，“物體”能夠自動響應“真實/物理世界”事件，觸發(fā)行為和生成服務，影響事件進程。中國政府工作匯報物聯(lián)網是指經過信息傳感設備，按照約定協(xié)議，把任何物品與互聯(lián)網連接起