大數(shù)據(jù)在網(wǎng)絡(luò)安全中的應(yīng)用模板

大數(shù)據(jù)在網(wǎng)絡(luò)平安中的應(yīng)用華南理工高校電子與信息學(xué)院覃健誠博士自我介紹覃健誠://28x28北京郵電高校信息平安中心博士畢業(yè)目前在：華南理工高校電子與信息學(xué)院探討方向：網(wǎng)絡(luò)平安，云計(jì)算著作《網(wǎng)絡(luò)平安基礎(chǔ)》，科學(xué)出版社，2011內(nèi)容列表網(wǎng)絡(luò)空間平安中的大數(shù)據(jù)價(jià)值攻：大數(shù)據(jù)信息的獲得與利用防：大數(shù)據(jù)疼惜與平安檢測華南理工高校的相關(guān)探討工作日新月異的網(wǎng)絡(luò)空間平安網(wǎng)絡(luò)平安領(lǐng)域始終在快速發(fā)展云計(jì)算、移動互聯(lián)網(wǎng)、SDN等新技術(shù)涌現(xiàn)平安問題同樣不會停留在過去傳統(tǒng)的網(wǎng)絡(luò)平安技術(shù)已經(jīng)不足夠防火墻、入侵檢測等照舊有用，但明顯不夠APT、零日攻擊等新威逼難以發(fā)覺云計(jì)算等也使得平安環(huán)境更為困難先理解網(wǎng)絡(luò)空間——CyberSpaceCyberSpace是存放各種思維信息產(chǎn)物的空間云計(jì)算、軟件定義網(wǎng)絡(luò)、大數(shù)據(jù)包含在其中發(fā)揮出想象力，這個(gè)虛擬空間可以無奇不有空間中的平安問題事關(guān)重大兩個(gè)世界的概念原子世界（實(shí)體）比特世界（虛構(gòu)）能夠相互影響網(wǎng)絡(luò)空間平安干脆影響現(xiàn)實(shí)世界2010年震網(wǎng)病毒Stuxnet摧毀了伊朗核設(shè)施的離心機(jī)疑似美國發(fā)動的攻擊2010年紐約股市一次莫名暴跌數(shù)分鐘內(nèi)暴跌近9%，找不到“胖手指”疑似自動交易軟件觸發(fā)條件的連鎖反應(yīng)2013年“棱鏡門”事務(wù)監(jiān)控?cái)?shù)據(jù)挖掘敏感信息被曝光網(wǎng)絡(luò)空間平安的新威逼舉例零日攻擊：防不勝防利用最新技術(shù)，發(fā)起針對未知漏洞的攻擊高級持續(xù)威逼（APT）長期、持續(xù)性、隱藏攻擊，針對性強(qiáng)云計(jì)算平臺內(nèi)部平安攻擊：虛擬機(jī)之間在服務(wù)器之間的網(wǎng)絡(luò)流量中根本檢測不到以上都是傳統(tǒng)平安技術(shù)難以抵抗的如何應(yīng)對未知的網(wǎng)絡(luò)平安威逼？

平安競爭：挖掘大數(shù)據(jù)蘊(yùn)含的信息平安首先是技術(shù)上的比拼通過大數(shù)據(jù)找尋各種可能的網(wǎng)絡(luò)平安信息猶如兩個(gè)狙擊手對決，看誰先發(fā)覺對方涉及數(shù)據(jù)倉庫、數(shù)據(jù)分析、數(shù)據(jù)挖掘等技術(shù)象提煉稀土礦一樣提取大數(shù)據(jù)中的價(jià)值有價(jià)值的信息量密度很低，但隱藏總量很大要有足夠的技術(shù)條件才能提取出來防病毒：大數(shù)據(jù)價(jià)值實(shí)例從美鈔軌跡到流感預(yù)料趣味網(wǎng)站：讓大家輸入手上美鈔的序列號積累了十年數(shù)據(jù)，能跟蹤美鈔流通軌跡大量數(shù)據(jù)積累的意義形成美鈔在世界各地流淌的規(guī)律也就是世界上人群、病毒流淌的規(guī)律2009年利用數(shù)據(jù)來預(yù)料H1N1流感傳播趨勢成功預(yù)料首要爆發(fā)熱點(diǎn)在紐約、加州、德州大數(shù)據(jù)體現(xiàn)的價(jià)值凹凸與數(shù)據(jù)源有關(guān)，也和信息提煉水平有關(guān)要把有價(jià)值的信息從大量數(shù)據(jù)中分別出來信息提煉水平不夠，大數(shù)據(jù)只是無用的垃圾提煉水平越高，能夠提取出的價(jià)值越高類比：鈾礦濃縮技術(shù)自然鈾礦：約0.7%核電站用低濃縮鈾：3%核武器用高濃縮鈾：90%內(nèi)容列表網(wǎng)絡(luò)空間平安中的大數(shù)據(jù)價(jià)值攻：大數(shù)據(jù)信息的獲得與利用防：大數(shù)據(jù)疼惜與平安檢測華南理工高校的相關(guān)探討工作虛擬案例：利用大數(shù)據(jù)的網(wǎng)絡(luò)詐騙股票走勢預(yù)料：發(fā)送大量垃圾郵件、短信8萬郵件，4萬說升，4萬說跌，總有一半對說對的接著下一輪：2萬說升，2萬說跌有1250人連續(xù)收到6次郵件，次次猜中收網(wǎng)：針對剩下的1250人聲稱有內(nèi)幕消息，要求付費(fèi)購買部分人信以為真，付款類似手法可用在球賽結(jié)果預(yù)料等其他方面有效利用大數(shù)據(jù)中的價(jià)值棱鏡門：監(jiān)聽有價(jià)值的信息數(shù)據(jù)來源：電信部門、網(wǎng)絡(luò)設(shè)備關(guān)鍵問題：如何篩選出有價(jià)值的信息背景噪音：大量無關(guān)的數(shù)據(jù)相關(guān)技術(shù)舉例：要求速度快模式匹配算法：找出敏感詞、句之類概率分析算法：發(fā)覺異樣（小概率事務(wù)）相關(guān)性分析算法：找到高度相關(guān)狀況棱鏡門的延長：網(wǎng)絡(luò)信息監(jiān)控高級持續(xù)威逼（APT）潛藏、監(jiān)聽數(shù)據(jù)流，逐步勾畫網(wǎng)絡(luò)隱私輪廓通過大數(shù)據(jù)分析發(fā)覺系統(tǒng)潛在弱點(diǎn)有目的地滲透、收集有價(jià)值的信息不主動破壞，難以察覺為特定目的監(jiān)測網(wǎng)絡(luò)信息反恐、防侵略：監(jiān)控異樣動向防腐敗、反洗錢：監(jiān)控賬務(wù)防欺詐、防盜刷：監(jiān)控交易信息平安監(jiān)控：利用大數(shù)據(jù)跟蹤現(xiàn)金鈔票流淌狀況：記錄鈔票序號利用大量收銀臺驗(yàn)鈔機(jī)、ATM機(jī)發(fā)覺現(xiàn)金異樣流淌狀況追查洗錢源頭分析緣由時(shí)留意：緘默的大多數(shù)大數(shù)據(jù)分析只告知你相關(guān)性，不會講出緣由二戰(zhàn)實(shí)例：轟炸機(jī)加固機(jī)身，還是機(jī)翼數(shù)據(jù)統(tǒng)計(jì)：飛回來的轟炸機(jī)多數(shù)是機(jī)翼中彈內(nèi)容列表網(wǎng)絡(luò)空間平安中的大數(shù)據(jù)價(jià)值攻：大數(shù)據(jù)信息的獲得與利用防：大數(shù)據(jù)疼惜與平安檢測華南理工高校的相關(guān)探討工作由大數(shù)據(jù)發(fā)覺網(wǎng)絡(luò)平安問題盡量收集、統(tǒng)計(jì)全局性網(wǎng)絡(luò)數(shù)據(jù)目的：防范零日攻擊、APT等未知威逼深化到云計(jì)算平臺內(nèi)部采集從統(tǒng)計(jì)分析中發(fā)覺異樣統(tǒng)計(jì)可以找出規(guī)律，有各種不同的統(tǒng)計(jì)分析法異樣（小概率事務(wù)）往往意味著有問題未知威逼的線索可能蘊(yùn)含在這些異樣中這比傳統(tǒng)平安技術(shù)挖掘的信息更多大數(shù)據(jù)的信息平安疼惜大數(shù)據(jù)本身的平安大數(shù)據(jù)存儲、計(jì)算、傳輸過程中的平安防止故障，防止數(shù)據(jù)差錯(cuò)設(shè)備牢靠性：技術(shù)保障信息內(nèi)容的平安防范大數(shù)據(jù)中可能蘊(yùn)含的敏感信息泄露利用大數(shù)據(jù)來隱藏隱私信息信息內(nèi)容的平安防范大數(shù)據(jù)中泄露敏感信息看似無用的數(shù)據(jù)，可能隱藏著重要信息甚至大數(shù)據(jù)的擁有者自己都不知道隱含了什么貌似嚴(yán)密的信息防護(hù)，可能用統(tǒng)計(jì)手段繞過典型防護(hù)技術(shù)：對水平要求比較高訪問限制：不簡潔應(yīng)用到大數(shù)據(jù)范圍內(nèi)查詢限制：簡潔出現(xiàn)組合查詢漏洞數(shù)據(jù)摻假、揉合：有意加入噪聲是一種方法虛擬案例：組合查詢獲得隱私查詢限制：不允許統(tǒng)計(jì)某個(gè)年齡的財(cái)寶數(shù)量例如：不能單獨(dú)統(tǒng)計(jì)30歲人群的財(cái)寶總數(shù)這個(gè)限制有漏洞破解：統(tǒng)計(jì)出30歲人群的財(cái)寶總數(shù)先統(tǒng)計(jì)全部人群的財(cái)寶總數(shù)再統(tǒng)計(jì)29歲以下財(cái)寶總數(shù)、31歲以上財(cái)寶總數(shù)第一個(gè)數(shù)減去后面兩個(gè)數(shù)，得到結(jié)果實(shí)際例子可能比這個(gè)困難得多內(nèi)容列表網(wǎng)絡(luò)空間平安中的大數(shù)據(jù)價(jià)值攻：大數(shù)據(jù)信息的獲得與利用防：大數(shù)據(jù)疼惜與平安檢測華南理工高校的相關(guān)探討工作大數(shù)據(jù)處理的前提：高性能平臺須要在短時(shí)間內(nèi)處理大量數(shù)據(jù)，并得到結(jié)果容量、速度、帶寬，一個(gè)都不能少強(qiáng)調(diào)并行計(jì)算實(shí)力：硬件設(shè)備、軟件算法保障信息平安云計(jì)算平臺對大數(shù)據(jù)的作用產(chǎn)生、采集大數(shù)據(jù)：一個(gè)源頭存儲、統(tǒng)計(jì)分析大數(shù)據(jù)：大量云資源節(jié)約大數(shù)據(jù)傳輸帶寬：云端計(jì)算、數(shù)據(jù)壓縮高性能計(jì)算的技術(shù)要求：又快又好超級計(jì)算機(jī)并不是簡潔的硬件積累數(shù)據(jù)帶寬要求隨著節(jié)點(diǎn)數(shù)增長，帶寬以平方級增長要求有先進(jìn)的高速傳輸技術(shù)系統(tǒng)牢靠性要求隨著節(jié)點(diǎn)數(shù)增長，故障率以指數(shù)級增長要求有超群的系統(tǒng)牢靠性限制技術(shù)華南理工高校的高性能計(jì)算建設(shè)廣東省教化與科研高性能與網(wǎng)格計(jì)算平臺關(guān)鍵技術(shù)探討：與大數(shù)據(jù)相關(guān)的IPv4/IPv6網(wǎng)絡(luò)數(shù)據(jù)包情報(bào)分析技術(shù)的研發(fā)大數(shù)據(jù)壓縮與混沌加密核心引擎的研制網(wǎng)絡(luò)平安自我防衛(wèi)智能技術(shù)的研發(fā)IPv4/IPv6網(wǎng)絡(luò)數(shù)據(jù)包情報(bào)分析從大量數(shù)據(jù)流中快速篩選出指定特征數(shù)據(jù)包算法：PPM概率預(yù)料、模式匹配利用GPU硬件對數(shù)據(jù)處理作并行加速駕馭相關(guān)核心技術(shù)，就可以防范“棱鏡門”窺探大數(shù)據(jù)壓縮與混沌加密核心引擎核心壓縮算法自主研發(fā)，支持GB級數(shù)據(jù)字典實(shí)測性能指標(biāo)達(dá)到先進(jìn)水平壓縮率、壓縮速度全面超越WinRAR壓縮速度超過7-zip，壓縮率各有千秋能夠進(jìn)行“蝴蝶效應(yīng)”加密網(wǎng)絡(luò)平