華為FusionInsight平臺“精煉”大數(shù)據(jù)

1、華為 FusionInsight 平臺“精煉”大數(shù)據(jù)歷史的車輪駛?cè)?2015 年，人們對大數(shù)據(jù)的關(guān)注 焦點(diǎn)，已經(jīng)從之前的概念炒作，發(fā)展到如何通過大數(shù) 據(jù)為客戶業(yè)務(wù)創(chuàng)造價(jià)值。未來，數(shù)據(jù)將以十倍、 百倍的速度增長， 信息“過 載”已經(jīng)成為許多企業(yè)的一大癥結(jié)。即使是石油，在 開采出來之后，還需要經(jīng)過冶煉、蒸餾、精制等，才 能為社會創(chuàng)造價(jià)值。企業(yè)的數(shù)據(jù)，如果不能快速地抽 取、分析和變現(xiàn)，也將成為企業(yè)的沉重負(fù)擔(dān)。在各行各業(yè)受到互聯(lián)網(wǎng)沖擊的年代，客戶需要的 不僅僅是供應(yīng)商，更是合作伙伴；需要的是持續(xù)的聯(lián) 合創(chuàng)新、持續(xù)的開放解決方案供應(yīng)、 持續(xù)的咨詢服務(wù)， 這樣才能幫助客戶直面競爭和挑戰(zhàn)，甚至成功逆襲。Fu

2、sioninsight:累計(jì)成功部署500+項(xiàng)目大數(shù)據(jù)已成為華為未來的戰(zhàn)略方向之一。從 2009 年起，華為就開始有節(jié)奏地投入大數(shù)據(jù)， 如今已經(jīng)取得開源社區(qū)、 客戶和生態(tài)伙伴的共同認(rèn)可。 其具體舉措包括：在Apache Hadoop和Spark社區(qū)投 入高級專家持續(xù)貢獻(xiàn)內(nèi)核代碼，已取得社區(qū)排名全球 第四的成績。2011 年發(fā)布第一個(gè)平臺版本， 成功幫助電信運(yùn)營商改善了基站投資結(jié)構(gòu)，大幅降低了高端客戶的離網(wǎng) 率;2013年發(fā)布全新架構(gòu)的Fusionlnsight大數(shù)據(jù)平臺， 并快速在金融、公安、政府和教育等行業(yè)取得突破， 已累計(jì)成功部署了 500+項(xiàng)目，同時(shí)已有 200+合作伙 伴的行業(yè)方案采用

3、了 Fusio nln sight平臺。華為始終秉承著以客戶為中心的理念，反映在大 數(shù)據(jù)領(lǐng)域，就是要貼近行業(yè)典型客戶進(jìn)行聯(lián)合創(chuàng)新， 有針對性地提供平臺解決方案，并引領(lǐng)合作伙伴在平 臺上持續(xù)構(gòu)建價(jià)值應(yīng)用。Fusionlnsight的整體結(jié)構(gòu)分為三層：最底層的DataOS是基石，可支持主流的開源處理引擎一一 MapReduce批處理、Spark內(nèi)存迭代、STORM流處理， 以及華為自研的MPPDB，它是業(yè)內(nèi)唯一的全棧企業(yè) 發(fā)行版，可滿足不同場景的數(shù)據(jù)處理需求。同時(shí)，自 研的 Elk 可支持企業(yè)的 SQL 應(yīng)用無縫遷移到大數(shù)據(jù)平 臺；中層的DataFarm是伯樂，是讓數(shù)據(jù)有效流動起來 的關(guān)鍵所在，支

4、持 lSV 利用平臺能力進(jìn)行多源數(shù)據(jù)的 實(shí)時(shí)集成，支持各類開源的算法庫，使能客戶和伙伴 的挖掘能力，幫助數(shù)據(jù)分析師不斷地進(jìn)行試錯(cuò)和模型 訓(xùn)練；最上層的行業(yè)增強(qiáng)解決方案是加速器，在 DataOS和DataFarm的基礎(chǔ)上，針對行業(yè)典型大數(shù)據(jù) 場景（比如金融業(yè)的風(fēng)控） ，有針對性地優(yōu)化并預(yù)置參 數(shù)、算法、模型和邏輯包，大大縮短了基于大數(shù)據(jù)的 新業(yè)務(wù)上線時(shí)間，滿足了在線應(yīng)用的高要求，填補(bǔ)了 企業(yè)高要求與無序開源的空白，最后聯(lián)合 ISV 開發(fā)上 層應(yīng)用，提供關(guān)鍵場景的端到端解決方案。大數(shù)據(jù)：走向企業(yè)生產(chǎn)和關(guān)鍵業(yè)務(wù)FusionInsight 在平臺水平能力上持續(xù)做厚，支持 多集群統(tǒng)一管理及多租戶、容災(zāi)備

5、份、存儲EC、數(shù)據(jù) 加密、 OMS 支持 HA 等高級特性，支持全 Web 化的 交互式體驗(yàn)，以及不斷豐富的數(shù)據(jù)治理工具，讓大數(shù) 據(jù)從企業(yè)的實(shí)驗(yàn)平臺走向生產(chǎn)、走向關(guān)鍵業(yè)務(wù)。金融行業(yè)近年來受互聯(lián)網(wǎng)沖擊很大，去中介化讓 金融脫媒、客戶脫媒、甚至信息脫媒甚囂塵上，各大 銀行備感壓力。 2014年，隨著以 FusionInsight 為代表 的大數(shù)據(jù)解決方案開始走向商用，這一局面開始得到 改觀。比如，國內(nèi)一家領(lǐng)先的商業(yè)銀行在采用了華為 的 FusionInsight 進(jìn)行潛在小微貸款客戶的全量挖掘 后，其名單轉(zhuǎn)化率比采用傳統(tǒng)的數(shù)據(jù)倉庫提升了 40 倍，或有金融資產(chǎn)預(yù)測誤差率則降低了一倍；另一家 銀行過

6、去主要通過批量發(fā)送推薦短信的方式開展?fàn)I銷 活動，無法做到個(gè)性化，致使客戶多有抱怨，而采用 FusionInsight 后，理財(cái)推薦的短信發(fā)送量比過去下降 了 82%，而命中率卻上升到了 95% ，真正實(shí)現(xiàn)了千人 千面的精準(zhǔn)營銷；還有一家銀行在信用卡征信采用 FusionInsight 后，其發(fā)卡時(shí)間從 15 天大幅縮減到了立 等可取，在安全性更好的前提下達(dá)到了實(shí)時(shí)體驗(yàn)。交通管理是典型的大數(shù)據(jù)行業(yè)，其數(shù)據(jù)特點(diǎn)也是 非常典型的5V，面臨著新形勢下的反恐壓力及人均警 力嚴(yán)重不足的困境。華為 FusionInsight 幫助中國某省 的公安部門實(shí)現(xiàn)了上千個(gè)數(shù)據(jù)庫的高效集中，形成了 統(tǒng)一的大數(shù)據(jù)平臺，

7、強(qiáng)大的 SQL 能力幫助交管部門無 縫遷移了應(yīng)用，支持秒級發(fā)現(xiàn)套牌車、分鐘級發(fā)現(xiàn)同 行車、實(shí)時(shí)交互查詢高危車輛、自學(xué)習(xí)優(yōu)化交通網(wǎng)絡(luò) 效率，用智能的方法有效緩解了城市擁堵。在政府行業(yè)，很多政府部門都擁有海量的價(jià)值數(shù) 據(jù)，但這些數(shù)據(jù)高度分散，應(yīng)用也呈現(xiàn)煙囪式分布。 華為通過將其 FusionInsight 大數(shù)據(jù)平臺與 FusionSphere云平臺聯(lián)合，正在為多個(gè)政府部門建設(shè) 統(tǒng)一的大數(shù)據(jù)云數(shù)據(jù)中心，將云計(jì)算和大數(shù)據(jù)結(jié)合， 實(shí)現(xiàn)了大數(shù)據(jù)能力的服務(wù)化，讓數(shù)據(jù)能更加高效地開 放，更好地服務(wù)于民生。電信行業(yè)也是數(shù)據(jù)高度密集的行業(yè)，電信運(yùn)營商 更是應(yīng)用大數(shù)據(jù)的先行者，華為較早就進(jìn)入了這個(gè)領(lǐng) 域，通過 FusionInsight 平臺幫助全球多個(gè) TOP 運(yùn)營商 構(gòu)筑了融合的大數(shù)據(jù)中心。比如，中國某省的運(yùn)營商 利用 FusionInsight 實(shí)現(xiàn)了 VIP 客戶的預(yù)防性維挽，并 優(yōu)化了基站的投資分布，當(dāng)年就為該客戶節(jié)省了幾百 萬元的支出，同時(shí)，通過開放技術(shù)還讓客戶的移動位 置數(shù)據(jù)很好地服務(wù)于各級廣告主，讓數(shù)據(jù)真正變現(xiàn)成 了貨幣。上述成績的取得，離不開華為各級合作伙伴的大 力支持， FusionInsight 發(fā)布之初就非常注重生態(tài)鏈的