大數(shù)據(jù)的思維

大數(shù)據(jù)的思維王淳天云大數(shù)據(jù)2024/4/141IT的定位CIOCDOInformationTechnology

2024/4/142虛擬化Vs.大數(shù)據(jù)Vs.2024/4/143傳統(tǒng)Vs.創(chuàng)新Linux/HDFSJ2EE存儲設(shè)備數(shù)據(jù)庫Web操作系統(tǒng)J2EEHive/HBase……WebX86PCServersVs.傳統(tǒng)架構(gòu)面臨海量數(shù)據(jù)處理的瓶頸：數(shù)據(jù)的自由度和性能矛盾。固定字段、維度的表結(jié)構(gòu)，限制了數(shù)據(jù)的入庫和拓展。數(shù)據(jù)索引方式的瓶頸，依賴文件目錄結(jié)構(gòu)（NAS）或私有的位圖塊表結(jié)構(gòu)（Block）。低成本-x86

PC服務器可擴展-線性擴展靈活的數(shù)據(jù)結(jié)構(gòu)-schema

free海量數(shù)據(jù)下的超高性能-及時實時2024/4/144大數(shù)據(jù)創(chuàng)新在銀行的應用核心系統(tǒng)保留13個月以內(nèi)的數(shù)據(jù)查詢時間段有限制，響應時間很快磁帶庫保留昨日以前數(shù)據(jù)線下保存，恢復時間長、效率低歷史數(shù)據(jù)查詢系統(tǒng)保留1個月以前數(shù)據(jù)查詢沒有時間段限制，響應時間很快數(shù)據(jù)倉庫保留昨日以前數(shù)據(jù)不對外提供聯(lián)機服務正文備份數(shù)據(jù)采集數(shù)據(jù)采集高TCO/低ROI2024/4/145核心減負、全量在線對公活期交易明細查詢；活期法人透支戶交易明細查詢；對公定期交易明細查詢；對私活期交易明細查詢；對私定期交易明細查詢；換卡登記明細查詢……所有歷史賬務明細數(shù)據(jù)在線存儲大量查詢業(yè)務操作遷出核心系統(tǒng)大量并發(fā)查詢請求毫秒級別響應豐富業(yè)務創(chuàng)新數(shù)據(jù)挖掘靈活實現(xiàn)2024/4/146銀行客戶精準營銷2024/4/147基于上網(wǎng)日志的客戶標簽利用自然語言處理+支持向量機算法

基于用戶上網(wǎng)行為和內(nèi)容給客戶打標簽。確保營銷活動實時有效全省7000多萬用戶，每天300+億條上網(wǎng)記錄，每條記錄對應網(wǎng)頁數(shù)據(jù)平局17.9KB，相當于每天網(wǎng)絡(luò)傳輸約500+TB的數(shù)據(jù)量，每天進行自然語言處理和客戶標簽更新2024/4/148無人工干預的機器學習人數(shù)占比年齡年收入（元）累計標保和繳付保費合計件均標保壽險繳付金額兩全繳付金額年金繳付金額萬能繳付金額意外繳付金額醫(yī)療繳付金額重疾繳付金額投連繳付金額

0.60%47482002690080400190005005000767002500100200400400

1.37%51294001500096600107005009040058001160010080022003000

0.84%4018060010800213007800110038001240016001003007000

2.07%47294007400711001100060051001500637001005001300500

0.68%3382006500307005400200800293002000100100100

0.84%5336005800805001040005300250053000020077200

1.77%42974005300980039004003300300017001003004000年收入2.9萬，總標保1.5萬以上，高達9萬的兩全產(chǎn)品，產(chǎn)品覆蓋面齊全年收入高達18萬，總標保只有1萬，壽險和年金金額較高，無投連產(chǎn)品年收入2.9萬，高達6.3萬的萬能產(chǎn)品，產(chǎn)品覆蓋面齊全年收入只有0.3萬，高達7.7萬的投連產(chǎn)品年收入9.7萬，標保只有0.5萬年收入只有0.8萬，高達2.9萬的年金產(chǎn)品年收入4.8萬，總標保2.6萬以上，高達7.6萬的年金產(chǎn)品，產(chǎn)品覆蓋面齊全打破經(jīng)驗與規(guī)則，去大師，去精英。Letdatatalk。2024/4/149秒級的犯罪嫌疑人排查乘坐同一班列車，住同一酒店的兩個人可能是同伙，刑偵人員將不同線索拼湊起來排查疑犯，可是來自于多源數(shù)據(jù)的處理在傳統(tǒng)IOE架構(gòu)上，需要數(shù)小時甚至整日。天云大數(shù)據(jù)平臺將這