Erlang零成本實現(xiàn)云計算

Erlang零成本實現(xiàn)云計算

余鋒（褚霸）淘寶網(wǎng)技術(shù)專家

中國軟件技術(shù)大會北京2010

1議題1.Erlang天生適合云計算

2.Erlang并行計算的效率

3.Erlang云計算基礎(chǔ)構(gòu)件

4.Erlang集群管理和維護

5.討論2Erlang是什么?通用的語言和運行環(huán)境內(nèi)置并發(fā),集群,容錯機制電信和互聯(lián)網(wǎng)行業(yè)大規(guī)模部署應(yīng)用

經(jīng)過時間驗證的成熟商業(yè)系統(tǒng)3Erlang的歷史很老的FP語言,始于80年代末愛立信投資10億美金主導(dǎo)開發(fā)EPL版權(quán)方式開源需要記住的幾個年份1987

ThefirstexperimentswithErlang.

1993

DistributionisaddedtoErlang.2006

SMPsupportisaddedtoErlang.4云計算定義云計算就是應(yīng)用公共網(wǎng)絡(luò)設(shè)施對邏輯的組建，像水和電一樣融入大家的生活，為用戶提供海量一站式的服務(wù).-騰訊首席執(zhí)行官馬化騰

Cloud="CPU+Storage+Queues+Management"

-TheAmazonWebServicessaysessentially5Erlang的進程,天上的云"Erlangwasbuiltfromthegroundupforconcurrency.

Notjustinasinglemachine,butinclustersofmachines.

Lotsofmachines.

Lostofmachinesrunningmanyprocesses.

Soundslikeacloud,right?"-ColinClark6語言和虛擬機天生可伸縮

函數(shù)式語言，方便排錯輕量級進程異步消息機制軟實時代碼熱升級最COOL的語言特性:7內(nèi)置集群和分布的基礎(chǔ)設(shè)施和庫進程分布和名稱同步管理進程和節(jié)點容錯管理rpcgen_servermnesia數(shù)據(jù)庫

8穩(wěn)定性In1998,theEricssonAXD301switchwasannounced,containingoveramillionlinesofErlang,andreportedtoachieveareliabilityofnine"9"s.

-JoeArmstrong9Erlang零成本云計算適用的領(lǐng)域

互聯(lián)網(wǎng)應(yīng)用服務(wù)器消息推送系統(tǒng)

網(wǎng)關(guān)代理服務(wù)器軟實時的服務(wù)集群管理

10Erlang社區(qū)快速壯大,見證云計算的增長11小結(jié)

Erlang天生適合特定領(lǐng)域的云計算12議題1.Erlang天生適合云計算

2.Erlang并行計算的效率

3.Erlang云計算基礎(chǔ)構(gòu)件

4.Erlang集群管理和維護

5.討論13Erlang語言運行和開發(fā)效率純Erlang的運行效率大概是C的1/5，編碼效率是C的7倍，在腳本語言中屬于中等水平.但是云計算不僅僅是純計算,任務(wù)調(diào)度和集群管理是Erlang的強項,從而拉升系統(tǒng)的整體表現(xiàn).

第三方獨立評測網(wǎng)站The

Computer

LanguageBenchmarks

Game

摩托羅拉C/Erlang開發(fā)效率比較14Erlang對SMP的支持從2006年發(fā)布的R11B開始.SMP開發(fā)人員的信條:"SMPshouldbetransparenttoprogramersinmuchthewayaserlangdistribution."

-UlfWiger,EricssonAB

15Erlang進程調(diào)度及策略調(diào)度器看起來很像操作系統(tǒng)，實際上Erlang的第一個進程名字叫做otp_ringFullloadornot多個運行隊列，動態(tài)遷移進程16Erlang調(diào)度器的伸縮性小消息，大計算原則17架構(gòu)設(shè)計方面的考慮

不共享沒有顯式的同步并發(fā)導(dǎo)向的編程進程是低廉的,和現(xiàn)實世界對象1:1模型所有無依賴的任務(wù),都抽象為進程并發(fā)執(zhí)行終止的進程,一切都是垃圾,資源集中回收簡潔為王18Erlang技術(shù)發(fā)展路線圖虛擬機的運行期持續(xù)改進計劃涵蓋了對眾核和NUMA體系結(jié)構(gòu)的支持，保證了它在未來新的硬件體系結(jié)構(gòu)下能持續(xù)獲得更好的性能。19小結(jié)

Erlang并行計算效率高20議題1.Erlang天生適合云計算

2.Erlang并行計算的效率

3.Erlang云計算基礎(chǔ)構(gòu)件

4.Erlang集群管理和維護

5.小結(jié)21從Vmware收購談起...Vmware

計算虛擬化Redis

存儲RabbitMQ消息交換系統(tǒng)

我們可以清楚的看到云計算的三個基礎(chǔ)設(shè)施!22存儲系統(tǒng)(noSQL)CouchDBRiakMembase23消息交換系統(tǒng)RabbitMQEjabberd24WEB服務(wù)器MochiwebErlyweb25Map/Reduce系統(tǒng)Disco26小結(jié)

Erlang基礎(chǔ)設(shè)施齊全,開發(fā)成本低27議題1.Erlang天生適合云計算

2.Erlang并行計算的效率

3.Erlang云計算基礎(chǔ)構(gòu)件

4.Erlang集群管理和維護

5.討論28集群特點及規(guī)模集群全連通或者分區(qū)連通訪問授權(quán):nothingorall策略節(jié)點規(guī)模可強力伸縮節(jié)點熱插拔規(guī)?？蛇_上千臺典型系統(tǒng)的集群進程組織圖29異構(gòu)性不同的平臺Windows（smp支持的有待改進）*nix

不同的體系結(jié)構(gòu)無需關(guān)心endianess問題工業(yè)級協(xié)議的支持（asn.1,snmp等）30強大的交互性,與其他遺留系統(tǒng)整合NIFC節(jié)點（ei)Java(jinterface)CobraTCP/HTTP內(nèi)置RPC31部署Standalone發(fā)布，無需單獨安裝Erlang運行期不停機維護在線升級，系統(tǒng)同時運行新舊代碼發(fā)現(xiàn)問題在線降級工具化,一切自動化32代碼安全代碼可遠程從網(wǎng)絡(luò)加載,Diskless減少維護的成本代碼可加密,強加密防止反編譯33遠程維護強大的內(nèi)置shellssh/sftp可集中管理的日志系統(tǒng)34監(jiān)控功能OSmonSNMPHTTP35小結(jié)

Erlang集群管理成本低36議題1.Erlang天生適合云計算

2.Erlang并行計算的效率

3.Erlang云計算基礎(chǔ)構(gòu)件

4.Erlang集群管理和維護

5.討論37典型成功案例