Zookeeper應(yīng)用-分布式鎖

1、Zookeeper介紹分布式鎖呂鑫2015-12-4Zookeeper介紹Apache Zookeeper 是由 Apache Hadoop 的 Zookeeper 子項(xiàng)目發(fā)展而來(lái)，現(xiàn)在已經(jīng)成為了 Apache 的頂級(jí)項(xiàng)目。Zookeeper 為分布式系統(tǒng)提供了高效可靠且易于使用的協(xié)同服務(wù)，它可以為分布式應(yīng)用提供相當(dāng)多的服務(wù)，諸如統(tǒng)一命統(tǒng)一命名服務(wù)名服務(wù)，配置管理配置管理，狀態(tài)同步狀態(tài)同步和組服務(wù)組服務(wù)等。 Zookeeper 接口簡(jiǎn)單，開(kāi)發(fā)人員不必過(guò)多地糾結(jié)在分布式系統(tǒng)編程難于處理的同步和一致性問(wèn)題上，你可以使用 Zookeeper 提供的現(xiàn)成(off-the-shelf)服務(wù)來(lái)實(shí)現(xiàn)分布式系

2、統(tǒng)的配置管理，組管理，Leader 選舉等功能 Zookeeper在Hadoop生態(tài)系統(tǒng)中 Zookeeper提供了什么簡(jiǎn)單的說(shuō) 每個(gè)子目錄項(xiàng)如 App1都被稱作為 znode，和文件系統(tǒng)一樣，我們能夠自由的增加、刪除znode，在一個(gè)znode下增加、刪除子znode，唯一的不同在于znode是可以存儲(chǔ)數(shù)據(jù)的。 有四種類(lèi)型的znode： 1、PERSISTENT-持久化目錄節(jié)點(diǎn) 客戶端與zookeeper斷開(kāi)連接后，該節(jié)點(diǎn)依舊存在 2、 PERSISTENT_SEQUENTIAL-持久化順序編號(hào)目錄節(jié)點(diǎn) 客戶端與zookeeper斷開(kāi)連接后，該節(jié)點(diǎn)依舊存在，只是Zookeeper給該節(jié)點(diǎn)名稱

3、進(jìn)行順序編號(hào) 3、EPHEMERAL-臨時(shí)目錄節(jié)點(diǎn) 客戶端與zookeeper斷開(kāi)連接后，該節(jié)點(diǎn)被刪除 4、EPHEMERAL_SEQUENTIAL-臨時(shí)順序編號(hào)目錄節(jié)點(diǎn) 客戶端與zookeeper斷開(kāi)連接后，該節(jié)點(diǎn)被刪除，只是Zookeeper給該節(jié)點(diǎn)名稱進(jìn)行順序編號(hào) 客戶端注冊(cè)監(jiān)聽(tīng)它關(guān)心的目錄節(jié)點(diǎn)，當(dāng)目錄節(jié)點(diǎn)發(fā)生變化（數(shù)據(jù)改變、被刪除、子目錄節(jié)點(diǎn)增加刪除）時(shí)，zookeeper會(huì)通知客戶端。 1、 命名服務(wù)這個(gè)最簡(jiǎn)單，在zookeeper的文件系統(tǒng)里創(chuàng)建一個(gè)目錄，即有唯一的path。在我們使用dubbo無(wú)法確定上游程序的部署機(jī)器時(shí)即可與下游程序約定好path，通過(guò)path即能互相探索發(fā)現(xiàn)，

4、不見(jiàn)不散了。2、 配置管理程序總是需要配置的，如果程序分散部署在多臺(tái)機(jī)器上，要逐個(gè)改變配置就變得困難。好吧，現(xiàn)在把這些配置全部放到zookeeper上去，保存在 Zookeeper的某個(gè)目錄節(jié)點(diǎn)中，然后所有相關(guān)應(yīng)用程序?qū)@個(gè)目錄節(jié)點(diǎn)進(jìn)行監(jiān)聽(tīng)，一旦配置信息發(fā)生變化，每個(gè)應(yīng)用程序就會(huì)收到 Zookeeper 的通知，然后從 Zookeeper 獲取新的配置信息應(yīng)用到系統(tǒng)中就好。3、 集群管理所謂集群管理在乎兩點(diǎn)：是否有機(jī)器退出和加入、選舉master。4、分布式鎖有了zookeeper的一致性文件系統(tǒng)，鎖的問(wèn)題變得容易。鎖服務(wù)可以分為兩類(lèi)，一個(gè)是保持獨(dú)占，另一個(gè)是控制時(shí)序。Zookeeper的應(yīng)用

5、 5、隊(duì)列管理兩種類(lèi)型的隊(duì)列：1、同步隊(duì)列，當(dāng)一個(gè)隊(duì)列的成員都聚齊時(shí)，這個(gè)隊(duì)列才可用，否則一直等待所有成員到達(dá)。2、隊(duì)列按照 FIFO 方式進(jìn)行入隊(duì)和出隊(duì)操作。第一類(lèi)，在約定目錄下創(chuàng)建臨時(shí)目錄節(jié)點(diǎn)，監(jiān)聽(tīng)節(jié)點(diǎn)數(shù)目是否是我們要求的數(shù)目。第二類(lèi)，和分布式鎖服務(wù)中的控制時(shí)序場(chǎng)景基本原理一致，入列有編號(hào)，出列按編號(hào)。 終于了解完我們能用zookeeper做什么了，可是作為一個(gè)程序員，我們總是想狂熱了解zookeeper是如何做到這一點(diǎn)的，單點(diǎn)維護(hù)一個(gè)文件系統(tǒng)沒(méi)有什么難度，可是如果是一個(gè)集群維護(hù)一個(gè)文件系統(tǒng)保持?jǐn)?shù)據(jù)的一致性就非常困難了。Zookeeper的應(yīng)用 Zookeeper的應(yīng)用-分布式鎖有了zoo

6、keeper的一致性文件系統(tǒng)，鎖的問(wèn)題變得容易。鎖服務(wù)可以分為兩類(lèi)，一個(gè)是保持獨(dú)占，另一個(gè)是控制時(shí)序。對(duì)于第一類(lèi)，我們將zookeeper上的一個(gè)znode看作是一把鎖，通過(guò)createznode的方式來(lái)實(shí)現(xiàn)。所有客戶端都去創(chuàng)建 /distribute_lock 節(jié)點(diǎn)，最終成功創(chuàng)建的那個(gè)客戶端也即擁有了這把鎖。廁所有言：來(lái)也沖沖，去也沖沖，用完刪除掉自己創(chuàng)建的distribute_lock 節(jié)點(diǎn)就釋放出鎖。-我把它叫做搶占式鎖對(duì)于第二類(lèi)， /distribute_lock 已經(jīng)預(yù)先存在，所有客戶端在它下面創(chuàng)建臨時(shí)順序編號(hào)目錄節(jié)點(diǎn)，和選master一樣，編號(hào)最小的獲得鎖，用完刪除，依次方便。-我把它叫做時(shí)序控制鎖