8.4流數(shù)據(jù)采集框架Kafka_第1頁
8.4流數(shù)據(jù)采集框架Kafka_第2頁
8.4流數(shù)據(jù)采集框架Kafka_第3頁
8.4流數(shù)據(jù)采集框架Kafka_第4頁
8.4流數(shù)據(jù)采集框架Kafka_第5頁
已閱讀5頁，還剩2頁未讀， 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明：本文檔由用戶提供并上傳，收益歸屬內(nèi)容提供方，若內(nèi)容存在侵權(quán)，請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

流數(shù)據(jù)采集框架Kafka流數(shù)據(jù)采集框架KafkaKafka是一個(gè)分區(qū)的、多副本的、多訂閱者的、基于ZooKeeper協(xié)調(diào)的分布式日志系統(tǒng)（也可以被當(dāng)作消息隊(duì)列-MQ系統(tǒng)）。Kafka可以用于高吞吐量的Web網(wǎng)站的瀏覽、搜索、單擊等行為日志的收集處理，包括搜索日志、監(jiān)控日志、訪問日志和消息服務(wù)等。流數(shù)據(jù)采集框架Kafka基于Kafka消息隊(duì)列的日志收集和處理系統(tǒng)基于Kafka消息隊(duì)列的日志收集和處理系統(tǒng)流數(shù)據(jù)采集框架KafkaKafka是一種高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)，可以被視作?個(gè)消息隊(duì)列。Kafka架構(gòu)Kafka架構(gòu)Kafka在保存消息時(shí)會根據(jù)Topic進(jìn)行歸類，將消息發(fā)送者稱為Producer，將消息接收者稱為Consumer。Kafka集群由多個(gè)Kafka實(shí)例組成，每個(gè)實(shí)例（server）都被稱為Broker。無論是Kafka集群還是Producer和Consumer都依賴于ZooKeeper來保證系統(tǒng)可用性。Kafka架構(gòu)Producer使用push模式將消息發(fā)布到Broker中，Consumer使用pull模式從Broker中訂閱并消費(fèi)消息。Kafka支持消息持久化，消費(fèi)狀態(tài)和訂閱關(guān)系由客戶端負(fù)責(zé)維

溫馨提示

  • 1. 本站所有資源如無特殊說明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽，若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間，僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理，對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯，并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容，請與我們聯(lián)系，我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論