2023學(xué)年完整公開課版Ambari平臺

Ambari平臺2Ambari部署HadoopApacheAmbari平臺學(xué)習(xí)任務(wù)3ApacheAmbari平臺ApacheAmbari是一種基于Web

的工具，支持ApacheHadoop集群的供應(yīng)、管理和監(jiān)控。Ambari已支持大多數(shù)Hadoop組件，包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等。4ApacheAmbari平臺優(yōu)點(diǎn)Web安裝圖形界面操作便捷Hadoop家族組件支持全面社區(qū)資源比較豐富5ApacheAmbari平臺架構(gòu)Ambari框架是Server/Client模式。其中AmbariServer除了基本的用戶、組、集群信息管理之外，還提供了RestAPI，一部分是接受AmbariClient發(fā)送的心跳請求以及各種數(shù)據(jù)采集信息，一部分是監(jiān)控管理功能。通過RestAPI可以簡潔地操作Ambari。6ApacheAmbari平臺架構(gòu)Ambari框架是Server/Client模式。AmbariClient負(fù)責(zé)采集節(jié)點(diǎn)相關(guān)信息并且發(fā)送心跳信息給AmbariServer，同時(shí)還需要執(zhí)行來自AmbariServer的命令（諸如程序安裝和服務(wù)啟動(dòng)終止等）。7ApacheAmbari部署方法部署ambari-server和ambari-agent首先需要獲取Ambari的公共庫文件（publicrepository）使用yum命令安裝ambari-server軟件包使用ambari-serversetup命令對AmbariServer做一個(gè)簡單的配置使用ambari-serverstart來啟動(dòng)ambari8ApacheAmbari部署方法當(dāng)成功啟動(dòng)AmbariServer之后，便可以從瀏覽器登錄，默認(rèn)的端口為8080。如在瀏覽器的地址欄輸入http://ip地址:8080，登錄用戶名和密碼為admin/admin。

登入Ambari之后的頁面如下圖所示

9Ambari部署Hadoop登錄Ambari之后，點(diǎn)擊按鈕“LaunchInstallWizard”，就可以開始創(chuàng)建屬于自己的大數(shù)據(jù)平臺。第一步，命名集群的名字。第二步，選擇一個(gè)Stack，這個(gè)Stack相當(dāng)于一個(gè)Hadoop生態(tài)圈軟件的集合。Stack的版本越高，里面的軟件版本也就越高。我們可以選擇HDP2.2，里面的對應(yīng)的Hadoop版本為2.6.x。第三步，指定Agent機(jī)器（如果配置了域，必須包含完整域名），這些機(jī)器會被安裝Hadoop等軟件包。10Ambari部署Hadoop11Ambari部署Hadoop第四步，AmbariServer會自動(dòng)安裝AmbariAgent到剛才指定的機(jī)器列表。安裝完成后，Agent會向AmbariServer注冊。成功注冊后，就可以到下一步。第五步，需要選擇要安裝的軟件名稱?？梢赃x擇HDFS、YARN+MapReduce2、Zoopkeeper、Storm以及Spark。選的組件越多就會需要越多的機(jī)器內(nèi)存。選擇之后就可以繼續(xù)下一步了。這里需要注意某些Service是有依賴關(guān)系的。如果選擇了一個(gè)需要依賴其他Service的一個(gè)Service，Ambari會提醒安裝對應(yīng)依賴的Service。12Ambari部署Hadoop13Ambari部署Hadoop第六步和第七步，分別是選擇安裝軟件所指定的Master機(jī)器和Slave機(jī)器，以及Client機(jī)器。這里使用默認(rèn)選擇即可（真正在生產(chǎn)環(huán)境中，需要根據(jù)具體的機(jī)器配置選擇）第八步，就是Service的配置。絕大部分配置已經(jīng)有默認(rèn)值，不需要修改。對于初學(xué)者如果不需要進(jìn)行調(diào)優(yōu)是可以直接使用默認(rèn)配置的。有些Service會有一些必須的手工配置項(xiàng)，則必須手動(dòng)輸入，才可以下一步。14Ambari部署Hadoop第九步，Ambari會總結(jié)一個(gè)安裝列表，供用戶審閱。如果沒問題，就直接到下一步。第十步，Ambari會開始安裝選擇的Service到AmbariAgent的機(jī)器。這里可能需要等待一段時(shí)間，因?yàn)槎际窃诰€安裝。安裝完成之后，A