Cloudera大數(shù)據(jù)平臺環(huán)境搭建(CDH5.13.1)傻瓜式說明書

1、Cloudera大數(shù)據(jù)平臺環(huán)境搭建CDH 版版本vl.O作者郭維忠發(fā)布日期2022-03-10目錄Cloudera 大數(shù)據(jù)平臺環(huán)境搭建11.1.根底環(huán)境.4.1.1.軟件環(huán)境.4.1.2.配置規(guī)劃.4.1.3.所需要的軟件資源.4.1.4.修改機器名所有節(jié)點.6.設(shè)置防火墻所有節(jié)點配置免密碼登錄 SSH..關(guān)閉SELINUX所有節(jié)點8.1.8.修改 Linux 內(nèi)核參數(shù)所有節(jié)點.8.1.9.其他安裝與配置所有節(jié)點0.配置 NTP 效勞1.安裝 oracle JDK1.8 所有節(jié)點2.Mysql 安裝主節(jié)點1.3.2.安裝CM

2、.2.2.傳包，解包創(chuàng)立數(shù)據(jù)庫.2.3.創(chuàng)立用戶.制作本地 YUM 源.拷貝2.6.修改2.7.啟動jar 包 cloudera-scm-agent 配置 CM Server 和 Agent ...訪問CM.1.8.3.安裝CDH.3.2.登錄后界面 . 選擇 CM 版本.3.3.指定主機.選擇 CDH 版本..3.4.1. 出現(xiàn) “主機運行狀態(tài)不良 錯誤檢查主機正確性 ..3.6.選擇安裝的效勞.3.8.角色分配 . 數(shù)據(jù)庫設(shè)

3、置..1. 測試連接報錯：群集設(shè)置.3.10. 開始安裝3.11. 安裝完成1.1. 警告信息：2.94. 常見錯誤.. 初始化數(shù)據(jù)庫錯誤：3.14.2. 未能連接到 Host Monitor3.21. 根底環(huán)境1.1. 軟件環(huán)境本文將介紹 Centos7.4離線安裝CDH和Cloudera Manager過程，軟件版本如下:NO.軟件名稱版本1.操作系統(tǒng)Centos7.4 64 位2.JDKjdk-8u151-linux-x643.Clouder Manager4.CDH3.15.數(shù)據(jù)庫Mysql6.JDBCmysql

4、-connector-java-.jar1.2. 配置規(guī)劃本次安裝共5臺效勞器，效勞器配置及用途如下:NO.機器名稱內(nèi)網(wǎng)IP配置用途1.node1688C/32Gb/ 仃B主，CM, MysqlDB2.node16998C/32Gb/ 仃B從3.node170708C/32Gb/ 仃B從4.node171718C/32Gb/ 仃B從5.node172728C/32Gb/ 仃B從1.3. 所需要的軟件資源1) JDK環(huán)境：JDK版本：51jdk-8u151-li nux-x64.rpm下載地址：:/oracle2) CM 包：CM版本：3.1下載地址：3) CDH 包CDH 版本：5.13.1

5、,.shal ；下載地址：4) JDBC 連接 jar 包：jar包版本：.43,下載地址：1.4. 修改機器名所有節(jié)點1) 修改機器名稱# host namectl set-host name xxx/ 設(shè)置機器名#host name / 查看本機名這種方式，在 Centos7中可以永久性改變主機名稱。2) 每個節(jié)點機器，都要配置hosts# vi /etc/hosts內(nèi)容都改為: localhost / 建議保存此行68 node16869 node16970 node17071 n ode1

6、7172 node1721.5. 設(shè)置防火墻所有節(jié)點注：為了簡便，可以先關(guān)閉防所有節(jié)點火墻，安裝完成后，再按照下面步驟設(shè)置。 防火墻常用命令：# firewall-cmd-state查詢防火墻狀態(tài)#systemctl stop關(guān)閉防火墻#systemctl start開啟防火墻#systemctl disable禁止firewall開機啟動設(shè)置防火墻策略，在所有節(jié)點執(zhí)行下面腳本執(zhí)行前要啟動防火墻/集群機器間可以相互訪問firewall-cmd -permanent -add-rich-rule="rule family='ipv4' source

7、address='68' port protocol='tcp' port='0-65535' accept"firewall-cmd -permanent -add-rich-rule="rule family='ipv4' source address='69' port protocol='tcp' port='0-65535' accept"firewall-cmd -permanent -add-rich

8、-rule="rule family='ipv4' source address='70' port protocol='tcp' port='0-65535' accept"firewall-cmd -permanent -add-rich-rule="rule family='ipv4' source address='71' port protocol='tcp' port='0-65535'

9、 accept"firewall-cmd -permanent -add-rich-rule="rule family='ipv4' source address='72' port protocol='tcp' port='0-65535' accept"/設(shè)置可以訪問的端口firewall-cmd -perma nent -add-port=0-65535/tcpfirewall-cmd -reload注意：需要在所有的節(jié)點上執(zhí)行，因為涉及到的端口太多了，臨時開放所有端口是為了

10、安裝起來方便，安裝完畢后可以根據(jù)需要設(shè)置防火墻策略，保證集群平安。1.6. 配置免密碼登錄SSH將子節(jié)點設(shè)置為從主節(jié)點ssh無密碼登陸主節(jié)點訪問從節(jié)點需要無密碼互通，否那么后面會出現(xiàn)問題在主節(jié)點上執(zhí)行：#cd /進入到根目錄# ssh-keyge n -t rsa一路回車，生成無密碼的密鑰對。L rootnamenode homeJ# ssh-keygen -1 rsaG«iih r d tiny public/pi Ivdlu rsd key pair .Enter tile in which to save the key (/root/,ssh/id rsa):/1 out/

11、. Ssh/id r dlr tddy.Overwrite (y/n)? yErHer(empty for no pa&sphrci&el:Enter e幷id已 paphrase Again：Your idenrificaricn has been saved in /roor/.ssh/id rsa.Your public key has been saved ir /root/ssh/id rsa.pub. The key fIngerprlnt Is:0ib4:4d:31iGa:8d:13 t 02:cS:eS:69:了9:3d:72:2&:43 r outQn

12、amenode The key's ranrJ&fflart imsge Is：* * * f RSA 2Q48o= =p= S QQ O*,OO BM把公鑰拷貝至node169效勞器上：# scp /root/.ssh/id_rsa.pub rootnode169:/ 輸入 node169 機器上 root 用戶密碼拷備成功登錄到node169 效勞器上：然后在node169效勞器上，把公鑰的內(nèi)容追加到authorized_keys文件末尾這個文件也在隱藏文件夾.ssh下，如果沒有可以新建：# cat id_rsa.pub >> /.ssh/authorized_

13、keys如果提示下面信息，那么需要創(chuàng)立./ssh目錄：-bash: /root/.ssh/authorized_keys: No such file or directory/創(chuàng)立/.ssh目錄，再追加公鑰內(nèi)容# mkdir /.ssh# cat id rsa.pub >> /.ssh/authorized keys并設(shè)置authorized_keys的訪問權(quán)限：# chmod 600 /.ssh/authorized keys測試：在node168點上執(zhí)行ssh node169，正常情況下，不需要密碼就能直接登陸進去了。在node168節(jié)點出現(xiàn)下面表示成功登錄node169節(jié)點：

14、roDt®nodG168 # ssh nodel69Last login: Thu Mar 22 0?:39: 52 201S from 172.16. 5.168Eroot®nodel9 # 以同樣的方式將 公鑰拷貝至其他節(jié)點效勞器上1.7. 關(guān)閉SELINUX所有節(jié)點關(guān)閉linux SELINUX平安內(nèi)核# sete nforce 0臨時生效修改 /etc/selinux/config 下的 SELINUX=disabled重啟后永久生效# vi /etc/seli nux/config內(nèi)容增加:SELINUX=disabled重啟后生效:# reboot查看SELIN

15、UX是否關(guān)閉:#sestatus在Centos7中遇到SELINUX無法關(guān)閉的問題，重新啟動機器恢復正常1.8. 修改Linux內(nèi)核參數(shù)所有節(jié)點為防止安裝過程中出現(xiàn)的異常問題，首先調(diào)整Linux內(nèi)核參數(shù)。1) 設(shè)置swappiness ，控制換出運行時內(nèi)存的相對權(quán)重，Cloudera 建議將swappiness 設(shè)置為10 :/ 查看 swapp in ess# cat /proc/sys/vm/swapp in ess/永久性修改，執(zhí)行下面兩條命令# sysctl -w =10# echo = 10 >> /etc/2) 關(guān)閉透明大頁面: 自Cen tOS6版本開始引入了 Tra

16、n spare nt Huge Pages(THP)，從Cen tOS7版本開始，該特性默認就THP，否那么可會啟用。盡管THP的本意是為提升內(nèi)存的性能，不過某些數(shù)據(jù)庫廠商還是建議直接關(guān)閉能會導致性能出現(xiàn)下降。首先查看透明大頁是否啟用，always never表示已啟用，always never表示已禁用:# cat /sys/ker nel/mm/tra nspare nt_hugepage/defrag always madvise n ever# cat /sys/ker nel/mm/tra nspare nt_hugepage/e nabled always madvise n ev

17、er以上狀態(tài)就說明是啟用的。臨時關(guān)閉重啟機器會變回默認開啟狀態(tài)：# echo n ever > /sys/ker nel/mm/tra nspare nt_hugepage/defrag#echo n ever > /sys/ker nel/mm/tra nspare nt hugepage/e nabled永久關(guān)閉:/ 編輯 /etc/# vi /etc/在文件后添加下面內(nèi)容：if test -f /sys/ker nel/mm/tra nspare nt_hugepage/e nabled; the n echo n ever > /sys/ker nel/mm/tra

18、nspare nt_hugepage/e nabled fiif test -f /sys/ker nel/mm/tra nspare nt_hugepage/defrag; the n echo n ever > /sys/ker nel/mm/tra nspare nt_hugepage/defrag fi保存退出，然后賦予文件執(zhí)行權(quán)限:#chmod +x /etc/重啟系統(tǒng)，以后再檢查 THP狀態(tài)，顯示狀態(tài)被禁用了。rootBriedel66sys/kernel/mm/transparent.hugepage 'cef agalwa/5 madvl se CneverJro

19、ot*ftnode!68 yXff cLiTsys/kar rel/iwH/ttanspar £nt_h'jgepage/enabled madvi seGneyeQOroot©nodel66| '3修改文件句柄數(shù)：修改系統(tǒng)文件句柄數(shù)限制：/查看文件句柄數(shù)，顯示 1024，顯然太小# ulimit -n1024/修改限制#vi /etc/security/在文件后參加下面內(nèi)容:* soft nofile 100000* hard nofile 100000修改后需要重啟機器。1.9. 其他安裝與配置所有節(jié)點為防止安裝過程中出現(xiàn)異常問題，安裝相關(guān)依賴包：# y

20、um -y install psmisc MySQL-python at bc bind-libs bind-utils cups-client cups-libs cyrus-sasl-gssapi cyrus-sasl-plain ed fuse fuse-libsd d-tools keyutils-libs-devel krb5-devel libcom_err-devel libselinux-devel libsepol-devel libverto-devel mailcap noarch mailx mod_ssl openssl-devel pcre-devel postgr

21、esql-libs python-psycopg2 redhat-lsb-core redhat-lsb-submod-securityx86_64 spax time zlib-devel#yum install -y python-lxml#yum install krb5-devel cyrus-sasl-gssapi cyrus-sasl-deve libxml2-devel libxslt-devel mysql mysql-devel openldap-devel python-devel python- simplejson sqlite-devel# chmod +x /etc

22、/# yum -y install rpcbind# systemctl start rpcbind# echo "systemctl start rpcbind" >> /etc/1.10. 配置NTP效勞具體建設(shè)過程如下:集群中所有主機必須保持時間同步，如果時間相差較大會引起各種問題。所有節(jié)點安裝相關(guān)組件:# yum in stall ntp n tpdate -yNTP效勞端主節(jié)點1查找時間同步效勞器翻開網(wǎng)址，內(nèi)容如下：:/Asia To use this specific pool zone, dd the following tc your ntp.c

23、onf file:searvBT Ck as jia pg. TTtp, <xrgser zer 1_ as la. pol- ntp. -corgs erveT 丸 as la 口g_L t了tp, cars匸ST*戸JF H ZuJlN戸ool亠 d|p, CCFg2)編輯 /etc/ :# vi /etc/在文件中輸入上面網(wǎng)頁內(nèi)容:3) 啟動ntp效勞:# systemctl startn tpd4) 配置開機啟動：# systemctl enable ntpd.service注意：如果ntpd開機啟動失效，有可能是因為安裝了chronyd并且是開機自啟狀態(tài)，所以導致ntpd開機自

24、啟失敗。#查看chronyd 設(shè)置狀態(tài)# systemctl status chronyd顯示如下:rootiLnodlelft -# systmct 1 status ch-onyd -初11注斗. MT.冒刖 / | Loaded： loaded (, usr/lUb/s；r sysriSBdjEiysierii 匚hranjd.$-ertice enaiiledt vendor preset eruJbled) jDocs: rwn;c!TrDrTycl(aJruri B clr Drrya srrf C5)"F E iec si art pit*/us r* /"1

25、1 |w h«c /c-hnwtv- Iwi per 岬諄鼻 TE-clwi 的 (ctidfrfiliiedi. st ar i-/success 如吐嗆聒(code-eiitedr statu-fl55)process Process;Expc5itart-/u3r1'f5biin chrcxTydMain AID：J Mcoraiip:F (chriFmytf)t &y-sreTL alice/chfcnyd. service >/J? /ui-r/fibm/cibriMdl22 ?- z->-? Z2 2:= rMI2'%l ErM F 2

26、2'? t Il larerbf-事£汨 ii：43:2z 11弭紀MU：4?1141229li ；4d: i) llraaiaiH如111:4S:39U；4«；49 HO迪M丄陽 mdetQ9 TOelO? nocael9 nodelfi eMl.皿 nodel&Q g血丄內(nèi) nodeilG727 ; 3nl«B c.lw± htkj by -2B751. WM73 加euirid斗 «l1uUerit 靜WrLed 7?71: sjsreB cltkEk Mas- srrpyrdl by -lUU.tiOMT sKorias

27、.：F2叮：«l«ted souft® 站IJLLg.IzO727t source ,60, lie. 12 repU«S wlcli 3727 77了j= Csri't ptnchroni*®- miqufc«>27 t selected source 凹.?3'.64. ZO72Tj + cjun'c iwnchriit： 燉scibc«727: >17； S41«CtHl tOUrcfl 20iai3. ie4.17S以面說明，chronyd顯示為開機

28、啟動狀態(tài)。將chronyd設(shè)為禁用狀態(tài):# systemctl disable 此時，NTP的效勞開機自啟動完成!5) 檢查是否設(shè)置成功:# ntpq -p/更新時間#timedatectlNTP客戶端所有從節(jié)點：6) 遠程客戶端時間同步測試# date# ntpdate是NTP效勞端IP，顯示如下信息，測試成功：raot®nodel72 -# djtc -Thu22 16:44;0O CT £01SLroocnodei/2 nrpdate 172, lfcT lfcK22 Mar 1 :44 :25 ntpdatc1152 : adjust time server 172

29、16. 3.16S off tet 3* 001692 see root(?-noclel72 # |7) 客戶端設(shè)置方案任務，每30分鐘同步時間#cro ntab -e/參加內(nèi)容：0-59/30 * * * * /usr/sb in/n tpdate 172.163168 && /sbi n/hwclock -w8) 設(shè)置定時任務開機啟動/設(shè)置開機啟動# systemctl en able/查看狀態(tài)# systemctl status crond1.11. 安裝 oracle JDK1.8 所有節(jié)點下載 rpm 安裝包 jdk-8u151-linux-x64.rpmCen t

30、OS系統(tǒng)一般自帶 Ope nJdk，需要卸載掉自帶的 Ope nJdk，使用# rpm -qa | grep java查詢java相關(guān)的包，使用# rpm -e - no dep包 名強制卸載掉，下面安裝oralce JDK# rpm -ivh jdk-8u151配置JAVA_HOME環(huán)境變量:修改/etc/profile文件配置環(huán)境變量，執(zhí)行命令:# vi /etc/profile在profile文件最后，輸入下面內(nèi)容，保存并退出。export JAVA_HOME=/usrexport PATH=$PATH:$JAVA_HOME/bin執(zhí)行下面命令，讓配置生效# source /etc/pr

31、ofile/使修改立即生效# echo $PATH / 查看 PATH 值# echo $JAVA_HOME / 查看 JAVA_HOME 值在Centos7中修改/etc/profile文件配置環(huán)境變量，機器啟動后有時不生效，可以修改/etc/ bashrc文件配置環(huán)境變量:# vi /etc / bashrc/在文件最后參加：export JAVA_HOME=/usrexport PATH=$PATH:$JAVA_HOME/bin/使修改立即生效# source /etc/bashrc/ 查看 JAVA_HOME 值# echo $JAVA_HOME1.12.Mysql安裝主節(jié)點到官網(wǎng)/d

32、ow nloads/file/?id=469456選擇對應安裝包:1) 下載安裝包#wget2) 解壓安裝包# tar -xvf/解壓后文件列表：3) 按次序安裝按 com mon olibs ->client ->server 的順序安裝:# rpm -ivh# rpm -ivh# rpm -ivh# rpm -ivh# rpm -ivh/安裝下面包，否那么Hue安裝報連接錯誤# rpm -ivh4) 啟動數(shù)據(jù)庫# systemctl start mysqld查看狀態(tài)：# systemctl status mysqld5) 修改MySQL初始密碼1、 先修改配置文件/etc/my

33、 f令MySQL跳過登錄時的權(quán)限檢驗，在mysqld下參加一行：skip-grant-tables2、重啟 MySQL#service mysqld restart3、免密碼登錄MySQLo#mysql4、 mysql客戶端執(zhí)行如下命令，修改 root密碼mysql> use mysql;mysql> UPDATE user SET authentication_string = password('your-password') WHERE host = 'localhost' AND user = 'root'mysql>

34、select host,user, authentication_string, password_expired from user;mysql> update user set password_expired='N' where password_expired='Y' /密碼不過期mysql> update user set host='%' where user='root' and host='localhost： /遠程可訪問mysql> flush privileges; / 刷新mysq

35、l> exit;/ 退出5、修改配置文件/etc/my f刪除此前新增那一行skip-grant-tables，并重啟MySQL這一步非常重要，不執(zhí)行可能導致嚴 重的平安問題#service mysqld restart / 重啟 Mysql2. 安裝CM2.1. 傳包，解包在主節(jié)點上下載相關(guān)軟件包，這里將軟件包下載到/data/ cdh/目錄下。#cd /data/cdh下載 Mysql JDBC 包:#wget下載CM：#wget/cm5/cm/下載CDH：#wget#wget#wget.sha1將CM解壓到/opt/目錄:# tar -zxvf -C /opt/# ls /opt/

36、cloudera cm2.2. 創(chuàng)立數(shù)據(jù)庫在主節(jié)點上:# mysql -h -uroot -p /加參數(shù)指定本機方式，否那么可能不允許執(zhí)行g(shù)rantEnter password:輸入數(shù)據(jù)庫密碼/在MariaDB (none)>命令狀態(tài)輸入下面腳本：create database hive DEFAULT CHARSET utf8 COLLATE utf8_general_ci;create database amon DEFAULT CHARSET utf8 COLLATE utf8_general_ci;create database hue DEFAULT CHAR

37、SET utf8 COLLATE utf8_general_ci;create database monitor DEFAULT CHARSET utf8 COLLATE utf8_general_ci; create database oozie DEFAULT CHARSET utf8 COLLATE utf8_general_ci; grant all privileges on *.* to rootlocalhost identified by 'root' with grant option; grant all on *.* to root"%"

38、; Identified by "root"flush privileges;exit;/ 復制 Mysql JDBC包到 /opt/cm-/share/cmf/lib/目錄#cp /opt/cm-/share/cmf/lib/初始化CM,執(zhí)行下面腳本# mysql cm -hnode168 -uroot -proot -scm-host node168 scm scm scm/如果岀現(xiàn)下面錯誤：:Access denied for user 'root''localhost' (using password: YES)/解決方法：在/etc

39、/hosts 文件中，加上 168主節(jié)點/etc/hosts 內(nèi)容:nodeLGS nodel70 nodeL71 nodel7?(J27. O, 1163172.16. 3. 16S 172.16. 1.160 丄72.16. 3.170 172.16占.1了) 172,16干.172腳本執(zhí)行成功界面:潔耶T CirfRf f lflfcXJW#W.VFidMiSg <ldUr <jm_iql- Idtot-or I-rtr . rUH 11 Etap1 gpulml. itn ima drlar i l*u l>j. Jdc.ar1-rtr fHiIw

40、帕 MtiMMfcjiliy rhii th* in Mri 'MMiilwT u* 11«*! "ir 23 1" D? 26 ctt Jin w tiT-abnflihi*! anr"Il*whc sv-'-ip -e 1*a*cicyIs me 尺 nt卸*<n|S. t 2S-" £4-ssil ddtsw1-E<U tpi* Ittn'8 ifC- TF甫fHiiLI耳CK i#ln| ML Tht w«r8If 1<4l«> Wl 1. 'fllr

41、f'iE4 fi#lIC.Pl1 flMihlt HL ftflllmi wrtHItHtvr* ttr a ar vw cnfci b iuc-aCr w<! iq X*1 ki» Itf-r"治 I i£-仏 囁 «U曲rfr葉和 <ii.M44r j. E no 列小 U5+*-1! I r ：>-弘：£'： b n | 猝卡-匸I Lf l - - !> |l= -I- - lr < I ! ? - :I fl-c . rl | ' » - J >- T *f - &

42、#187;«-«1 ； - '«. 九止TT I -*1f 丁 IfW.FIk嚴fPFirfr * IT Rflr IM trfli存區(qū) .ft».aaiinq e."1b» !cMLM*ql.JeIbe- Dr rnr 1 Thia-la thfr BuBtL.Ttw naa dr Inr e.1 na*!» ' emb. faql .£ lc. Er*! w1.THa *lnr bs :ttwt iuIIm rHq*l»tHr«d viia that SM"luad

43、'dnq -ciF tfai"4vIVTId LlJ J7 E-CT 'ilt 右M* B-STifSB.f1< 齊K整亡W呵 q £i ih*y?i：r 5- 4 JV- 3專t t+ >- F4v4：«vf£ 5!L<1( «|IM Ipr.'t set 0$ cWll-iKe *(* tkiiilnvnMml th? %材 1巧就時即 h Ml tv SAW, *敘t-fe en>liiiily tii-riple -ML bvTntfrA 十b iv.*«ir ewtItieje

44、iV uBriTi-EJH"td«i.：4 | 43«J3 1'J?3 eJ!7uU*審誼，如I：門“ MpGkK h利整創(chuàng)J II O1M .5T* 二“:西丄舊 i "HH馭亍“ CWFiCt ly Ir i>ic(ni4Mir C<fr5i4.Jiiri* |2.3. 創(chuàng)立用戶在所有節(jié)點上執(zhí)行:# useradd -system -home=/opt/cm-/run/cloudera-scm-server-shell=/bin/false -comment "Cloudera SCM User" cloude

45、ra-scm2.4. 制作本地YUM源在主節(jié)點上：/進入軟件包目錄#cd /data/cdh/ 拷貝三個文件至U /opt/cloudera/parcel-repo/ 目錄#cp CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1 /opt/cloudera/parcel-repo/ 進入 /opt/cloudera/parcel-repo/ 目錄#cd /opt/cloudera/parcel-repo/修改文件名此時 /opt/cloudera/parcel-repo/ 目錄下

46、文件:parcel-repo# 11total 1888980rw-r-r- 1 rootroot 1934231261 Mar-rw-r-r一一 1 root root -rw-rr 1 root root41 Niar73766roor®nodelS8 parcel-rapd# |27 17: 匚DH-5+13+1-1+ cdh5. LJ.l. p0+ 2-eV. parcel27 17;34 匚DH-5.13.1-1. cdhs, 15.1. p<, 2-el7. parcel, sha27 17 :34 manifest, json2.5. 拷貝jar包在所有節(jié)點上：/

47、如果沒有/usr/share/java/ 目錄，那么創(chuàng)立# cp /usr在主節(jié)點上：/ 將 mysql JDBC jar 包拷貝到/opt/cm-/share/cmf/lib/ 目錄#cp /opt/cm-/share/cmf/lib/2.6. 修改 cloudera-scm-agent 配置在主節(jié)點上，修改 /opt/cm-/etc/cloudera-scm 文件:/ 將 config.ini server_host=localhost 內(nèi)容改為 server_host# sed -i "s/server_host=localhost/server_host=

48、68/" /opt/cm-/etc/cloudera-scm在主節(jié)點上：/將cm-打包，并復制到其他節(jié)點#cd /opt#tar czf cm-.tar.gz cm-/復制到其他節(jié)點#scp cm-.tar.gz node169:/opt/#scp cm-.tar.gz node170:/opt/#scp cm-.tar.gz node171:/opt/#scp cm-.tar.gz node172:/opt/在所有從節(jié)點上解壓：/將cm-包解壓#cd opt#tar -xzvf cm-/解壓后刪除#rm -rf cm-2.7. 啟動 CM Server 和 Age nt在主節(jié)點上，

49、啟動 cloudera-scm-server :# /opt/cm-/etc/cloudera-scm-server start啟動過程較慢，可通過 /opt/cm-/log/cloudera-scm-server日志，查看啟動過程。在所有節(jié)點上，啟動cloudera-scm-agent :# /opt/cm-/etc/cloudera-scm-age nt start2.8. 訪問CM地址：:/主節(jié)點IP:7180用戶名、密碼：admincloudera manager牡區(qū)&壇廿欣國3. 安裝CDH3.1. 登錄后界面接受協(xié)議：32 選擇CM版本本文檔選擇Cloudera Expre

50、ss免費版。ZK連使用ManfigfirF胡：tkw4» tilm*Vt»fT*WHUTI|fFVW«SfV Nttlnp MHlW*Cloudera tfiKsrpriw KMVCl04u4raEftMtprtt»即頃E獨j!ztfMW2S KFAKtIMfAi«tmu甜盲WPIZW頁占Wjfera BrBmr* ur菲中l(wèi)耳 Fin E(jwn + CJoirlTW Ettt->KFMAN祕twtflHtftMCDH£Dkud*mmF*Cloudlr*Clcudpa Nwigalsi 4ry TrusEMCloudn 畫岡i

51、M*4 Clamii grw M CfaiMW?書巾榜謝您遠揮ClOUdera ManaMr和CDH審H HZRd H 毎 H rMg J! lh-t 1CJ-rftr M M .hir- 5芳丘畫區(qū)-刊是W-fcZ* SI *sn HW* . (?«；*，:日 u.,，嚴 EM-.T*t« |*w*»*i 1hF tfe Fh+w fl* I lil" 珂1 - 注* “miq戸 H呵卍*<nF 用 S 1蔭町巾-riz甲m* «* &MWtW 0h4U嶗 S|ff«ilftfe 官"Su;p-|Hd DuU

52、iAMGTJOP3.3.指定主機在搜索主機名和IP地址框輸入node169-172，這里輸入的內(nèi)容支持正那么表達式。輸入后點【搜索】按鈕，出現(xiàn)機器列表:選擇“當前管理的主機“選擇項卡，點【繼續(xù)】<1HM* *I «MWlMtt tM世冉*印SJI"* KIIM Ml ii<|i*,llL-> 0iulnrli Im'iMbiJtu FEjL4-.I碎K<*JKO "EETlHt.W力楓巒ptta" T1I7LL4J.171QHk"# 丘UdKMqE*TJ1 Mi l IT1JHtmTAWtErWEIAN-134

53、選擇CDH版本這里需要選擇制作本地源時的版本，如果選擇別的版本的就會去官網(wǎng)下載，那樣安裝速度會很慢。W«帕 耐叭 p平j代測nfl , H齊if 一菁口:切I It亡晌卄* 時 舉 AW 呻上即I口我|i£jUi> I 停殲*!¥!»=*< ILtarafc 井S上點悼二 血曠 產(chǎn)言忘曰陽口XMi 1I T I.M i K a 8 'dKirPA -J E !>1 鼻 0 3 4 .軸oao點【繼續(xù)】按鈕，進入安裝界面。3.4.1. 出現(xiàn)“主機運行狀態(tài)不良錯誤AHru* !». ij AT-PWw* |l .rw CM

54、 5 fe?i I jUE亠 *! -<* 3FjS -*QQO遇到節(jié)點“主機運行狀態(tài)不良的提示，解決方法是刪除故障節(jié)點Age nt效勞cm_guid文件:#rm -rfcloudera-scm-age nt/cm guid重新啟動故障節(jié)點 Age nt效勞：etc/cloudera-scm-age nt restart重啟故障節(jié)點Age nt效勞后，故障消失:注：出現(xiàn)故障原因是，因為我之前在故障節(jié)點啟動過cloudera-scm-age nt效勞3.5. 檢查主機正確性確保全部驗證通過。蘇鎮(zhèn)安裝<E sVUzffiT.* PHElMlif了才IO/«.fK3da 氓!W気* B=«i±tilK iXWifl 1 尢1CT M 1./«xZZ?frfUifflZtlSKL* 蘭忖懿硝i* 中amir.* MnxntWMXEjrr.* f ±VVE iTfflf >Wl.W>itwWd4ll *v顒* 頭&THm用ISErh >!事齊td mH葉抵* 19CCH4 ( feSIUEEM 爐 br."HlvHEtfliTFtfanlAF 阪*mvnn*.* fee*DtauaaiibhnqflrrHni i ! IE * -HSftpiAAJOB3.6. 選擇安裝的效勞本文選擇