浪潮云海云數(shù)據(jù)中心操作系統(tǒng)v3.系統(tǒng)快速部署指南

1、南Cathy-系統(tǒng)快速部署指南 V1.0(外傳)編寫：日期：2013-08-02檢查：日期：審核：日期：批準：日期：系統(tǒng)部文檔版本A1密級商密 A項目來源南文檔變更Inspur (Beijing) Electronic Information Industry Co.,.序號變更（+/-）說明作者版本號日期批準1初稿（Cathy_系統(tǒng)快速部署指南V1.5_20130704.doc）V1.02013-03-052添加 iVirtual 的相關內容V1.02013-08-023添加重啟云海后部分服務無法啟動的解決方法及部分注意事項V1.02013-11-11南目錄1.前言.1.3.

2、背景4適用范圍4術語表42.系統(tǒng)環(huán)境5物理拓撲5環(huán)境配置6系統(tǒng)部署103.1. vCenter..5.配置11部署 Cathy 環(huán)境11系統(tǒng)使用的注意事項19卸載 Cathy 環(huán)境19南1. 前言1.1. 背景本文檔是的簡要系統(tǒng)部署配置說明書，依據(jù)此說明書，可以完成 Cathy 系統(tǒng)正常運行所依賴的基本環(huán)境。本文檔基于Cathy 系統(tǒng)快速部署指南而來。1.2. 適用范圍本文檔適用于設計、開發(fā)、測試以及系統(tǒng)實施等。1.3. 術語表序號術語說明性定義vCenterVMware 的，本文檔中通常簡寫為 VC。Cluster若干 ESX 物理主機的集合（主機上掛載）。i

3、Virtual浪潮自己的虛擬機管理南2. 系統(tǒng)環(huán)境2.1. 物理拓撲2.1.1. 簡單拓撲（單網環(huán)境）openAM服務iWorkflow服務iResource服務iManage服務iMonitor服務iCharge服務VNC控制臺iAuth服務iBase服務FTP數(shù)據(jù)主控節(jié)點vCenter/iVirtual 計算節(jié)點計算節(jié)點ICM服務ISM服務系統(tǒng)管理員組織圖 2.1.1）1- 主控節(jié)點各服務集中式部署2.1.2. 復雜拓撲（雙網1、典型部署 控制中心各服務集中式部署南openAM服務iWorkflow服務iResource服務iManage服務iMonitor服務iCharge服務vCent

4、er/iVirtual計算節(jié)點系統(tǒng)管理員iAuth服務iBase服務FTP數(shù)據(jù)主控節(jié)點ICM服務控制網VNC控制臺組織圖 2.1.2-1）2- 主控節(jié)點各服務分布式部署2.1.3. 復雜拓撲（雙網在資源較充足的情況下，控制中心各服務可以采用分布式部署方式，即，各服務分別部署到一臺物理機或虛擬機上，以減輕控制中心的壓力。2.2. 環(huán)境配置2.2.1. vCenter/iVirtual 及計算節(jié)點1、vCenter/Esxi 當前支持版本為 5.0 或 5.1ISM服務業(yè)務網南2.2.2. 主控節(jié)點主控節(jié)點可以部署在物理機器上，也可以是一臺虛擬機。虛擬機方式。表 2.2.1-12.2.3. ISM

5、 節(jié)點對于單網環(huán)境下，ISM 同主控節(jié)點一樣，可以是物理服務器，也可以是虛擬機（擬機方式）；虛在雙網環(huán)境下，ISM 應部署于物理服務器上，以保證雙網；對于物理服務器配置要求如下：ISM 節(jié)點詳細說明服務器硬件處理器隨部署拓撲決定，至少 4 核網卡至少 2 塊網卡硬盤無要求內存隨部署拓撲決定，至少 4G 內存網絡控制網、業(yè)務網操作系統(tǒng)Linux 系統(tǒng)，建議：CentOS 6.0 X86_64裝系統(tǒng)時，需要安裝以下包：JAVA 相關包；GCC、G+；xinetd 包；主控節(jié)點配置詳細說明硬件配置處理器隨部署拓撲決定，至少 4 核網卡至少 2 塊網卡硬盤無要求內存隨部署拓撲決定，至少 4G 內存網絡

6、控制網操作系統(tǒng)1、 Linux 系統(tǒng)，建議： CentOS 6.0 X86_642、 裝系統(tǒng)時，需要安裝以下包：JAVA 相關包；GCC、G+；xinetd 包；ssh 服務器/devel 包；ipmitool 包；snmp 包httpd 服務其他1、開放以下端口：22、8080、623、3306、80、21、8000 等；南表 2.2.2-12.2.4. FTP 數(shù)據(jù)用于存放 FTP 數(shù)據(jù)文件和配置文件用。該該是 NFS 類型的，可以通過物理服務器或虛擬機搭建而成。與主控節(jié)點和 ISM 節(jié)點之間的關系為：1、 對于簡單拓撲NFS（/usr/local/proftpd）主控/ISM節(jié)點FTP數(shù)

7、據(jù)圖 2.2.3-12、 對于復雜拓撲 1NFS（/ sr/local/proftpd）主控節(jié)點FTP數(shù)據(jù)NFS（ usr/local/proftpd）ISM節(jié)點圖 2.2.3-23、 對于復雜拓撲 2ssh 包；南NFS（/ sr/local/proftpd）云資源節(jié)點FTP數(shù)據(jù)NFS（ usr/local/proftpd）ISM節(jié)點圖 2.2.3-32.2.5. VNC 控制臺VNC 控制臺，可以單獨部署于一臺節(jié)點，也可以部署于 ISM 節(jié)點上。它的作用就是在雙網環(huán)境下完成 VNC 控制臺轉發(fā)、信道加密功能。其基本原理就是通過 SSH 服務實現(xiàn)信道加密傳輸、數(shù)據(jù)包轉發(fā)。因此，部署時，只需要

8、相應節(jié)點開始 SSH 服務即可。其具體配置要求為：VNC 控制臺節(jié)點詳細說明服務器硬件（或虛擬機）處理器無要求網卡至少 2 塊網卡硬盤無要求內存無要求網絡控制網、業(yè)務網操作系統(tǒng)Linux 系統(tǒng)，建議：CentOS 6.0 X86_64裝系統(tǒng)時。需要安裝SSH服務器和相關devel包；需要開放相關端口；南3. 系統(tǒng)部署3.1. vCenter1、2、3、4、5、在虛擬機上安裝 Windows 2008 操作系統(tǒng)（默認用戶名：administrator設置網絡配置：IP、網關、子網掩碼、DNS 等；：123456a?）；在虛擬機中安裝 vCenter；安裝 vCenter 成功后，使用 VMwar

9、e vSphere C nt 客戶端，在 vCenter 中新建數(shù)據(jù)中心；在數(shù)據(jù)中心中新建群集（對應 VCD 中的資源池），打開 vSphere DRS 功能，其它默認：6、在“主機和群集”視圖，為群集添加主機，根據(jù)具體環(huán)境要求，可以靈活配置群集下主機的數(shù)量。配置完成后，結果如下圖：南3.2.配置1、 對于對 HA 要求高的客戶，希望把虛擬機文件全部存放在共享需要做如下配置：而非本地中，就如下圖，在“主機和群集”視圖，點擊左側主機（如“21”），選擇右側的“配置”，單擊“器”“刪除”，將不需要的本地刪除。3.3. 部署 Cathy 環(huán)境3.3.1. 適用于簡單拓撲的部署方式在簡單拓撲結構下，主

10、控節(jié)點、ISM 節(jié)點及 VNC 控制臺節(jié)點是部署在同一臺機器上的。. 虛擬機模板部署方式會提供一個 VMWare/iVirtual ovf 格式的虛擬機模板文件。然后，直接在某一vCenter/iVirtual 上直接導入此模板即可。具體步驟為：1、 在 vCenter 中導入 Inspur_cathy_controlcenter_ism_deploy_v1.0.ovf 模板；2、 將事先搭建好的FTP 數(shù)據(jù)目錄下，使用的掛載命令為：NFS）掛載到主控/ISM 節(jié)點上的/usr/local/proftpd南mount t nfs 00:/mnt/stor /usr/local/proftpd

11、o nolock并將該命令寫入配置文件/etc/rc.local3、 做以下配置文件修改操作，主要涉及 iauth 服務以及 iresource 服務：1）、對于 iresource 服務修改/etc/hosts 文件，將上面的 NFS【EX】：00進信息加入進去；nfs-200入/opt/cathy_installer_make_envirement/cathy/modules/iresource/tools/proftpd 目錄下執(zhí)行其中的安裝【命令】：，完成 FTP 服務器的安裝./install.sh 1在/usr/local/proftpd 目錄下，建立一個 systemvm 目錄；

12、【命令】：mkdir p /usr/local/proftpd/systemvm將系統(tǒng)虛擬機文件目錄 vRouter 上傳進創(chuàng)建好的 systemvm 目錄下；入/usr/local/apache-tomcat-6.0.29/webapps/iresource/WEB-INF/classes 目錄下，修改配置文件 incloudCperties:修改 ftpStore 字【EX】：為上面搭建的 NFS 服務器地址；# ftp 數(shù)據(jù)ftpStore =修改 sshHost 字【EX】：配置:NFS/nfs ip/nfs po NFS/00/mnt/stor為主控節(jié)點的 IPsshHost = 2

13、修改 sshUser、sshPassword 字段為主控節(jié)點的 root 用戶名和其他字段默認即可；2）、對于 iauth 服務進 入 /usr/local/apache-tomcat-6.0.29/webapps/iauth/WEB-INF/classes目錄下，修改配置文件 incloudCperties 中的 opemamurl 地址字段。南. 安裝包部署方式1、 主控/ISM 節(jié)點配置要求：2、 安裝前的配置過程：1 ）、 將事 先搭 建好 的 FTP數(shù) 據(jù)（ NFS ） 掛 載到 主控/ISM節(jié)點 上的/usr/local/proftpd 目錄下（請先使用 mkdir p /usr/

14、local/proftpd 命令創(chuàng)建該目錄），使用的掛載命令為：mount t nfs 00:/mnt/stor /usr/local/proftpd o nolock并將該命令寫入配置文件/etc/rc.local（注意，/usr/local/proftpd 后面沒有”/”）2）、修改/etc/hosts 文件，將上面的 NFS【EX】：信息加入進去；主控/ISM 節(jié)點配置詳細說明硬件配置處理器隨部署拓撲決定，至少 4 核網卡至少 2 塊網卡硬盤無要求內存隨部署拓撲決定，至少 8G 內存網絡控制網操作系統(tǒng)CentOS 6.0 X86_64 系統(tǒng)裝系統(tǒng)時，需要安裝以下包：JAVA 相關包；xi

15、netd 包；ssh 服務器/devel 包；httpd 服務libgcrypt 及l(fā)ibgcrypt-devel 包gcc也可以使用 yum 安裝：yum install libgcrypt-develyum install libgcryptyum installyum install-serveryum install-yum install javayum install xinetdyum install gcc其他開放以下端口：22、8080、623、3306、80、21、8000 等；南00nfs-2003）、在/usr/local/proftpd 目錄下，建立一個 system

16、vm 目錄；【命令】：mkdir p /usr/local/proftpd/systemvm將 vmware 系統(tǒng)虛擬機文件目錄 vRouter 上傳創(chuàng)建好的 systemvm 目錄下；4 ）、 將 ivirtual 系 統(tǒng) 虛 擬 機 文 件 inspur-router.tar.gz 上傳 /usr/local/proftpd 目錄下；5）、修改系統(tǒng)中進程所能打開的文件數(shù)目 a）、修改/root/.bashrc:# 添加如下的行ulimit n 65535b）、source /root/.bashrc至6）、修改系統(tǒng)中服務為系統(tǒng)服務chkconfig -level 35d on7）、將云海的

17、 tomcat 服務設置為開機自啟動，將命令寫入配置文件/etc/rc.local：ulimit -n 65535/etc/init.d/inspurtomcat restart8）、關于貓的配置環(huán)境，請參考Linux發(fā)送功能配置總結.doc3、 解壓安裝包EX：tar xzvf cathy-1.0.0-20130408.tar.gz4、 進入解壓后的目錄 cathyEX:cd cathy5、 執(zhí)行安裝文件./install.sh6、 在安裝過程中，會提示選擇是否開啟 tomcat 雙向認證，開啟后將使向認證。whether to open the cntAuth, please making

18、 a choice: y or n7、 在安裝過程中，會檢測系統(tǒng)是否安裝并安裝新版本。，如果系統(tǒng)已安裝，會提示用戶是否覆蓋，Server has existed at system.So, do you want to use itdirectorly or reinstall a newer ver1 or 2? please making a choice:選擇 1 則使用系統(tǒng)已有版本，選擇 2 則需先進行卸載，然后重新安裝。南8、 會依次提示是否需要安裝以下服務，全部選擇 【y】即可imonitor 服務 iauth 服務 ibase 服務 imanage 服務 iresource 服務

19、 icharge 服務 iworkflow 服務 icm 服務ism 服務9、 安裝完成后，會給出提示【finished！】【注意：】安裝過程較長，大約 20 分鐘左右，請耐心等待。安裝完成后，需要做如下配置：10、主要涉及 imonitor 服務以及 iresource 服務：1）、對于 iresource 服務進入/usr/local/apache-tomcat-6.0.29/webapps/iresource/WEB-INF/classes 目錄下，修改配置文件 incloudCperties:修改 ftpStore 字【EX】：為上面搭建的 NFS 服務器地址；# ftp 數(shù)據(jù)ftpS

20、tore =修改 sshHost 字【EX】：配置:NFS/nfs ip/nfs po NFS/00/mnt/stor為主控節(jié)點的 IPsshHost = 2修改 sshUser、sshPassword 字段為主控節(jié)點的 root 用戶名和其他字段默認即可；2）、對于 imonitor 服務啟動 httpd 服務/etc/init.d/httpd restart chkconfig -level 35 httpd on執(zhí)行以下命令：南如果/etc/init.d/shinken s態(tài)，就沒必要執(zhí)行下面令：/etc/init.d/shinken restart3）、對于 icharge 服務us

21、查看到 shinken 的各項服務都是開啟狀修改中英文配置：/usr/local/icharge/default_perties默認：#語言種類為中文如果要輸出英文：lang=en_US #語言種類為英文添加貨幣種類：/usr/local/apache-tomcat-6.0.29/webapps/icharge/WEB-INF/classes/ icharge_perties默認：#chiname, english name, currency sign元,yuan,￥,dollar,$4）、對于 iVirtual 虛擬化類型，需要額外配置 NFS，具體為兩種情況：iVirtual 是新部署的

22、，則iVirtual 需要使用 Cathy 的 NFS：iVirtual 管 理 節(jié) 點 第 一 次 啟 動 tomcat后 ，配 置 文 件 ：/usr/local/ivirtual/ivirtual-manager/apache-tomcat-6.0.35/webapps/ROOT/WEB-INF/classes/globa lCperties 的如下字段：nfsserver.exportPath=00:/mnt/stor其中 nfsserver.exportPath 改為 Cathy 的 nfs 路徑，修改完成后重啟 ivirtual 服務：/etc/init.d/ivirtual-ma

23、nager restart。iVirtual 已經使用（存在客戶的虛擬機），這種情況下 Cathy 需要共用 iVirtual 管理節(jié)點的 NFS：進入/usr/local/apache-tomcat-6.0.29/webapps/iresource/WEB-INF/classes目錄下，修改配置文件 incloudCperties:修改 ftpStore 字為上面搭建的 NFS 服務器地址；【EX】：# ftp 數(shù)據(jù)配置:NFS/nfs ip/nfs po ftpStore = NFS/00/nfs南其中 ip 為 iVirtual 管理節(jié)點的 IP，與 iVirtual 管理節(jié)點下usr/

24、local/ivirtual/ivirtual-manager/apache-tomcat-6.0.35/webapps/ROOT/WEB-INF/classes/globalCpertiess 文件中的 nfsserver.exportPath 路徑一致。注：iVirtual 與 VMware 中的集群能被Cathy 使用的前提是打開 DRS！3.3.2. 適用于復雜拓撲 1 的部署方式在此部署結構下，主控節(jié)點和 ISM 節(jié)點是分開部署的，其中，主控節(jié)點只連接控制網絡，而 ISM 節(jié)點同時連接控制網絡和業(yè)務網絡。而 VNC 控制臺可以部署于 ISM 節(jié)點上，也可以單獨部署一個節(jié)點出來。. 虛

25、擬機模板部署方式對于主控節(jié)點，會提供一個 VMWare/iVirtual ovf 格式的虛擬機模板文件，直接在vCenter/iVirtual 中部署即可。對于 ISM 節(jié)點，具體步驟為：會提供一個單獨的安裝包，執(zhí)行安裝即可。1、 在 vCenter/iVirtual 中導入 Inspur_cathy_controlcenter_deploy_v1.0.ovf 模板；2、 將事先搭建好的 FTP 數(shù)據(jù)（NFS）掛載到主控節(jié)點上的/usr/local/proftpd 目錄下，使用的掛載命令為：mount t nfs 00:/mnt/stor /usr/local/proftpd o nolock

26、3、 將事先搭建好的 FTP 數(shù)據(jù)（NFS）掛載到 ISM 節(jié)點上的/usr/local/proftpd目錄下，使用的掛載命令為：mount t nfs 00:/mnt/stor /usr/local/proftpd4、 做以下配置文件修改操作，主要涉及 iauth 服務以及 iresource 服務：1）、對于 iresource 服務o nolock修改主控節(jié)點和 ISM 節(jié)點上的/etc/hosts 文件，將上面的 NFS去；【EX】：信息加入進00對于主控節(jié)點來說：nfs-200進入/opt/cathy_installer_make_envirement/cathy/modules/i

27、resource/tools/proftpd 目錄下南執(zhí)行其中的安裝【命令】:，完成 FTP 服務器的安裝./install.sh 2在/usr/local/proftpd 目錄下，建立一個 systemvm 目錄；【EX】：mkdir p /usr/local/proftpd/systemvm將系統(tǒng)虛擬機文件目錄 vRouter 上傳進創(chuàng)建好的 systemvm 目錄下；入/usr/local/apache-tomcat-6.0.29/webapps/WEB-INF/classes目錄下，修改配置文件 incloudCperties:修改 ftpStore 字為上面搭建的 NFS 服務器地址

28、；【EX】：# ftp 數(shù)據(jù)配置:NFS/nfs ip/nfs poftpStore = NFS/00/mnt/stor修改 sshHost 字【EX】：為 VNC 控制臺的 IPsshHost = 2修改 sshUser、sshPassword 字段為 VNC 控制臺所在節(jié)點的 root用戶名和；其他字段默認即可；2）、對于 iauth 服務進入/usr/local/apache-tomcat-6.0.29/webapps/iauth/WEB-INF/c lasses 目錄下， 修改配置文件 incloudCperties 中的 opemamurl 地址字段。對于 ISM 節(jié)點來說：將 IS

29、M 安裝包 Inspur_cathy_ism_deploy_v1.0.tar.gz 解壓，比如：tar xzvf Inspur_cathy_ism_deploy_v1.0.tar.gz進入解壓后的目錄，執(zhí)行 ./install.sh 即可完成自動安裝；修改 perties 文件：tomcat 路徑/webapps/ism/WEB-INF/spring-configuration/perties請將jdbc.d數(shù)據(jù)庫的各種配置設置好（如下）：.:/主控節(jié)點.jdbc.Driverjdbc.url=jdbc:IP:3306/cloudos_db?useUnicode=true&;character

30、Encodin南g=utf-8jdbc.username=rootjdbc.password=111111確保對 SSH 服務的影響；. 安裝包部署方式此種方式，同 節(jié)類似，只不過，需要根據(jù)自己的實際部署結構來選擇安裝哪些服務包。3.3.3. 適用于復雜拓撲 2 的部署方式此種方式比較靈活，完全可以根據(jù)用戶所具有的計算資源是否充足來決定主控節(jié)點上各服務的分布式部署情況。此種情況下的具體 安裝過程同 3.3.2 節(jié)描述的一樣。不過，在安裝完成后，需要進入各服務的以下目錄中修改各服務的配置文件 incloudCperties 以及 perties 文件。文件路徑：tomcat 路徑/webapps/服務名稱/WEB-INF/classes/incloudCpertiestomcat 路徑/webapps/服務名稱/WEB-INF/ spring-configuration/perties3.4. 系統(tǒng)使用的注意事項1、 修改各服務調試日志級別（以 ireso