⑧OpenStack高可用集群部署方案-Cinder

⑧OpenStack高可用集群部署方案—CinderCinder的核心功能是對卷的管理，允許對卷、卷的類型、卷的快照、卷備份進(jìn)行處理。它為后端不同的存儲(chǔ)設(shè)備提供給了統(tǒng)一的接口，不同的塊設(shè)備服務(wù)廠商在Cinder中實(shí)現(xiàn)其驅(qū)動(dòng)，可以被Openstack整合管理，nova與cinder的工作原理類似。支持多種back-end（后端）存儲(chǔ)方式，包括LVM，NFS，Ceph和其他諸如EMC、IBM等商業(yè)存儲(chǔ)產(chǎn)品和方案。Cinder各組件功能Cinder-api是cinder服務(wù)的endpoint，提供rest接口，負(fù)責(zé)處理client請求，并將RPC請求發(fā)送至cinder-scheduler組件。Cinder-scheduler負(fù)責(zé)cinder請求調(diào)度，其核心部分就是scheduler_driver,作為schedulermanager的driver，負(fù)責(zé)cinder-volume具體的調(diào)度處理，發(fā)送cinderRPC請求到選擇的cinder-volume。Cinder-volume負(fù)責(zé)具體的volume請求處理，由不同后端存儲(chǔ)提供volume存儲(chǔ)空間。目前各大存儲(chǔ)廠商已經(jīng)積極地將存儲(chǔ)產(chǎn)品的driver貢獻(xiàn)到cinder社區(qū)十六、Cinder控制節(jié)點(diǎn)集群部署1.創(chuàng)建cinder數(shù)據(jù)庫在任意控制節(jié)點(diǎn)創(chuàng)建數(shù)據(jù)庫，后臺(tái)數(shù)據(jù)自動(dòng)同步；2.創(chuàng)建cinder相關(guān)服務(wù)憑證在任意控制節(jié)點(diǎn)操作，以controller01節(jié)點(diǎn)為例；2.1創(chuàng)建cinder服務(wù)用戶2.2向cinder用戶賦予admin權(quán)限openstackroleadd--projectservice--usercinderadmin2.3創(chuàng)建cinderv2和cinderv3服務(wù)實(shí)體#cinder服務(wù)實(shí)體類型"volume"

openstackservicecreate--namecinderv2--description"OpenStackBlockStorage"volumev2

openstackservicecreate--namecinderv3--description"OpenStackBlockStorage"volumev32.4創(chuàng)建塊存儲(chǔ)服務(wù)API端點(diǎn)塊存儲(chǔ)服務(wù)需要每個(gè)服務(wù)實(shí)體的端點(diǎn)cinder-api后綴為用戶project-id，可通過openstackprojectlist查看在全部控制節(jié)點(diǎn)安裝cinder服務(wù)，以controller01節(jié)點(diǎn)為例yuminstallopenstack-cinder-y3.2配置cinder.conf在全部控制節(jié)點(diǎn)操作，以controller01節(jié)點(diǎn)為例；注意my_ip參數(shù)，根據(jù)節(jié)點(diǎn)修改；#備份配置文件/etc/cinder/cinder.conf

cp-a/etc/cinder/cinder.conf{,.bak}

grep-Ev'^$，#'/etc/cinder/cinder.conf.bak>/etc/cinder/cinder.conf將cinder配置文件拷貝到另外兩個(gè)控制節(jié)點(diǎn)上：scp-rp/etc/cinder/cinder.confcontroller02:/etc/cinder/

scp-rp/etc/cinder/cinder.confcontroller03:/etc/cinder/

##controller02上

sed-i"s#10.15.253.163#10.15.253.195#g"/etc/cinder/cinder.conf

##controller03上

sed-i"s#10.15.253.163#10.15.253.227#g"/etc/cinder/cinder.conf3.3配置nova.conf使用塊存儲(chǔ)在全部控制節(jié)點(diǎn)操作，以controller01節(jié)點(diǎn)為例；配置只涉及nova.conf的[cinder]字段；openstack-config--set/etc/nova/nova.confcinderos_region_nameRegionOne3.4同步cinder數(shù)據(jù)庫任意控制節(jié)點(diǎn)操作；3.5啟動(dòng)服務(wù)并設(shè)置開機(jī)自啟動(dòng)全部控制節(jié)點(diǎn)操作；修改了nova配置文件，首先需要重啟nova服務(wù)systemctlrestartopenstack-nova-api.service

systemctlenableopenstack-cinder-api.serviceopenstack-cinder-scheduler.service

systemctlrestartopenstack-cinder-api.serviceopenstack-cinder-scheduler.service

systemctlstatusopenstack-cinder-api.serviceopenstack-cinder-scheduler.service3.6控制節(jié)點(diǎn)驗(yàn)證openstackvolumeservicelist

#也可以使用cinderservice-list4.設(shè)置pcs資源在任意控制節(jié)點(diǎn)操作；添加資源cinder-api與cinder-schedulercinder-api與cinder-scheduler以active/active模式運(yùn)行；openstack-nova-volume以active/passive模式運(yùn)行pcsresourcecreateopenstack-cinder-apisystemd:openstack-cinder-apicloneinterleave=true

pcsresourcecreateopenstack-cinder-schedulersystemd:openstack-cinder-schedulercloneinterleave=true查看資源pcsresource十七、Cinder存儲(chǔ)節(jié)點(diǎn)集群部署資源有限，這里將cinder存儲(chǔ)節(jié)點(diǎn)暫時(shí)部署到三臺(tái)計(jì)算節(jié)點(diǎn)上使用ceph作為后端的存儲(chǔ)進(jìn)行使用在采用ceph或其他商業(yè)/非商業(yè)后端存儲(chǔ)時(shí)，建議將cinder-volume服務(wù)部署在控制節(jié)點(diǎn)，通過pacemaker將服務(wù)運(yùn)行在active/passive模式。

Openstack的存儲(chǔ)面臨的問題企業(yè)上線openstack，必須要思考和解決三方面的難題:

1.控制集群的高可用和負(fù)載均衡，保障集群沒有單點(diǎn)故障，持續(xù)可用，

2.網(wǎng)絡(luò)的規(guī)劃和neutronL3的高可用和負(fù)載均衡，

3.存儲(chǔ)的高可用性和性能問題。存儲(chǔ)openstack中的痛點(diǎn)與難點(diǎn)之一

在上線和運(yùn)維中，值得考慮和規(guī)劃的重要點(diǎn)，openstack支持各種存儲(chǔ)，包括分布式的文件系統(tǒng)，常見的有:ceph,glusterfs和sheepdog，同時(shí)也支持商業(yè)的FC存儲(chǔ)，如IBM,EMC,NetApp和huawei的專業(yè)存儲(chǔ)設(shè)備，一方面能夠滿足企業(yè)的利舊和資源的統(tǒng)一管理。Ceph概述

ceph作為近年來呼聲最高的統(tǒng)一存儲(chǔ)，在云環(huán)境下適應(yīng)而生，ceph成就了openstack和cloudstack這類的開源的平臺(tái)方案，同時(shí)openstack的快速發(fā)展，也吸引了越來越多的人參與到ceph的研究中來。ceph在整個(gè)社區(qū)的活躍度越來越高，越來越多的企業(yè)，使用ceph做為openstack的glance，nova，cinder的存儲(chǔ)。ceph是一種統(tǒng)一的分布式文件系統(tǒng)；能夠支持三種常用的接口:

1.對象存儲(chǔ)接口，兼容于S3，用于存儲(chǔ)結(jié)構(gòu)化的數(shù)據(jù)，如圖片，視頻，音頻等文件，其他對象存儲(chǔ)有:S3,Swift,FastDFS等；

2.文件系統(tǒng)接口，通過cephfs來完成，能夠?qū)崿F(xiàn)類似于nfs的掛載文件系統(tǒng)，需要由MDS來完成，類似的文件系存儲(chǔ)有:nfs,samba,glusterfs等；

3.塊存儲(chǔ)，通過rbd實(shí)現(xiàn)，專門用于存儲(chǔ)云環(huán)境下塊設(shè)備，如openstack的cinder卷存儲(chǔ)，這也是目前ceph應(yīng)用最廣泛的地方。yuminstallopenstack-cindertargetclipython3-keystone-y1.2配置cinder.conf在全部計(jì)算點(diǎn)配置；注意my_ip參數(shù)，根據(jù)節(jié)點(diǎn)修改；#備份配置文件/etc/cinder/cinder.conf

cp-a/etc/cinder/cinder.conf{,.bak}

grep-Ev'#，^$'/etc/cinder/cinder.conf.bak>/etc/cinder/cinder.conf將cinder配置文件拷貝到另外兩個(gè)計(jì)算節(jié)點(diǎn)上：1.3啟動(dòng)服務(wù)并設(shè)置開機(jī)自啟動(dòng)全部計(jì)算節(jié)點(diǎn)操作；systemctlrestartopenstack-cinder-volume.servicetarget.service

systemctlenableopenstack-cinder-v