中小銀行NAS管理策略規(guī)劃制定的四個難點

一、背景隨著銀行業(yè)務(wù)的發(fā)展，NAS文件存儲以其組網(wǎng)簡單的特性和技術(shù)更迭更加適應(yīng)新場景，呈現(xiàn)出新趨勢。NAS存儲有其傳統(tǒng)場景，如虛擬化、文件共享、高性能的海量小文件等等。數(shù)字化時代，人們對實時性要求越來越高，因而需要更高性能存儲。NAS存儲擁有更低的時延、更高的性能、更好的可靠性，利用NAS存儲構(gòu)建業(yè)務(wù)系統(tǒng)間文件交互平臺，顯著提升了業(yè)務(wù)處理效率。如何有效的監(jiān)控NAS系統(tǒng)的性能與合理的容量規(guī)劃避免資源浪費和不足？如何合理的規(guī)劃和制定NAS管理策略，是充份的發(fā)揮NAS存儲的效率和實現(xiàn)高效文件共享的保證，下面是社區(qū)交流活動中的幾個核心探討難點：二、中小銀行NAS管理策略難點1、對于應(yīng)用如何規(guī)范而高效地訪問NAS有沒有有效的控制或者管理辦法？只能提前制定使用規(guī)范通知應(yīng)用，比如目錄下的文件存放盡量均衡，避免使用遍歷命令等，但至于應(yīng)用是否遵守規(guī)范沒有有效的約束措施？針對NAS的使用規(guī)范通知應(yīng)用，確實是一個非常重要的措施，可以幫助銀行行業(yè)的員工更好地使用NAS，從而避免一些潛在的問題。但是，僅依靠規(guī)范通知是不夠的，還需要配合一些有效的約束措施，才能確保員工遵守規(guī)范。以下是一些約束措施：（1）監(jiān)控和審計：銀行可以使用監(jiān)控和審計工具來跟蹤NAS的使用情況，檢查員工是否遵守規(guī)范。如果發(fā)現(xiàn)有員工違反規(guī)范，可以及時采取措施，例如提醒員工、限制權(quán)限等。（2）獎懲制度：銀行可以建立獎懲制度，對遵守規(guī)范的員工進(jìn)行獎勵，對違反規(guī)范的員工進(jìn)行懲罰。這樣可以增強員工的規(guī)范意識，促使他們更好地遵守規(guī)范。（3）培訓(xùn)和教育：銀行可以定期對員工進(jìn)行NAS的使用培訓(xùn)和教育，讓員工了解規(guī)范的重要性，掌握正確的使用方法。這樣可以提高員工的規(guī)范意識和技能水平，減少規(guī)范違反的可能性。（4）技術(shù)限制：銀行可以在NAS上設(shè)置一些技術(shù)限制，例如禁止使用危險的命令、限制文件大小等。這樣可以減少員工違反規(guī)范的可能性，保障NAS的安全和穩(wěn)定性。從技術(shù)方面限制規(guī)范NAS使用是非常必要的，包括基礎(chǔ)設(shè)施管理和非功能需求兩個方面。基礎(chǔ)設(shè)施管理方面包括：（1）根據(jù)不同應(yīng)用對NAS的訪問需求，制定適當(dāng)?shù)脑L問策略。例如，對于需要頻繁讀取數(shù)據(jù)的應(yīng)用，可以將數(shù)據(jù)緩存到本地，以減少對NAS的訪問次數(shù)，提高訪問效率。（2）為了保證數(shù)據(jù)的安全和完整性，需要對NAS進(jìn)行適當(dāng)?shù)脑L問權(quán)限限制?？梢愿鶕?jù)不同用戶或應(yīng)用的需求，設(shè)置不同的訪問權(quán)限，以確保數(shù)據(jù)只能被授權(quán)用戶或應(yīng)用訪問。（3）對于NAS中的不同數(shù)據(jù)，進(jìn)行分類管理。例如，將訪問頻率較高的數(shù)據(jù)和訪問頻率較低的數(shù)據(jù)分別存儲在不同的存儲設(shè)備中，以提高訪問效率和降低成本。（4）了解不同應(yīng)用對NAS的訪問情況，需要有針對性的對NAS進(jìn)行實時監(jiān)控。如果發(fā)現(xiàn)某個應(yīng)用對NAS的訪問頻率過高或者訪問數(shù)據(jù)過大，可以及時對其進(jìn)行限制或者調(diào)整，以保證NAS的穩(wěn)定性和性能。（5）根據(jù)應(yīng)用的需求和數(shù)據(jù)的特性，選擇適當(dāng)?shù)腘AS設(shè)備和存儲方案，以滿足應(yīng)用對數(shù)據(jù)訪問的要求，并提高訪問效率和穩(wěn)定性。（6）若對NAS存儲的需求較多且承載業(yè)務(wù)重要程度較高時，可以考慮購買多套NAS存儲進(jìn)行存儲故障域的拆分，以及本地雙機(jī)高可用或跨機(jī)房容災(zāi)等方案。（7）應(yīng)用系統(tǒng)掛載NAS存儲共享卷建議采用域名方式。（8）明確每個NAS卷的快照或備份的頻率以及保留周期。（9）NAS要設(shè)置客戶端異常訪問次數(shù)和中斷時間。非功能需求方面包括：（1）約束應(yīng)用系統(tǒng)集群內(nèi)或應(yīng)用系統(tǒng)集群間的聯(lián)機(jī)NAS共享場景，例如：一套應(yīng)用系統(tǒng)集群內(nèi)部可使用NFS作為共享文件系統(tǒng)，不同應(yīng)用系統(tǒng)之間要仔細(xì)規(guī)劃共享文件系統(tǒng)的使用，如采用共享文件系統(tǒng)下不同子目錄的方式進(jìn)行業(yè)務(wù)系統(tǒng)的區(qū)分。（2）應(yīng)用系統(tǒng)必須明確每個NAS共享卷中數(shù)據(jù)的生命周期。例如：臨時文件共享保留7天，到期必須刪除。（3）應(yīng)用系統(tǒng)必須明確每個NAS共享卷的容量及IOPS需求。（4）應(yīng)用系統(tǒng)申請的每個NAS共享卷中文件數(shù)量不允許超過限值。（5）應(yīng)用系統(tǒng)進(jìn)程運行所需參數(shù)文件不允許直接放在NAS共享卷中。（6）應(yīng)用系統(tǒng)程序不允許通過遍歷方式頻繁掃描NAS共享卷和統(tǒng)計文件等操作。綜上所述，銀行行業(yè)在使用NAS時，不僅需要制定使用規(guī)范通知應(yīng)用，還需要采取一些有效的約束措施，以確保員工遵守規(guī)范，保障NAS的安全性和穩(wěn)定性。2、如何使用QoS功能對同一臺NAS設(shè)備上的眾多文件系統(tǒng)進(jìn)行性能負(fù)載隔離控制？針對帶寬、IOPS等指標(biāo)如何設(shè)置Qos閾值，是單獨給每個文件設(shè)置還是分類設(shè)置，有沒有規(guī)范的設(shè)置建議。如何針對同一臺NAS設(shè)備上的眾多文件系統(tǒng)進(jìn)行性能負(fù)載隔離控制？使用QoS功能可以對同一臺NAS設(shè)備上的眾多文件系統(tǒng)進(jìn)行性能負(fù)載隔離控制，以確保每個文件系統(tǒng)獲得足夠的帶寬和IOPS資源。以下是一些針對帶寬、IOPS等指標(biāo)如何設(shè)置QoS閾值以及如何對文件系統(tǒng)進(jìn)行分類設(shè)置的建議：（1）在設(shè)置QoS閾值時，需要根據(jù)不同文件系統(tǒng)的訪問需求和重要性進(jìn)行分類設(shè)置。例如，對于一些關(guān)鍵的業(yè)務(wù)文件系統(tǒng)，可以設(shè)置較高的帶寬和IOPS閾值，以確保其獲得足夠的資源；對于一些不重要的文件系統(tǒng)，則可以設(shè)置較低的閾值，以避免浪費資源。（2）在進(jìn)行QoS控制時，需要將文件系統(tǒng)進(jìn)行分類設(shè)置?？梢愿鶕?jù)不同文件系統(tǒng)的訪問模式、訪問頻率、訪問類型等特征進(jìn)行分類，以便更好地控制其性能負(fù)載。例如，將訪問頻率高、對性能要求較高的文件系統(tǒng)劃分到高優(yōu)先級組，將訪問頻率低、對性能要求較低的文件系統(tǒng)劃分到低優(yōu)先級組。（3）在進(jìn)行QoS控制時，需要對不同類型的文件進(jìn)行分類，例如視頻文件、音頻文件、文檔文件等，然后根據(jù)不同類型的文件設(shè)置不同的QoS閾值。對于需要高帶寬和高IOPS的文件，可以設(shè)置較高的QoS閾值，以保證其傳輸?shù)乃俣群托?；對于一些不需要高帶寬和高IOPS的文件，可以設(shè)置較低的QoS閾值，以避免其占用過多的網(wǎng)絡(luò)資源。（4）需要根據(jù)網(wǎng)絡(luò)負(fù)載情況進(jìn)行動態(tài)調(diào)整QoS閾值。當(dāng)網(wǎng)絡(luò)負(fù)載較高時，可以適當(dāng)降低QoS閾值，以保證網(wǎng)絡(luò)的穩(wěn)定性和可靠性；當(dāng)網(wǎng)絡(luò)負(fù)載較低時，可以適當(dāng)提高QoS閾值，以提高文件傳輸?shù)乃俣群托?。?）需要根據(jù)NAS的性能負(fù)載情況進(jìn)行QoS閾值的設(shè)置。當(dāng)NAS的性能負(fù)載較高時，可以適當(dāng)降低QoS閾值，以避免其過度負(fù)載；當(dāng)NAS的性能負(fù)載較低時，可以適當(dāng)提高QoS閾值，以提高文件傳輸?shù)乃俣群托?。?）在設(shè)置QoS閾值和分類設(shè)置文件系統(tǒng)后，需要對其進(jìn)行監(jiān)控和調(diào)整?？梢允褂眯阅鼙O(jiān)控工具對文件系統(tǒng)進(jìn)行監(jiān)控，及時發(fā)現(xiàn)性能瓶頸和資源利用率問題，并根據(jù)實際情況進(jìn)行調(diào)整。（7）不同NAS設(shè)備廠商的QoS實現(xiàn)方式和設(shè)置方法存在一定的差異，建議參考廠商提供的建議和文檔進(jìn)行設(shè)置和調(diào)整。最后，建議要根據(jù)自身實際情況來考慮是否采用QoS功能，不同業(yè)務(wù)系統(tǒng)的交易量增長和功能版本迭代，或營銷活動等可能會導(dǎo)致對NAS存儲的需求變動，采用QoS后管理復(fù)雜度會增加，而且在存儲層面或應(yīng)用系統(tǒng)層面也不便于準(zhǔn)確的衡量新需求的QoS閾值，若設(shè)置不合適的QoS后可能導(dǎo)致次生的生產(chǎn)風(fēng)險。因此，建議日常加強對存儲性能的監(jiān)控，對網(wǎng)絡(luò)流量、存儲容量、控制器處理能力、吞吐量、IOPS等指標(biāo)進(jìn)行分析，若發(fā)現(xiàn)潛在性能問題時，有針對性的采取措施來規(guī)避風(fēng)險隱患。同時，可以根據(jù)長期的監(jiān)控數(shù)據(jù)分析總結(jié)出合適的QoS指標(biāo)來提升存儲的管控能力。3、NAS的性能監(jiān)控該如何進(jìn)行？一般NAS的性能監(jiān)控主要是針對整臺NAS的CPU、IOPS、平均時延等指標(biāo)，是否需要針對單個文件系統(tǒng)的性能指標(biāo)進(jìn)行設(shè)置，每家NAS品牌不一定支持單文件系統(tǒng)性能監(jiān)控，這個時候NAS的性能監(jiān)控應(yīng)該如何進(jìn)行?（1）在銀行行業(yè)中，NAS通常用于存儲重要的數(shù)據(jù)和文件，因此性能監(jiān)控對于保障數(shù)據(jù)安全和業(yè)務(wù)連續(xù)性非常重要。一般來說，NAS的性能監(jiān)控需要關(guān)注整臺NAS的CPU、IOPS、平均時延等指標(biāo)，這些指標(biāo)可以幫助管理員了解整個系統(tǒng)的運行情況，及時發(fā)現(xiàn)和解決問題。目前的企業(yè)級存儲對性能監(jiān)控相關(guān)功能都比較完善，不同廠商的存儲在性能指標(biāo)分析方面也具備圖表展示能力，可以直觀的觀察到存儲的實時運行情況。一些廠商也提供了一定期限的歷史性能分析數(shù)據(jù)，可以幫助存儲管理員來了解和掌握存儲的性能情況。但是，想長期分析存儲性能的話，可能需要借助存儲廠商提供的存儲底層命令或接口來抓取一些特定時間點的性能數(shù)據(jù)，在存儲外部進(jìn)行存儲歷史性能數(shù)據(jù)的分析。例如，每天定時采集一次當(dāng)天的性能數(shù)據(jù)，以及每個卷組的空間使用情況、數(shù)據(jù)量等數(shù)據(jù)，匯總后可以人工分析。（2）針對單個文件系統(tǒng)的性能指標(biāo)進(jìn)行設(shè)置也是非常有必要的。因為不同的文件系統(tǒng)可能會有不同的性能瓶頸，如果能夠針對單個文件系統(tǒng)進(jìn)行監(jiān)控，就可以更加精確地定位問題，提高故障排除的效率。例如，如果某個文件系統(tǒng)的I/O負(fù)載很高，就需要及時調(diào)整存儲策略或者增加存儲容量，以避免影響業(yè)務(wù)的正常運行。不過，每家NAS品牌不一定都支持單文件系統(tǒng)性能監(jiān)控，這需要根據(jù)具體的品牌和型號進(jìn)行評估。如果NAS不支持單文件系統(tǒng)性能監(jiān)控，可以通過其他手段來監(jiān)控文件系統(tǒng)的性能，例如使用操作系統(tǒng)自帶的性能監(jiān)控工具或者第三方監(jiān)控軟件。另外，不少廠商也研發(fā)了存儲管理平臺產(chǎn)品，可以集中監(jiān)控性能指標(biāo)和管理存儲等功能，有的產(chǎn)品對友商的異構(gòu)存儲也可以納管。所以，可以根據(jù)自身實際情況來選擇存儲性能監(jiān)控的方案。4、如何快速分析NAS存儲類基礎(chǔ)設(shè)施對應(yīng)用投入和產(chǎn)出分析？針對基礎(chǔ)設(shè)施投入和產(chǎn)出分析方面，目前對于給應(yīng)用系統(tǒng)分配的資源情況進(jìn)行梳理的效率還有待提升，如何實現(xiàn)快速分析存儲資源投入和產(chǎn)出的方式？想要快速分析NAS存儲類基礎(chǔ)設(shè)施對應(yīng)用投入和產(chǎn)出，可以考慮以下幾個方面：（1）確定關(guān)鍵指標(biāo)：首先需要確定關(guān)鍵的投入和產(chǎn)出指標(biāo)，例如存儲容量、存儲性能、存儲可靠性等。這些指標(biāo)可以幫助我們更好地了解投入和產(chǎn)出的情況。通過對存儲設(shè)備的容量進(jìn)行規(guī)劃，避免存儲資源的浪費和不足。還可以根據(jù)應(yīng)用系統(tǒng)的需求制定相應(yīng)的存儲資源分配策略，確保應(yīng)用系統(tǒng)獲得足夠的存儲資源，以提高應(yīng)用系統(tǒng)的性能和存儲資源的利用效率。（2）數(shù)據(jù)采集和整理：對于銀行行業(yè)中的NAS存儲，需要對存儲系統(tǒng)進(jìn)行數(shù)據(jù)采集和整理，包括存儲容量、使用率、性能指標(biāo)（如帶寬、IOPS、延遲等）等。這些數(shù)據(jù)可以通過存儲設(shè)備自帶的監(jiān)控工具或第三方監(jiān)控工具進(jìn)行采集和整理。通過這些監(jiān)控工具可以及時發(fā)現(xiàn)性能瓶頸和資源浪費的情況，進(jìn)而采取相應(yīng)措施。（3）數(shù)據(jù)分析和可視化：通過對采集到的數(shù)據(jù)進(jìn)行分析和可視化，可以更好地了解存儲資源的投入和產(chǎn)出情況。例如，可以通過數(shù)據(jù)可視化工具繪制存儲容量和使用率的趨勢圖，以及存儲性能指標(biāo)的分布圖等。（4）自動化分析和報告：為了提高效率，可以考慮使用自動化分析和報告工具。例如，可以使用腳本編寫自動化分析程序，定期對存儲系統(tǒng)進(jìn)行分析，并生成報告。這樣可以節(jié)省人力和時間成本，同時提高分析效率。總之，針對銀行行業(yè)中NAS存儲的基礎(chǔ)設(shè)施投入和產(chǎn)出分析，需要通過數(shù)據(jù)采集、分析和可視化等手段，了解存儲資源的投入和產(chǎn)出情況，并通過自動化分析和報告工具提高效率。通過對存儲資源的成本和效益進(jìn)行分析，可以評估存儲資源的價值和使用效果，以便更好地掌握存儲資源的使用情況。例如：可將存儲的采購成本、維護(hù)成本、規(guī)劃使用年限、存儲容量等進(jìn)行量化換算，可以精確到1M或1G為單位的價格，可按日、月、年等維度計算應(yīng)用系統(tǒng)所占資源價值，計算申請空間容量的價格和實際占用空間的價格，就可以幫助分析應(yīng)用投入和產(chǎn)出，也可以提升精細(xì)化運營水平。三、交流共識的總結(jié)1、銀行行業(yè)在使用NAS時，不僅需要制定使用規(guī)范通知應(yīng)用，還需要采取一些有效的約束措施，以確保員工遵守規(guī)范，保障NAS的安全性和穩(wěn)定性。2、銀行行業(yè)日常加強對存儲性能的監(jiān)控，對網(wǎng)絡(luò)負(fù)載情況、NAS負(fù)載情況、存儲容量、控制器處理能力、吞吐量、IOPS等指標(biāo)進(jìn)行分析，若