云平臺(tái)和虛擬化智慧運(yùn)維監(jiān)控，全面提升故障感知與處置能力

? ? ? ? 隨著云計(jì)算、大數(shù)據(jù)技術(shù)等發(fā)展，虛擬化的普及不斷深入，已成為現(xiàn)代IT基礎(chǔ)設(shè)施建設(shè)中不可或缺的組成部分，成為推動(dòng)企業(yè)數(shù)字化轉(zhuǎn)型的關(guān)鍵力量。虛擬化的應(yīng)用在降低軟硬件成本和復(fù)雜性的同時(shí)，如何保障虛擬環(huán)境的高效運(yùn)行，也給運(yùn)維人員帶來(lái)了更大的挑戰(zhàn)。

? ? ? ? 北京智和信通虛擬化監(jiān)控運(yùn)維方案通過(guò)對(duì)虛擬化環(huán)境的實(shí)時(shí)監(jiān)控和深入管理，提高對(duì)虛擬化故障的感知、分析、解決能力，保障其性能高可用和環(huán)境的穩(wěn)定。

第1章?靈活的虛擬化監(jiān)控方式

? ? ? ? 方案提供兩種方式對(duì)虛擬機(jī)進(jìn)行監(jiān)控，一種是作為宿主機(jī)的虛擬機(jī)資源進(jìn)行監(jiān)控，另一種是將其作為真實(shí)主機(jī)（操作系統(tǒng)）進(jìn)行監(jiān)控。兩種監(jiān)控方式均通過(guò)主動(dòng)輪詢(xún)和日志解析的方式監(jiān)測(cè)虛擬機(jī)的常見(jiàn)性能，不同方式的監(jiān)控范圍和內(nèi)容有所差異。

1.1.作為宿主機(jī)的虛擬機(jī)資源監(jiān)控

? ? ? ? 對(duì)宿主機(jī)可實(shí)現(xiàn)如Ping服務(wù)成功率、Ping平均響應(yīng)時(shí)間、CPU使用率、內(nèi)存使用率、磁盤(pán)使用率、虛擬機(jī)（數(shù)量、清單、操作系統(tǒng)）、網(wǎng)絡(luò)接口流量帶寬等指標(biāo)的監(jiān)控。

對(duì)虛擬機(jī)資源可實(shí)現(xiàn)如CPU使用率、內(nèi)存利用率、磁盤(pán)容量，磁盤(pán)使用率、網(wǎng)絡(luò)流量等監(jiān)控；在控制方面可以對(duì)虛擬機(jī)可以進(jìn)行重啟、備份、鏡像等操作。

1.2.作為真實(shí)的主機(jī)（操作系統(tǒng)）監(jiān)控

? ? ? ? 在此種方式下，根據(jù)虛擬機(jī)所安裝的操作系統(tǒng)來(lái)進(jìn)行監(jiān)控和控制，支持的監(jiān)控指標(biāo)和控制能力和對(duì)操作系統(tǒng)的監(jiān)控相同。

? ? ? ? 監(jiān)控指標(biāo)包括ping、CPU使用率、內(nèi)存使用率、磁盤(pán)使用率、網(wǎng)口流量帶寬、進(jìn)程、服務(wù)、TCP連接數(shù)、端口等?？刂颇芰Πㄒ绘I開(kāi)關(guān)機(jī)、重啟、進(jìn)程管理、應(yīng)用管理、容量管理等。

第2章?豐富的虛擬化監(jiān)控范圍與指標(biāo)

? ? ? ? 方案以實(shí)時(shí)監(jiān)控和可視化呈現(xiàn)為核心，通過(guò)高精準(zhǔn)的數(shù)據(jù)采集和智能數(shù)據(jù)分析處理機(jī)制，實(shí)現(xiàn)對(duì)虛擬化環(huán)境的全面監(jiān)測(cè)和秒級(jí)故障預(yù)警。

2.1.虛擬化監(jiān)控模型及指標(biāo)擴(kuò)展

? ? ? ? 資源監(jiān)控是對(duì)虛擬化環(huán)境進(jìn)行運(yùn)維管理的關(guān)鍵，方案通過(guò)構(gòu)建對(duì)VMware、Xenserver、Hyper-V、KVM、K8s（Kubernates）等關(guān)鍵指標(biāo)的監(jiān)控，幫助運(yùn)維人員了解虛擬機(jī)的工作負(fù)載定位其性能瓶頸，并采取相應(yīng)措施優(yōu)化其性能。

? ? ? ? 同時(shí)采取用戶(hù)自定義擴(kuò)展虛擬化類(lèi)型、版本及其資源的方式，賦予用戶(hù)強(qiáng)大的適配能力，其他虛擬化也可通過(guò)靈活可配的模型庫(kù)進(jìn)行擴(kuò)展適配，最大可能地實(shí)現(xiàn)對(duì)不同品牌、不同版本虛擬化的管控；支持自定義虛擬化類(lèi)型、虛擬化資源、故障監(jiān)視器、性能監(jiān)視器、TRAP監(jiān)視器等。

2.2.常見(jiàn)虛擬機(jī)監(jiān)測(cè)點(diǎn)和指標(biāo)

? ? ? ? 本方案通過(guò)主動(dòng)輪詢(xún)和日志解析的方式對(duì)虛擬機(jī)常見(jiàn)性能指標(biāo)，如響應(yīng)時(shí)間、CPU使用率、內(nèi)存使用情況、磁盤(pán)IO性能以及網(wǎng)絡(luò)吞吐量等進(jìn)行監(jiān)控，同時(shí)除內(nèi)置的常見(jiàn)指標(biāo)外，其他資源和指標(biāo)也可以通過(guò)模型庫(kù)不斷進(jìn)行拓展。

第3章 虛擬化實(shí)時(shí)監(jiān)控和預(yù)警管理

? ? ? ? 針對(duì)各類(lèi)虛擬化場(chǎng)景建立全面的監(jiān)控運(yùn)維體系，深入監(jiān)控其內(nèi)部資源和整體運(yùn)行狀態(tài)，提升虛擬化環(huán)境可靠性，保障業(yè)務(wù)系統(tǒng)穩(wěn)定運(yùn)行。

3.1.自動(dòng)發(fā)現(xiàn)虛擬化設(shè)備

? ? ? ? 智和信通具備獨(dú)特的自動(dòng)發(fā)現(xiàn)技術(shù)，在網(wǎng)絡(luò)可達(dá)范圍內(nèi)，僅需輸入IP范圍即可自動(dòng)發(fā)現(xiàn)網(wǎng)絡(luò)中的宿主機(jī)和虛擬機(jī)，識(shí)別虛擬機(jī)類(lèi)型、版本、操作系統(tǒng)等信息，獲取宿主機(jī)和虛擬機(jī)內(nèi)部資源，匹配故障與性能監(jiān)視器，并自動(dòng)發(fā)現(xiàn)虛擬機(jī)與其他設(shè)備的連接關(guān)系，生成可視化鏈路，通過(guò)可視拓?fù)鋭?dòng)態(tài)展示虛擬化、鏈路的運(yùn)行狀態(tài)。

3.2.自動(dòng)生成網(wǎng)絡(luò)拓?fù)?/strong>

? ? ? ? 方案以圖形拓?fù)涞男问秸宫F(xiàn)虛擬機(jī)在網(wǎng)絡(luò)中和其他設(shè)備間的拓?fù)潢P(guān)系，支持樹(shù)形結(jié)構(gòu)和平面結(jié)構(gòu)的聯(lián)動(dòng)展示，也可以按片區(qū)、按地域、按層級(jí)等多種布局方式劃分網(wǎng)絡(luò)，在拓?fù)渲幸圆煌伾珗D標(biāo)、光效展現(xiàn)虛擬化的實(shí)時(shí)狀態(tài)信息。

? ? ? ? 在拓?fù)鋱D的基礎(chǔ)上，進(jìn)一步展示虛擬化的內(nèi)部細(xì)節(jié)，以圖形方式展示虛擬機(jī)CPU使用率、內(nèi)存使用情況、磁盤(pán)IO性能以及網(wǎng)絡(luò)吞吐量等關(guān)鍵指標(biāo)，對(duì)虛擬機(jī)進(jìn)行細(xì)化監(jiān)控，實(shí)時(shí)告警，事前管理，降低故障發(fā)生率。

3.3.虛擬機(jī)性能態(tài)勢(shì)感知

? ? ? ? 全面采集虛擬機(jī)的各項(xiàng)性能指標(biāo)，如CPU使用率、CPU就緒時(shí)間、內(nèi)存使用量、內(nèi)存頁(yè)交換率、磁盤(pán)讀寫(xiě)請(qǐng)求、磁盤(pán)延遲時(shí)間與隊(duì)列長(zhǎng)度、網(wǎng)絡(luò)接口的吞吐量、包傳輸錯(cuò)誤以及丟棄包等，并按照時(shí)間范圍、資源類(lèi)型、性能指標(biāo)等多種維度，以圖形、表格等多種形式進(jìn)行展示。

? ? ? ? 對(duì)實(shí)時(shí)、歷史性能數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，通過(guò)曲線(xiàn)圖、柱狀圖或表格等形象化地展示，按天、星期、月查看性能指標(biāo)變化。運(yùn)維人員能隨時(shí)把握虛擬化性能變化態(tài)勢(shì)，防患于未然。

? ? ? ? 方案支持選擇多臺(tái)虛擬機(jī)進(jìn)行同維度性能數(shù)據(jù)分析，提供可視化性能對(duì)比視圖，通過(guò)性能對(duì)比分析虛擬機(jī)性能變化趨勢(shì)。

3.4.虛擬機(jī)自動(dòng)巡檢

? ? ? ? 可自定義虛擬機(jī)的巡檢策略，預(yù)設(shè)時(shí)間自動(dòng)執(zhí)行虛擬機(jī)巡檢，定期巡查虛擬機(jī)實(shí)時(shí)運(yùn)行狀態(tài)，并向指定郵箱發(fā)送結(jié)果報(bào)告，可自行選擇要統(tǒng)計(jì)的虛擬機(jī)所屬網(wǎng)絡(luò)、虛擬機(jī)類(lèi)型、虛擬機(jī)資源、虛擬機(jī)支撐的業(yè)務(wù)、虛擬機(jī)關(guān)聯(lián)的鏈路等范圍類(lèi)型，生成巡檢報(bào)表。

3.5.日志與事件管理

? ? ? ? 接收虛擬機(jī)主動(dòng)發(fā)送如非正常關(guān)機(jī)、意外重啟、內(nèi)存管理錯(cuò)誤、進(jìn)程調(diào)度問(wèn)題、服務(wù)無(wú)法正常啟動(dòng)、應(yīng)用程序異常終止、應(yīng)用運(yùn)行錯(cuò)誤、登錄失敗、權(quán)限變更等事件與日志消息，集中存儲(chǔ)、解析處理后，將錯(cuò)誤、告警、攻擊行為等異常信息及時(shí)地通知用戶(hù)。

? ? ? ? 通過(guò)實(shí)時(shí)監(jiān)控虛擬機(jī)的日志和事件信息，運(yùn)維人員能夠準(zhǔn)確得知虛擬機(jī)資源的使用情況、用戶(hù)行為、應(yīng)用程序錯(cuò)誤、系統(tǒng)故障等關(guān)鍵信息，在統(tǒng)一界面集中管理，及時(shí)發(fā)現(xiàn)和解決虛擬機(jī)故障、觀察系統(tǒng)運(yùn)行情況、預(yù)測(cè)系統(tǒng)的使用情況，作為性能瓶頸和故障排查的重要依據(jù)，幫助運(yùn)維人員更好地維護(hù)和管理虛擬化環(huán)境。

3.6.故障告警與智能收斂

? ? ? ? 搭載多種告警機(jī)制，自定義配置告警閾值，具備主動(dòng)的故障監(jiān)控功能，從眾多的事件和狀態(tài)中，系統(tǒng)地將零散的狀態(tài)信息總結(jié)成為當(dāng)前狀態(tài)，并對(duì)異常狀態(tài)進(jìn)行告警，第一時(shí)間獲取準(zhǔn)確的告警信息，快速標(biāo)示已執(zhí)行操作的告警，迅速定位產(chǎn)生告警的虛擬機(jī)，提升告警處理效率，極大降低因虛擬化故障帶來(lái)的損失。

? ? ? ? 告警管理采用自動(dòng)去重、風(fēng)暴抑制、關(guān)聯(lián)聚合、維護(hù)期時(shí)間屏蔽、依賴(lài)屏蔽等多種智能告降噪機(jī)制，通過(guò)AI算法，對(duì)各類(lèi)告警進(jìn)行自動(dòng)壓縮收斂，減少90%的無(wú)效告警，抑制告警風(fēng)暴，有效避免誤報(bào)和漏報(bào)，直達(dá)故障根因。

第4章 虛擬機(jī)承載的業(yè)務(wù)狀態(tài)撥測(cè)

? ? ? ? 針對(duì)虛擬機(jī)所支撐的業(yè)務(wù)應(yīng)用性能與用戶(hù)體驗(yàn)進(jìn)行檢測(cè)分析，無(wú)需安裝插件就可以為用戶(hù)提供開(kāi)箱即用的企業(yè)級(jí)主動(dòng)撥測(cè)式業(yè)務(wù)監(jiān)測(cè)。以拓?fù)湫问秸故久總€(gè)業(yè)務(wù)流程中的每臺(tái)相關(guān)設(shè)備，支持設(shè)備邏輯視圖和面板視圖，展示業(yè)務(wù)流程中涉及的所有的設(shè)備之間的鏈路關(guān)系，流程方向。

? ? ? ? 構(gòu)建包含各業(yè)務(wù)整體流程的調(diào)用依賴(lài)關(guān)系圖譜，展示業(yè)務(wù)部署中網(wǎng)絡(luò)設(shè)備間多維度關(guān)系拓?fù)洹?duì)從業(yè)務(wù)的前臺(tái)受理到真正完成的整個(gè)業(yè)務(wù)流程所依賴(lài)的業(yè)務(wù)應(yīng)用、虛擬化、操作系統(tǒng)等進(jìn)行實(shí)時(shí)監(jiān)控分析，呈現(xiàn)業(yè)務(wù)各節(jié)點(diǎn)的實(shí)時(shí)運(yùn)行狀態(tài)，包括用戶(hù)體驗(yàn)、節(jié)點(diǎn)可用性、節(jié)點(diǎn)負(fù)載等狀態(tài)信息，快速定位業(yè)務(wù)瓶頸根因，并可根據(jù)用戶(hù)自愈策略，觸發(fā)自動(dòng)運(yùn)維實(shí)現(xiàn)故障自愈。

第5章 統(tǒng)計(jì)報(bào)表和大屏展示

? ? ? ? 通過(guò)定義虛擬機(jī)相關(guān)數(shù)據(jù)報(bào)表的能力，實(shí)現(xiàn)虛擬機(jī)性能和狀態(tài)的靈活展現(xiàn)和統(tǒng)計(jì)分析，通過(guò)對(duì)比、TOPN等分析方式并結(jié)合報(bào)表排序規(guī)則、過(guò)濾規(guī)則等能力，周期自動(dòng)生成報(bào)表，幫助用戶(hù)更好地了解虛擬機(jī)的各項(xiàng)負(fù)載情況和運(yùn)行態(tài)勢(shì)，為優(yōu)化資源配置和性能調(diào)整提供依據(jù)。

? ? ? ? 通過(guò)大屏展示核心運(yùn)維數(shù)據(jù)態(tài)勢(shì)，細(xì)粒度可達(dá)網(wǎng)絡(luò)中虛擬機(jī)、虛擬機(jī)資源和鏈路。所有的網(wǎng)絡(luò)故障與性能瓶頸都一目了然地呈現(xiàn)，大大降低了管理成本，同時(shí)也提高了運(yùn)維人員處理故障的能力，節(jié)省的故障處理時(shí)間，為運(yùn)維人員管理網(wǎng)絡(luò)提供了可靠的保證。

第6章 虛擬機(jī)遠(yuǎn)程控制和編排式配置

? ? ? ? 方案提供虛擬機(jī)遠(yuǎn)程控制的能力，采用“監(jiān)控+運(yùn)維+控制”的方式，將不同系統(tǒng)、不同版本的虛擬機(jī)統(tǒng)一納入控制管理。通過(guò)智能算法對(duì)虛擬機(jī)的資源配置進(jìn)行智能動(dòng)態(tài)調(diào)整，當(dāng)虛擬機(jī)出現(xiàn)性能瓶頸時(shí)，自動(dòng)調(diào)優(yōu)資源配置，優(yōu)化虛擬機(jī)運(yùn)行環(huán)境，當(dāng)虛擬機(jī)發(fā)生故障時(shí)，自動(dòng)啟動(dòng)自愈機(jī)制，快速恢復(fù)虛擬機(jī)的正常運(yùn)行。

6.1.虛擬機(jī)遠(yuǎn)程配置執(zhí)行

? ? ? ? 將周期性、重復(fù)性、規(guī)律性的大量日常虛擬機(jī)維護(hù)工作，如一鍵開(kāi)關(guān)機(jī)、重啟、備份、鏡像、進(jìn)程管理、應(yīng)用管理、容量管理等運(yùn)維工作，轉(zhuǎn)化為依托于平臺(tái)的自動(dòng)執(zhí)行工作流，實(shí)現(xiàn)對(duì)虛擬機(jī)的批量、定時(shí)自動(dòng)化控制管理。

6.2.運(yùn)維編排──以（VMware ESXi虛擬機(jī)磁盤(pán)擴(kuò)容為例）

? ? ? ? 以虛擬機(jī)實(shí)時(shí)監(jiān)控和日志、事件管理為基礎(chǔ)，通過(guò)多指標(biāo)聚合檢測(cè)動(dòng)態(tài)識(shí)別虛擬機(jī)運(yùn)行狀態(tài)，根據(jù)真實(shí)運(yùn)維場(chǎng)景和流量編排自動(dòng)化運(yùn)維作業(yè)流程，減少人工干預(yù)，提高運(yùn)維效率。

下面以VMware ESXi虛擬機(jī)磁盤(pán)擴(kuò)容為例，介紹如何通過(guò)智和網(wǎng)管平臺(tái)實(shí)現(xiàn)虛擬機(jī)運(yùn)維編排。

效果要求：當(dāng)虛擬機(jī)磁盤(pán)容量不足時(shí)，進(jìn)行告警提示，運(yùn)維人員可在核驗(yàn)后一鍵進(jìn)行虛擬機(jī)磁盤(pán)擴(kuò)容。

? ? ? ? 第一步：將需要管理的虛擬機(jī)納入平臺(tái)進(jìn)行監(jiān)控，并設(shè)置虛擬機(jī)磁盤(pán)容量監(jiān)視器，虛擬機(jī)磁盤(pán)空閑率小于10%時(shí)進(jìn)行告警。

? ? ? ? 第二步：進(jìn)入安管模塊的運(yùn)維編排菜單，創(chuàng)建【VMware ESXi虛擬機(jī)磁盤(pán)擴(kuò)容】策略。根據(jù)真實(shí)虛擬機(jī)磁盤(pán)擴(kuò)容過(guò)程，通過(guò)進(jìn)行策略節(jié)點(diǎn)拖拽編排的方式規(guī)劃擴(kuò)容流程。

? ? ? ? 第三步：配置觸發(fā)方式。策略支持自動(dòng)觸發(fā)和手動(dòng)觸發(fā)兩種方式，根據(jù)用戶(hù)實(shí)際運(yùn)維場(chǎng)景和工作流程，本策略適宜選擇手動(dòng)觸發(fā)的形式進(jìn)行虛擬機(jī)磁盤(pán)擴(kuò)容。

? ? ? ? 編排流程配置完成后，當(dāng)出現(xiàn)虛擬機(jī)磁盤(pán)空閑率告警時(shí)，用戶(hù)手動(dòng)觸發(fā)策略對(duì)告警進(jìn)行校驗(yàn)，如空閑率低于預(yù)設(shè)閾值，則自動(dòng)進(jìn)行磁盤(pán)擴(kuò)容。并在執(zhí)行過(guò)程中，對(duì)每一步處置操作進(jìn)行記錄形成日志，確保有跡可查。

第7章 應(yīng)用價(jià)值

? ? ? ? 北京智和信通虛擬機(jī)監(jiān)控運(yùn)維方案，通過(guò)集中運(yùn)維的功能，將分布在不同物理服務(wù)器上的虛擬化環(huán)境進(jìn)行統(tǒng)一管理，在全量監(jiān)控的同時(shí)，簡(jiǎn)化運(yùn)維流程、降低運(yùn)維難度。運(yùn)維人員可以在智和網(wǎng)管平臺(tái)的統(tǒng)一界面上，實(shí)時(shí)監(jiān)控虛擬環(huán)境的運(yùn)行狀態(tài)，并進(jìn)行性能調(diào)優(yōu)、故障排查等操作，大大提高工作效率。

? ? ? ? 通過(guò)方案的實(shí)施實(shí)現(xiàn)對(duì)虛擬化環(huán)境的深入監(jiān)控，運(yùn)維團(tuán)隊(duì)能夠及時(shí)獲取虛擬機(jī)狀態(tài)、系統(tǒng)性能等關(guān)鍵信息，整體運(yùn)維工作從傳統(tǒng)的被動(dòng)響應(yīng)模式轉(zhuǎn)變?yōu)榉e極主動(dòng)的預(yù)防策略。一旦系統(tǒng)檢測(cè)到異常信息，便會(huì)立即觸發(fā)告警機(jī)制，并結(jié)合自動(dòng)化運(yùn)維能力，快速實(shí)現(xiàn)故障自愈。這種轉(zhuǎn)變不僅顯著減少了因虛擬機(jī)故障導(dǎo)致的宕機(jī)時(shí)間，也極大地降低了上層業(yè)務(wù)中斷的風(fēng)險(xiǎn)。

? ? ? ? 得益于方案強(qiáng)大的監(jiān)控模型能力，不僅可以將虛擬機(jī)作為宿主機(jī)的資源進(jìn)行管理，也可以將其作為獨(dú)立的服務(wù)器進(jìn)行運(yùn)維。這樣一來(lái)就給虛擬機(jī)的監(jiān)控和控制提供了更多的可能，如自動(dòng)化部署、磁盤(pán)擴(kuò)容、備份恢復(fù)等等，進(jìn)一步降低運(yùn)維成本，釋放設(shè)備價(jià)值。

? ? ? ? 同時(shí)，通過(guò)對(duì)虛擬化環(huán)境的精確監(jiān)管、全面覆蓋的功能、智能化的運(yùn)維編排和強(qiáng)大的模型擴(kuò)展能力，智和信通虛擬化監(jiān)控運(yùn)維方案正在成為越來(lái)越多用戶(hù)優(yōu)化IT運(yùn)維、提升業(yè)務(wù)連續(xù)性的選擇。