中間件和數(shù)據(jù)庫組件監(jiān)控：中間件和數(shù)據(jù)庫組件都統(tǒng)一提供sidecar模式部署的exporter進行指標采集，并配置監(jiān)控告警。如果不是集群納管的數(shù)據(jù)庫，也可以開發(fā)自定義exporter（kingbase、greatdb等國產(chǎn)數(shù)據(jù)庫都走這個方式），也可以開發(fā)指標推到Prometheus的pushgateway（polardb國產(chǎn)數(shù)據(jù)庫走這個方式），還可以配置Prometheus去拉取各組件的metrics（etcd等中間件有提供標準的metrics）。

各業(yè)務集群怎么部署監(jiān)控組件各業(yè)務集群都單獨部署Prometheus和grafana；在集群各節(jié)點部署有kubelet客戶端和demonset模式的node-exporter；在集群管理節(jié)點部署Deloyment模式的kube-state-metrics；而k8s的管理組件kube-scheduler、control-manager、etcd自帶metrics，不需要部署任何采集工具，而是在Prometheus的配置文件中配置各組件的metrics地址獲取指標數(shù)據(jù)；中間件和數(shù)據(jù)庫組件內(nèi)帶有Sidecar模式的xxx-exporter（比如mysql-exporter），部署中間件和數(shù)據(jù)庫時就開始收集監(jiān)控數(shù)據(jù)。 Argus單一業(yè)務環(huán)境下可以支持多 組采集單元（多zabbix-server），實現(xiàn)真正意義上的分布式采集。湖北運維監(jiān)控共同合作

在發(fā)展“國內(nèi)循環(huán)為主體、國內(nèi)國際雙循環(huán)互相促進的新發(fā)展格局”的關鍵時期，為了加強和完善國家創(chuàng)新體系建設，提升產(chǎn)業(yè)基礎能力和產(chǎn)業(yè)鏈水平，在第十三屆全國人大會常務委員會中修訂通過了《中華人民共和國科學技術進步法》，明確表示優(yōu)先采購國內(nèi)信息技術創(chuàng)新產(chǎn)品。據(jù)《2021年中國信創(chuàng)生態(tài)研究報告》顯示，未來在國家政策的推動下，中國信創(chuàng)行業(yè)發(fā)展?jié)摿Υ?，預計2025年市場規(guī)模將達8000億元。

觀縱始終走在自主研發(fā)的前沿，現(xiàn)在已經(jīng)形成了從IT運維監(jiān)控、電力運維到IoT運維的產(chǎn)業(yè)布局。作為在信創(chuàng)產(chǎn)業(yè)中持續(xù)耕耘的企業(yè)，目前觀縱已經(jīng)申報專利和產(chǎn)品軟著，并獲得ISO、ITSS、AIOps標準符合性、高新、知識產(chǎn)權(quán)管理體系、CMMI等多項認證，以及多家廠商對觀縱信創(chuàng)產(chǎn)品的適配認證。 要求運維監(jiān)控什么價格Argus運維監(jiān)控系統(tǒng)撥測分析模塊，從端口可用性等多個指標、維度進行撥測分析。

大集群場景特點數(shù)據(jù)規(guī)模大：監(jiān)控對象targets多，數(shù)千萬時序數(shù)據(jù)time-series，單Prometheus負載非常高。

當series數(shù)據(jù)超過300萬時，Prometheus內(nèi)存增長較為明顯，需要使用較大內(nèi)存的機器來運行。壓測過程中，我們使用了工具去生成預期數(shù)目的series，工具生成的series每個label的長度及值的長度都較小，固定為10個字符左右。我們的目的是觀察相對負載變化，實際生產(chǎn)中由于label長度不同，服務發(fā)現(xiàn)機制（比如Pod頻繁重啟）的消耗不同，相同的series數(shù)目所消耗的負載會比壓測中高不少。目前Argus有好幾個集群的采集端Prometheus消耗內(nèi)存在30G以上，這會導致查詢效率下降，嚴重的會導致OOM，有的大集群內(nèi)存消耗達幾百G。

Argus運維監(jiān)控系統(tǒng)基于ZABBIX的預處理及自動發(fā)現(xiàn)功能，有效整合PROMETHEUS。

環(huán)境復雜 ：在現(xiàn)有的架構(gòu)環(huán)境中，既有虛擬主機，又有 Kubernets 集群 

監(jiān)控工具多 ： 在現(xiàn)有的環(huán)境中的監(jiān)控工具既有zabbix，又有 prometheus § Zabbix的監(jiān)控項及Prometheus的配置仍為大量的 手工操作 § 每套工具有單獨的技術棧，維護成本高 

無統(tǒng)一化告警人管理 ：zabbix及grafana中都有告警人配置

數(shù)據(jù)采集 ： Prometheus 負責Exporter及 Kubernets集群的 監(jiān)控項采集，并單獨于Kubernets集群外部署 § Zabbix負責虛擬主機監(jiān)控項的采集 

事件處理 ： Zabbix 通過HTTP agent 方式查詢不同的 prometheus 采集節(jié)點，并通過監(jiān)控項模板中監(jiān)控項 的預處理及自動發(fā)現(xiàn)功能自動創(chuàng)建不同應用名稱的監(jiān) 控項及監(jiān)控項閾值 § Zabbix 通過不同監(jiān)控項的當前數(shù)據(jù)判斷閾值并觸 發(fā)不同閾值級別下相應的動作 § 各閾值動作通過應用名關聯(lián)不同的用戶組，觸發(fā) 釘釘通知到對應的研發(fā)團隊 快來看看常用的運維監(jiān)控必備知識！

Argus運維監(jiān)控基于數(shù)據(jù)治理后重構(gòu)的應用關系拓撲，完成數(shù)據(jù)治 理后關聯(lián)準確度提升60%。 在自動發(fā)現(xiàn)配置信息改變是檢查前后關聯(lián)信息，實 現(xiàn)同步維護，配合定期檢查關聯(lián)缺失數(shù)據(jù)，進行修 正和補充，確保數(shù)據(jù)完整性。 基于圖數(shù)據(jù)庫的特性，解決深度遍歷和多實體關聯(lián) 的性能問題，實現(xiàn)關系拓撲秒級繪制。多維度健康診斷使用預警功能，使故障分析體系提前介入，有效提前故障發(fā)現(xiàn)實現(xiàn)。 每次預警觸發(fā)多維度分析，有效抑制無效告警，部分場景可實現(xiàn)根因定界。 分析模型使用成熟后，可以直接加入回復型作業(yè)節(jié)點，形成故障自愈體系。 對于運維監(jiān)控的告警信息，應該如何分析，或者說應該從哪些方向去分析呢？山西運維監(jiān)控管理

我們要運維監(jiān)控這個東西的什么屬性？比如CPU的使用率、負載、用戶態(tài)、內(nèi)核態(tài)、上下文切換。湖北運維監(jiān)控共同合作

Prometheus指標采集和查詢存儲方案-2020年

我們分一級監(jiān)控平臺和二級集群Prometheus監(jiān)控采集組件。一級提供kafka集群和Prometheus聚合組件，二級各集群部署Prometheus和Prometheus-kafka-adapter組件，采集和遠程送數(shù)據(jù)到一級的kafka集群。

該方案優(yōu)點：

1.業(yè)務系統(tǒng)可以跨集群聚合數(shù)據(jù)，如圖k8s集群-1和k8s集群-2數(shù)據(jù)聚合到Top-1的Prometheus上。

2.一級監(jiān)控平臺上只要有足夠的cpu、存儲資源，理論上可以水平擴展接入更多集群。2020年底采集的指標量每天3194億的量級，吞吐量達370萬/s。

3.采集端Prometheus可以保留極少數(shù)據(jù)，比如6小時的數(shù)據(jù)，減少資源消耗。而上層Prometheus由于落數(shù)據(jù)到時序數(shù)據(jù)庫influxdb中，可以保存一個月數(shù)據(jù)量甚至更多。

該方案沒做到什么：

1.采集端Prometheus擴容問題，單集群中數(shù)據(jù)規(guī)模受Prometheus原生的限制。

2.一級監(jiān)控平臺上時序數(shù)據(jù)庫influxdb有單點問題，數(shù)據(jù)規(guī)模和數(shù)據(jù)安全性受其影響。 湖北運維監(jiān)控共同合作

上海觀縱科技有限公司是一家從事webfunny前端監(jiān)控，webfunny前端埋點，全鏈路應用性能監(jiān)控，Argus-IT運維監(jiān)控研發(fā)、生產(chǎn)、銷售及售后的服務型企業(yè)。公司坐落在上海市奉賢區(qū)望園南路1288弄80號1904、1909室，成立于2022-11-14。公司通過創(chuàng)新型可持續(xù)發(fā)展為重心理念，以客戶滿意為重要標準。webfunny,walkingfunny,argus目前推出了webfunny前端監(jiān)控，webfunny前端埋點，全鏈路應用性能監(jiān)控，Argus-IT運維監(jiān)控等多款產(chǎn)品，已經(jīng)和行業(yè)內(nèi)多家企業(yè)建立合作伙伴關系，目前產(chǎn)品已經(jīng)應用于多個領域。我們堅持技術創(chuàng)新，把握市場關鍵需求，以重心技術能力，助力傳媒、廣電發(fā)展。上海觀縱科技有限公司研發(fā)團隊不斷緊跟webfunny前端監(jiān)控，webfunny前端埋點，全鏈路應用性能監(jiān)控，Argus-IT運維監(jiān)控行業(yè)發(fā)展趨勢，研發(fā)與改進新的產(chǎn)品，從而保證公司在新技術研發(fā)方面不斷提升，確保公司產(chǎn)品符合行業(yè)標準和要求。上海觀縱科技有限公司注重以人為本、團隊合作的企業(yè)文化，通過保證webfunny前端監(jiān)控，webfunny前端埋點，全鏈路應用性能監(jiān)控，Argus-IT運維監(jiān)控產(chǎn)品質(zhì)量合格，以誠信經(jīng)營、用戶至上、價格合理來服務客戶。建立一切以客戶需求為前提的工作目標，真誠歡迎新老客戶前來洽談業(yè)務。