最近嘉為藍(lán)鯨WeOps研發(fā)的五款數(shù)據(jù)庫監(jiān)控插件在藍(lán)鯨S-mart市場(點(diǎn)擊跳轉(zhuǎn))上架啦!為了確保監(jiān)控插件的兼容性、穩(wěn)定性和安全性,研發(fā)團(tuán)隊做了大量的測試優(yōu)化,甚至還用到了混沌工程。接下來,讓我們一起看看如何打造出高質(zhì)量的監(jiān)控插件吧!
S-mart市場是騰訊藍(lán)鯨推出的一款云原生應(yīng)用市場,為用戶免費(fèi)提供一些基于藍(lán)鯨開源平臺的云原生應(yīng)用系統(tǒng)、運(yùn)維腳本工具、以及一些實用插件。
說明:插件可在藍(lán)鯨監(jiān)控平臺導(dǎo)入使用,藍(lán)鯨平臺版本不低于V6.1
01. 研發(fā)背景
藍(lán)鯨監(jiān)控平臺兼容Prometheus Exporter、Datadog Agent等各種開源的監(jiān)控采集插件,運(yùn)維人員利用開源社區(qū)可以快捷地將各類IT對象納入監(jiān)控。
但開源社區(qū)中的監(jiān)控插件質(zhì)量往往無法得到保證,主要體現(xiàn)在以下幾個方面:
穩(wěn)定性:
一些監(jiān)控插件沒有經(jīng)過專業(yè)測試,在使用過程中出現(xiàn)運(yùn)行崩潰、內(nèi)存泄露、大量占用系統(tǒng)資源等問題,嚴(yán)重時甚至影響業(yè)務(wù)系統(tǒng)的正常運(yùn)行;
兼容性:
監(jiān)控插件通常是針對IT組件的固定版本,在其他版本上使用時可能出現(xiàn)采集不到數(shù)據(jù)或采集到錯誤數(shù)據(jù)的問題;
安全性:
當(dāng)監(jiān)控插件存在安全隱患或被植入了病毒代碼,將會造成無法估量的損失;
易用性:
大部分開源社區(qū)的監(jiān)控插件是純英文,指標(biāo)和介紹不易閱讀理解;同時也存在插件需要經(jīng)過改造才能在藍(lán)鯨監(jiān)控平臺上使用的情況。
為此,我們基于開源社區(qū),經(jīng)過十道嚴(yán)格的工序?qū)ΡO(jiān)控插件進(jìn)行篩選、測試、優(yōu)化改造與驗證,制作成更適合藍(lán)鯨監(jiān)控體系的五大數(shù)據(jù)庫監(jiān)控插件,并免費(fèi)回饋給藍(lán)鯨社區(qū),讓運(yùn)維人員的工作更加輕松和高效。
02. 制作工序
1)挑選經(jīng)過大眾檢驗的插件
精選Prometheus社區(qū)官方建議的數(shù)據(jù)庫插件及其他開源數(shù)據(jù)庫插件。
2)精選拓展性好的插件
部分插件由于編寫語言不支持,無法在藍(lán)鯨正常采集的,需尋找替代插件并補(bǔ)全需要的指標(biāo)(如MySQL router exporter)
3)搭建84個版本環(huán)境測試兼容性
使用Jenkins流水線在集群內(nèi)部署容器,測試了84個不同模式或版本的數(shù)據(jù)庫使用情況,得到每個探針的版本兼容性數(shù)據(jù)。
4)甄選出重要的監(jiān)控指標(biāo)
只保留運(yùn)維工作中需要關(guān)注的指標(biāo),避免信息過載。
5)使用Chaos混沌工程進(jìn)行隨機(jī)破壞與壓力測試
通過Chaos混沌工程,模擬了探針在高負(fù)載,故障等復(fù)雜情況下的運(yùn)行狀況,為探針的性能和穩(wěn)定性提供保證。
6)隱藏敏感信息,改進(jìn)探針的安全性
優(yōu)化前:賬號密碼在后臺顯示
優(yōu)化后:賬號密碼已隱藏
7)指標(biāo)漢化
8)適配藍(lán)鯨監(jiān)控平臺
優(yōu)化前:導(dǎo)入插件存在各類異常報錯問題
優(yōu)化后:導(dǎo)入插件即可直接使用
9)編寫使用文檔
優(yōu)化前:開源的配置文件不能指導(dǎo)如何在藍(lán)鯨平臺配置
優(yōu)化后:添加進(jìn)行藍(lán)鯨采集的配置說明
10)封裝打包
優(yōu)化前:需要配置腳本文件
優(yōu)化后:一鍵導(dǎo)入
新的數(shù)據(jù)庫監(jiān)控插件具有簡單易用、多樣化監(jiān)控、實時監(jiān)控、數(shù)據(jù)可視化、安全可靠等多種優(yōu)勢,是企業(yè)實現(xiàn)數(shù)據(jù)庫監(jiān)控的不二選擇。
03. 使用方法
以MySQL為例,首先進(jìn)入S-mart市場MySQL監(jiān)控插件產(chǎn)品詳情,點(diǎn)擊【立即下載】下載插件。
進(jìn)入監(jiān)控平臺,點(diǎn)擊【集成】板塊,點(diǎn)擊【導(dǎo)入】上傳監(jiān)控插件。
按照步驟指引和內(nèi)置的使用文檔完成配置。
04. 效果展示
上述工具及部署指南已上架藍(lán)鯨S-mart市場及Github,點(diǎn)擊下方鏈接進(jìn)行查看/下載。詳細(xì)介紹請點(diǎn)擊底部閱讀原文可獲取插件說明文檔。
S-mart 市場:https://bk.tencent.com/s-mart/market?sys_type=2&user_type=2&best_type=1&page_size=12
Github:https://github.com/orgs/WeOps-Lab/repositories?type=all
05. 社區(qū)貢獻(xiàn)
作為騰訊藍(lán)鯨的一級合作伙伴,嘉為藍(lán)鯨7年來致力于共建藍(lán)鯨開源社區(qū),在監(jiān)控插件、腳本工具、應(yīng)用系統(tǒng)等各板塊持續(xù)輸出內(nèi)容,推動藍(lán)鯨社區(qū)的開源生態(tài)的發(fā)展和創(chuàng)新。歡迎大家下載使用,給我們提供寶貴的建議和反饋!
嘉為藍(lán)鯨CPack制品管理平臺:聯(lián)邦倉庫——助力跨團(tuán)隊、跨地域、跨組織的制品資產(chǎn)協(xié)作
查看詳細(xì)
嘉為藍(lán)鯨CMeas研發(fā)效能洞察平臺:一鍵保存你的專屬查詢儀表板
查看詳細(xì)
嘉為藍(lán)鯨WeOps數(shù)據(jù)庫監(jiān)控新范式:以專業(yè)監(jiān)控視圖,賦能高效運(yùn)維管理
查看詳細(xì)
Jira國產(chǎn)化替代:從合規(guī)到價值,嘉為藍(lán)鯨DevOps敏捷協(xié)同平臺的破局之道
查看詳細(xì)
嘉為藍(lán)鯨CCI持續(xù)集成平臺:掌控CI/CD全流程,流水線Stage準(zhǔn)入讓部署更可靠
查看詳細(xì)
嘉為藍(lán)鯨CMeas研發(fā)效能洞察平臺:研發(fā)效能周報,自動推送領(lǐng)導(dǎo)郵箱
查看詳細(xì)
申請演示