監(jiān)控什么？

作為開發(fā)人員，不僅僅是把功能開發(fā)出來就行了，對(duì)于你負(fù)責(zé)的產(chǎn)品或者模塊，你需要對(duì)它有足夠的了解，時(shí)時(shí)刻刻需要關(guān)注著，要有初戀的那種感覺才行。

以電商最常見的下單功能來說，比如我想知道下單的成功率多少，下單的平均耗時(shí)，下單失敗中有多少是因?yàn)閹齑娌蛔阆聠问〉牡鹊冗@類相關(guān)的信息。

有了這些業(yè)務(wù)指標(biāo)信息，你就能知道你負(fù)責(zé)的產(chǎn)品現(xiàn)狀是什么樣的，以及你需要做哪些改進(jìn)。

至于要監(jiān)控哪些指標(biāo)，得跟著你的業(yè)務(wù)走。目的很明確，就是需要知道業(yè)務(wù)的狀況，并在某些時(shí)候能夠觸發(fā)告警。

實(shí)現(xiàn)方式

基于埋點(diǎn)的方式來進(jìn)行數(shù)據(jù)的記錄，記錄到本地磁盤文件中，然后通過統(tǒng)一的日志收集程序收集存儲(chǔ)，統(tǒng)計(jì)展示以及告警。

之所以基于埋點(diǎn)的方式實(shí)現(xiàn)是因?yàn)樾枰烂總€(gè)業(yè)務(wù)接口的執(zhí)行結(jié)果，成功還是失敗，失敗的原因是什么。我們對(duì)于每個(gè)異常都定義了業(yè)務(wù)碼，可以根據(jù)業(yè)務(wù)碼知道異常原因。

如果用寫日志的方式輸出數(shù)據(jù)，記得將業(yè)務(wù)日志的數(shù)據(jù)文件單獨(dú)出來，不要和系統(tǒng)的日志輸出在一起，否則不好收集解析。

用logback可以單獨(dú)配置一個(gè)appender，我這邊只輸出了我埋點(diǎn)的業(yè)務(wù)數(shù)據(jù)，Json格式的。

%m%n${LOG_EXCEPTION_CONVERSION_WORD:-%wEx}${LOG_HOME_PATH_BIZ}/${APP_NAME}.%d{yyyy-MM-dd}.log7ACCEPTDENY

日志文件內(nèi)容：

{"biz":"confirm","bizCode":500,"domain":"storeOrder","bizId":"86081301","execTime":3,"count":"1","storeId":"1","userId":"740942"}
{"biz":"confirm","bizCode":500,"domain":"storeOrder","bizId":"86081301","errorMessage":"/ by zero","execTime":14,"count":"1","storeId":"1","userId":"740942"}

注解埋點(diǎn)

BizLog注解用于業(yè)務(wù)監(jiān)控埋點(diǎn)，里面具體配置字段說明如下：

• domain: 領(lǐng)域，比如 order,pay
• biz: 業(yè)務(wù)，比如 createOrder,cancelOrder
• bizId: 業(yè)務(wù)ID，比如 orderId
• addition: 擴(kuò)展信息

addition可以配置多個(gè)additionField獲取想要埋點(diǎn)的數(shù)據(jù)，數(shù)據(jù)可以從請(qǐng)求參數(shù)中獲取，也可以從相應(yīng)參數(shù)中獲取，比如訂單創(chuàng)建成功后，會(huì)返回訂單ID, 那么bizId就是從響應(yīng)參數(shù)中獲取。

代碼埋點(diǎn)

某些場(chǎng)景（支付回調(diào)，JOB任務(wù)等）下不太好通過注解方式埋點(diǎn)我們可以采用代碼埋點(diǎn)的方式來實(shí)現(xiàn)。

日志收集

我們用的是阿里云的日志服務(wù)，直接配置logtail即可完成收集工作，界面操作，非常方便。

指標(biāo)展示

埋點(diǎn)原始數(shù)據(jù)

圖表統(tǒng)計(jì)展示

指標(biāo)告警

數(shù)據(jù)都收集上來了，想要關(guān)注哪些指標(biāo)，想要在什么時(shí)候告警，就變得很容易了。比如說某分鐘內(nèi)下單頻繁失敗，這個(gè)時(shí)候你就可以配置告警失敗次數(shù)>N 觸發(fā)告警，當(dāng)收到告警時(shí)，就馬上去排查為什么會(huì)下單失敗了。

關(guān)于作者：尹吉?dú)g，簡(jiǎn)單的技術(shù)愛好者，《Spring Cloud微服務(wù)-全棧技術(shù)與案例解析》, 《Spring Cloud微服務(wù) 入門 實(shí)戰(zhàn)與進(jìn)階》作者, 公眾號(hào)猿天地發(fā)起人。