摘要：?作為鷹眼的商業(yè)化產(chǎn)品，用于全鏈路APM監(jiān)控的阿里云業(yè)務(wù)實(shí)時(shí)監(jiān)控服務(wù) (ARMS) ， 基于鷹眼的全息排查沉淀，近日推出了基于分布式調(diào)用鏈監(jiān)控技術(shù)的全息排查功能，將該功能提供給廣大用戶。

作為鷹眼的商業(yè)化產(chǎn)品，用于全鏈路APM監(jiān)控的阿里云業(yè)務(wù)實(shí)時(shí)監(jiān)控服務(wù) (ARMS) ， 基于鷹眼的全息排查沉淀，近日推出了基于分布式調(diào)用鏈監(jiān)控技術(shù)的全息排查功能，將該功能提供給廣大用戶。至此，ARMS鏈路的分布式鏈路追蹤功能結(jié)合周邊的本地堆棧排查，性能Metrics統(tǒng)計(jì)，業(yè)務(wù)全息排查三大附加功能，形成了完整的鏈路監(jiān)控解決方案。

為方便用戶了解ARMS 基于分布式鏈路追蹤技術(shù)的全息排查功能解決的問(wèn)題和主要的使用場(chǎng)景，下文在這方面簡(jiǎn)單展開(kāi)做一下介紹。

分布式鏈路追蹤概要介紹和其面臨的主要問(wèn)題

分布式調(diào)用鏈?zhǔn)俏⒎?wù)時(shí)代下的監(jiān)控必備利器。該技術(shù)理論基礎(chǔ)建立在Google Dapper論文基礎(chǔ)之上，主要運(yùn)用于分布式微服務(wù)場(chǎng)景下的鏈路診斷場(chǎng)景，用戶可快速的定位分布式環(huán)境下的調(diào)用問(wèn)題診斷。國(guó)內(nèi)外常見(jiàn)的這方面技術(shù)的互聯(lián)網(wǎng)產(chǎn)品已有很多，其中：

• 在開(kāi)源領(lǐng)域有Zipkin, Skywalking, Pinpoint,

• 國(guó)內(nèi)外互聯(lián)網(wǎng)公司比較著名的是阿里的淘寶鷹眼(國(guó)內(nèi)大廠最早的分布式調(diào)用鏈監(jiān)控的實(shí)現(xiàn))和阿里云ARMS (鷹眼商用版)，F(xiàn)acebook的OpenZipkin，還有其他如京東，網(wǎng)易等一些對(duì)應(yīng)的實(shí)現(xiàn)。

分布式調(diào)用鏈在分布式調(diào)用的鏈路入口和出口通常會(huì)記錄調(diào)用時(shí)差，返回狀態(tài)，以及對(duì)應(yīng)的機(jī)器或應(yīng)用的元信息狀態(tài)，因此應(yīng)用的常規(guī)場(chǎng)景通常是某段時(shí)間和某個(gè)應(yīng)用入口的情況下，查詢錯(cuò)誤異?；蛘叱瑫r(shí)的調(diào)用鏈。如Zipkin調(diào)用鏈查詢?nèi)缦聢D所示。

但是針對(duì)包含業(yè)務(wù)語(yǔ)義的特定故障診斷卻稍顯乏力。試腦補(bǔ)以下場(chǎng)景，如下圖。

以上場(chǎng)景如果不將分布式調(diào)用鏈和業(yè)務(wù)內(nèi)容進(jìn)行關(guān)聯(lián)，通常是很難定位到具體的問(wèn)題調(diào)用鏈的。顯然，常規(guī)的分布式調(diào)用鏈監(jiān)控技術(shù)是無(wú)法勝任以上情況。

帶全息排查功能的分布式調(diào)用鏈查詢

作為國(guó)內(nèi)互聯(lián)網(wǎng)大廠的老牌鏈路監(jiān)控工具，鷹眼于2014年左右就推出了全息排查功能，可以在調(diào)用鏈中關(guān)聯(lián)業(yè)務(wù)信息(BizID)進(jìn)行鏈路查詢。鷹眼全息排查的關(guān)鍵在于：業(yè)務(wù)事件id與分布式調(diào)用鏈元信息TraceId的雙向綁定，從而在技術(shù)上解決了業(yè)務(wù)信息(BizID)和調(diào)用鏈信息(TraceID)的關(guān)聯(lián)問(wèn)題。

業(yè)務(wù)全息排查的場(chǎng)景有很多，這里試舉一例。例如一個(gè)交易訂單（2135897412389123）發(fā)現(xiàn)存在問(wèn)題，我們可以根據(jù)訂單號(hào)查到與之綁定的TraceId，根據(jù)TraceId不僅可以查看系統(tǒng)調(diào)用的事件，還可以看到與業(yè)務(wù)相關(guān)的事件，如用戶下單、當(dāng)前庫(kù)存情況等，也就是說(shuō)根據(jù)交易ID可以在調(diào)用鏈上查看交易、商品庫(kù)存以及支付等信息，大大提升錯(cuò)誤排查速度。相關(guān)排查如下圖所示。

用于全鏈路APM監(jiān)控的阿里云業(yè)務(wù)實(shí)時(shí)監(jiān)控服務(wù) (ARMS) ， 推出的基于分布式調(diào)用鏈監(jiān)控技術(shù)的全息排查功能，則是基于鷹眼的全息排查沉淀，解決的問(wèn)題和上文一致。下面我們看看ARMS全息排查的使用細(xì)節(jié)。

三步走使用ARMS帶全息排查功能的分布式調(diào)用鏈查詢

和鷹眼類(lèi)似，ARMS全息排查解決問(wèn)題的核心思路是將用戶的業(yè)務(wù)內(nèi)容 (簡(jiǎn)稱BizID) 和相關(guān)調(diào)用鏈的TraceID做關(guān)聯(lián)，來(lái)支持通過(guò)業(yè)務(wù)屬性來(lái)查詢對(duì)應(yīng)的問(wèn)題調(diào)用鏈。以下簡(jiǎn)單介紹如何上手ARMS全息排查功能。其操作的基本場(chǎng)景架構(gòu)如下圖。

以下簡(jiǎn)單敘述每步含義。關(guān)于全息排查的更多使用詳解可參見(jiàn)全息排查最佳實(shí)踐。

• 第一步，開(kāi)發(fā)者在程序中通過(guò)ARMS提供的獲取Trace信息的SDK來(lái)打印包含Trace信息的業(yè)務(wù)日志。

SDK使用示例如下：
Span span = Tracer.builder().getSpan();?
String traceId = span.getTraceId();?
String rpcId = span.getRpcId();

打印的日志參考內(nèi)容如下：
2018-07-12 >11:37:40|1e057c4015313666599651005d1201|0|username=xiao,age=22,action=login?
2018-07-12 >11:37:40|1e057c4015313666599651005d1201|0|username=xiao,age=22,action=search?
2018-07-12 >11:37:40|1e057c4015313666599651005d1201|0|username=xiao,age=22,action=cart

• 第二步，運(yùn)維人員在ARMS控制臺(tái)上配置抓取、清洗業(yè)務(wù)日志的任務(wù)，將其關(guān)聯(lián)到對(duì)應(yīng)的鏈路追蹤系統(tǒng)。配置的參考示例如下：
  

• 第三步，在ARMS上開(kāi)啟應(yīng)用監(jiān)控，開(kāi)始全息排查。?

ARMS的全息排查入口和以往的應(yīng)用調(diào)用鏈即系查詢?nèi)肟诒３忠恢隆５菍?duì)比以往用戶除了根據(jù)應(yīng)用名，調(diào)用入口，響應(yīng)時(shí)長(zhǎng)進(jìn)行查詢意外，還可以根據(jù)業(yè)務(wù)信息(BizID)進(jìn)行問(wèn)題調(diào)用鏈的查詢，從而指數(shù)級(jí)的提高了問(wèn)題診斷查詢效率。如查詢username為kevin.yang的鏈路信息，查詢示例如下：

同時(shí)，ARMS還開(kāi)放具體的全息排查事件查詢，方便用戶直接查看日志原始信息。如查詢username為kevin.yang的日志信息，查詢示例如下：

結(jié)語(yǔ)

作為國(guó)內(nèi)分布式鏈路追蹤領(lǐng)域的老牌產(chǎn)品"阿里巴巴鷹眼"的商業(yè)化產(chǎn)品，阿里云業(yè)務(wù)實(shí)時(shí)監(jiān)控服務(wù) (ARMS)?的全息排查功能讓用戶的調(diào)用鏈診斷和業(yè)務(wù)信息充分關(guān)聯(lián)，在分布式環(huán)境下指數(shù)級(jí)提高問(wèn)題診斷效率。歡迎各位試用。

原文鏈接

本文為云棲社區(qū)原創(chuàng)內(nèi)容，未經(jīng)允許不得轉(zhuǎn)載。