百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

一起看看阿里开源的RPC框架,dubbo是如何做埋点处理的

ccwgpt 2024-09-17 12:50 43 浏览 0 评论

上边几次都是说的单体的拦截埋点,应用的内部进行的,很多的情况系统都是分布式的,怎么去监听RPC(远程过程调用),dubbo,RMI,springcloud,http。只要远程调用,跨进程调用都属于RPC,也不可能所有的能都涉及到,很多公司都有自己的封装,例如阿里的HFS,这次只针对dubbo这种RPC进行调用。

源码:https://github.com/limingios/netFuture/tree/master/源码/『互联网架构』调?链系统工程结构(111)



(一)Dubbo执行过程

对于dubbo的埋点,首先要了解dubbo的执行过程



节点角色说明Provider暴露服务的服务提供方Consumer调用远程服务的服务消费方Registry服务注册与发现的注册中心Monitor统计服务的调用次数和调用时间的监控中心Container服务运行容器

  • Dubbo调用过程


  • 消费者调用过程


(二)调用端埋点实现

  • 埋点目的
  • 1.捕捉消费者调用信息(远程接口、URL、参数、用时、返回结果、异常)
  • 2.传递TraceRequest
  • 调用信息模型表结构

名称类型描述servicePathstring服务路径serviceNamestring服务inParamjson返回结果outParamjson返回结果ErrorMessagestring异常信息ErrorStacktext异常堆栈ResultStatestring执行状态beginTimedate开始时间endTimedate结束时间addressIpstring远程IPfromIpstring调用者IP

  • 埋点位置

如何才能完整的捕捉到以上信息呢?那么就需要了解Dubbo内部的调用

1.分解调用过程为多个步骤。

2.这些步骤分别是在哪些协作线程上完成的?

3.经过了哪些方法?

4.经过了哪些过滤器?

  • 调用过程分解&线程协作


  1. 选择断点位置Debug调试调用过程
  2. 消费者调用线程源码分析:


  • 经过对源码的分析,埋点的位置如下:
  • DubboInvoker.doInvoke()
  • FutureFilter.invoke()
  • DubboInvoker.doInvoke() 方法最靠近调用方,异常捕捉范围较大,但是该位置无法通过Attachment 向下传递TraceRequest 参数,所以需要FutureFilter.invoke() 进行补充,其具体分工如下:
  • ·1.DubboInvoker.doInvoke捕获如下信息: 1、开始时间 2、服务路径 3、服务方法 4、输入参数 5、异常信息 6、本地地址
  • 2.FutureFilter.invoke 基于Attachment 向下传递参数 2、异常信息与堆栈 3、返回结果

DubboInvoker.doInvoke拦截源码参见 :com.cbt.agent.collects.dubbo.DubboConsumerRpcExceptionMonitorHandle#invokerBefore

FutureFilter.invoke拦截源码参见 :

com.cbt.agent.collects.dubbo.DubboConsumerMonitorHandle#invokerBefore

(三)调用端埋点实现

  • 埋点目的
  • 接收TraceRequest信息 ,并创建会话



  • 埋点位置:
  • 相对调用广方接收方埋点目的较简单,但同样需分析源码找准埋点位置
  • 提供者处理线程分析


经分析埋点位置选在离实际调用方法较远的EchoFilter过滤器理由是捕捉的信息更全面。

具体会话开启过程:

  1. 基于Attachment获取TraceId、ParentId、TraceProperties。
  2. 封装TraceRequest ,并此为参数开启会话。
  3. 在调用结束时关闭会话。
  4. 具体源码参见:com.cbt.agent.collects.dubbo.DubboProviderMonitorHandle#invokerBefore



(二)Servlet处理埋点

  • Servlet埋点目的
  • 1.生成TraceId
  • 2.开启关闭监控会话
  • 3.捕捉Http请求(url、客户端IP、参数、响应时长、响应状态码)
  • 埋点埋在哪?
  • 1.每一个Control方法
  • 2.DispatcherServlet.doDispatch方法
  • 3.HttpServlet.service 方法
  • 方案对比

方案优点缺点应用层Control类简单,风险因素低判别成本高,有局限性,只能根据 HttpServlet 子类或@RequestMapping进行识别。DispatcherServlet.doDispatch简单,适应性强1、只能针对spring mvc 项目 2、spring boot 项目不支持HttpServlet.service适应性强,与应用层和框架无关1、不同的容器ClassPath不一样,存在兼容性问题。 2、存在风险,几乎所有请求都会经过此方法 3、业务异常无法捕获

总合比较还是选择 HttpServlet.service 会更好些。

  • HttpServlet.service 埋点需要做的工作:
  • 1.字节码插桩
  • 2.请求拦截并获取请求信息
  • 字节码插桩流程

字节码插是指在数据装载前在HttpServlet.service 插入监控指令,以拦截Http请求,其插桩的过程。



请求拦截是指具体Http请求过来时进行拦截过滤,这么做主要是为了完成两个目的

1.开启监控会话

2.开启对Servlet响应过程的监控




(三)Redis 调用埋点



  • 埋点可选方案

方案优点缺点埋点jedis 类Get、Set等API方法简单直接工作量大,方法较多、需要了解每个方法特性埋点 Connection sendCommand方法全面、所有命令都会经过此方法存在未知风险、不方便计算执行时间、和返回结果埋点 Protocol全面、所有命令都会经过此方法存在未知风险、不方便计算执行时间、和返回结果



PS:源码中可以查看DevelopBootMain类,我看这代码也看了2天,原来老写业务代码,看看这确实很容易懵X,确实这才是有技术含量的代码。其实有没有技术含量不太重要,重要是的有没有商业价值。

相关推荐

2025南通中考作文解读之四:结构框架

文题《继续走,迈向远方》结构框架:清晰叙事,层层递进示例结构:1.开头(点题):用环境描写或比喻引出“走”与“远方”,如“人生如一条长路,每一次驻足后,都需要继续走,才能看见更美的风景”。2.中间...

高中数学的知识框架(高中数学知识框架图第三章)

高中数学的知识框架可以划分为多个核心板块,每个板块包含具体的知识点与内容,以下为详细的知识框架结构:基础知识1.集合与逻辑用语:涵盖集合的概念、表示方式、性质、运算,以及命题、四种命题关系、充分条件...

决定人生的六大框架(决定人生的要素)

45岁的自己混到今天,其实是失败的,要是早点意识到影响人生的六大框架,也不至于今天的模样啊!排第一的是环境,不是有句话叫人是环境的产物,身边的环境包括身边的人和事,这些都会对一个人产生深远的影响。其次...

2023年想考过一级造价师土建计量,看这30个知识点(三)

第二章工程构造考点一:工业建筑分类[考频分析]★★★1.按厂房层数分:(1)单层厂房;(2)多层厂房;(3)混合层数厂房。2.按工业建筑用途分:(1)生产厂房;(2)生产辅助厂房;(3)动力用厂房;(...

一级建造师习题集-建筑工程实务(第一章-第二节-2)

建筑工程管理与实务题库(章节练习)第一章建筑工程技术第二节结构设计与构造二、结构设计1.常见建筑结构体系中,适用建筑高度最小的是()。A.框架结构体系B.剪力墙结构体系C.框架-剪力墙结构体系D...

冷眼读书丨多塔斜拉桥,这么美又这么牛

”重大交通基础设施的建设是国民经济和社会发展的先导,是交通运输行业新技术集中应用与创新的综合体现。多塔斜拉桥因跨越能力强、地形适应性强、造型优美等特点,备受桥梁设计者的青睐,在未来跨越海峡工程中将得...

2021一级造价师土建计量知识点:民用建筑分类

2021造价考试备考开始了,学霸君为大家整理了一级造价师备考所用的知识点,希望对大家的备考道路上有所帮助。  民用建筑分类  一、按层数和高度分  1.住宅建筑按层数分类:1~3层为低层住宅,4~6层...

6个建筑结构常见类型,你都知道吗?

建筑结构是建筑物中支承荷载(作用)起骨架作用的体系。结构是由构件组成的。构件有拉(压)杆、梁、板、柱、拱、壳、薄膜、索、基础等。常见的建筑结构类型有6种:砖混结构、砖木结构、框架结构、钢筋混凝土结构、...

框架结构设计经验总结(框架结构设计应注意哪些问题)

1.结构设计说明主要是设计依据,抗震等级,人防等级,地基情况及承载力,防潮抗渗做法,活荷载值,材料等级,施工中的注意事项,选用详图,通用详图或节点,以及在施工图中未画出而通过说明来表达的信息。2.各...

浅谈混凝土框架结构设计(混凝土框架结构设计主要内容)

浅谈混凝土框架结构设计 摘要:结构设计是个系统的全面的工作,需要扎实的理论知识功底,灵活创新的思维和严肃认真负责的工作态度。钢筋混凝土框架结构虽然相对简单,但设计中仍有很多需要注意的问题。本文针...

2022一级建造师《建筑实务》1A412020 结构设计 精细考点整理

历年真题分布统计1A412021常用建筑结构体系和应用一、混合结构体系【2012-3】指楼盖和屋盖采用钢筋混凝土或钢木结构,而墙和柱采用砌体结构建造的房屋,大多用在住宅、办公楼、教学楼建筑中。优点:...

破土动工!这个故宫“分院”科技含量有点儿高

故宫“分院”设计图。受访者供图近日,位于北京海淀区西北旺镇的故宫北院区项目已开始破土动工,该项目也被称作故宫“分院”,筹备近十年之久。据悉,故宫本院每年展览文物的数量不到1万件,但是“分院”建成后,预...

装配式结构体系介绍(上)(装配式结构如何设计)

PC构件深化、构件之间连接节点做法等与相应装配式结构体系密切相关。本节列举目前常见的几种装配式结构体系:装配整体式混凝土剪力墙结构体系、装配整体式混凝土框架结构体系、装配整体式混凝土空腔结构体系(S...

这些不是双向抗侧结构体系(这些不是双向抗侧结构体系的特点)

双向抗侧土木吧规范对双向抗恻力结构有何规定?为何不应采用单向有墙的结构?双向抗侧土木吧1.规范对双向抗侧力结构体系的要求抗侧力体系是指抵抗水平地震作用及风荷载的结构体系。对于结构体系的布置,规范针对...

2022一级建造师《建筑实务》1A412020 结构设计 精细化考点整理

1A412021常用建筑结构体系和应用一、混合结构体系【2012-3】指楼盖和屋盖采用钢筋混凝土或钢木结构,而墙和柱采用砌体结构建造的房屋,大多用在住宅、办公楼、教学楼建筑中。优点:抗压强度高,造价...

取消回复欢迎 发表评论: