百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

gRPC-go框架中dns解析器的介绍以及实战测试

ccwgpt 2024-10-13 01:32 125 浏览 0 评论

本篇文章主要是分析一下dnsResolver类型的解析器的核心原理;并且进行实际测试;最后分析一下,当dnsResolver解析失败时,实现重试机制的原理;

1、dnsResolver解析器原理介绍

dns解析器的原理,其实底层调用的是golang自带net包中的LookupHost、LookupSRV、LookupTXT三个函数来实现解析的。通过这三个函数远程去访问dns服务器,最终将用户设置的链接地址转换成后端服务器地址列表。

直接进入grpc-go/internal/resolver/dns/dns_resolver.go中的Build方法:

1.// Build creates and starts a DNS resolver that watches the name resolution of the target.
2.// resolver_conn_wrapper.go 文件里的newCCResolverWrapper方法里调用
3.func (b *dnsBuilder) Build(target resolver.Target, cc resolver.ClientConn, opts resolver.BuildOptions) (resolver.Resolver, error) {
4.   host, port, err := parseTarget(target.Endpoint, defaultPort)
5.   if err != nil {
6.      return nil, err
7.   }

8.   // IP address.
9.   if ipAddr, ok := formatIP(host); ok {
10.      addr := []resolver.Address{{Addr: ipAddr + ":" + port}}
11.      cc.UpdateState(resolver.State{Addresses: addr})
12.      return deadResolver{}, nil
13.   }

14.   // DNS address (non-IP).
15.   ctx, cancel := context.WithCancel(context.Background())
16.   d := &dnsResolver{
17.      host:                 host,
18.      port:                 port,
19.      ctx:                  ctx,
20.      cancel:               cancel,
21.      cc:                   cc,
22.      rn:                   make(chan struct{}, 1),
23.      disableServiceConfig: opts.DisableServiceConfig,
24.   }

25.   if target.Authority == "" {
26.      d.resolver = defaultResolver
27.   } else {
28.      d.resolver, err = customAuthorityResolver(target.Authority)
29.      if err != nil {
30.         return nil, err
31.      }
32.   }

33.   d.wg.Add(1)
34.   go d.watcher()
35.   d.ResolveNow(resolver.ResolveNowOptions{})
36.   return d, nil
37.}

主要代码说明:

  • 第4行:主要是对用户输入的target.Endpoint进行解析,如localhost:50051,sayHello:50051;
  • 第8-13行:如果用户输入的是具体的IP(如192.168.43.214),而不是域名的话,就直接更新cc的状态,最终实现向grpc服务器端发起连接
  • 第16-24行:构建dnsResolver构建结构体
  • 第25-32行:核心目的就是初始化dnsResolver结构体中的resolver,类型是netResolver接口
  • 第34行:启动一个协程,监听;去向dns服务器发起请求,获取注册到dns服务器上的后端服务器地址列表
  • 第35行:调用解析器的ResolveNow方法;

进入ResolveNow方法内部看看:

func (d *dnsResolver) ResolveNow(resolver.ResolveNowOptions) {
   select {
   case d.rn <- struct{}{}:
   default:
   }
}

使用了多路复用器,这里执行的是case分支;如果case不满足的情况下,会执行default。要结合第34行watcher方法里的第7行一起看。
从ResolveNow方法的名称,可以看出来,就是开始解析的意思;其实就是告诉wacther方法里第7行的通道d.rn发送信号,目的解除阻塞,继续执行下面的代码。
点击第34行,进入watcher方法里:

1.func (d *dnsResolver) watcher() {
2.   defer d.wg.Done()
3.   for {
4.      select {
5.      case <-d.ctx.Done():
6.         return
7.      case <-d.rn:
8.      }

9.      state, err := d.lookup()
10.      if err != nil {
11.         d.cc.ReportError(err)
12.      } else {
13.         d.cc.UpdateState(*state)
14.      }

15.      // Sleep to prevent excessive re-resolutions. Incoming resolution requests
16.      // will be queued in d.rn.
17.      t := time.NewTimer(minDNSResRate)
18.      select {
19.      case <-t.C:
20.      case <-d.ctx.Done():
21.           t.Stop()
22.           return
23.      }
24.   }
25.}

watcher方法的核心目的
??调用第9行实现dns解析,获得后端grpc服务器地址,传递给第13行,从而实现grpc客户端向grpc服务器端发起连接请求。
主要代码说明:

  • 第4-8行:是一个select实现的多路复用器;有什么作用呢?
    • 提供退出for循环的出口
    • d.ctx.Done(),如果给解析器的上下文发送结束信号,这里就可以退出for循环了;
    • 第7行:d.rn通道处于阻塞的情况时,阻止程序继续往下执行,可以防止多次dns解析ResolveNow方法里的语句case d.rn <- struct{}{}:可以解除阻塞。
  • 第9行: 调用lookup实现dns地址解析;内部调用的是golang原生自带的net包中的lookupSRV、lookupHost、lookupTXT方法,对三个方法获得的结果转换成grpc框架中的resolver.State结构体即可。这就是dns解析器最核心的原理,最终将用户输入的地址target转换成了grpc服务器地址;
  • 第13行:更新State,最终实现的是向grpc服务器端发起链接请求
  • 第17-23行:使用timer+select实现一个定时器。minDNSResRate的值就是30秒;如果定时器结束时就会执行第19行,如果解析器结束时就会执行第20行。这个定时器有什么目的呢?
    • 如果dns解析失败了的话,防止频繁的解析
    • 解析器结束时,退出for循环

??这个方法使用了for循环,两个select,目的应该是在dns解析失败的情况下,可以提供重试机制;并不是所有的解析器都有重试机制,比方说passthrough解析器里就没有。
??这里为什么会有重试机制呢?
??可能是dns解析器拿到的地址是域名,并不是后端提供服务的地址,需要向dns服务器发起请求来获得;(这里仅仅是一个猜测,或者不同的解析器可以根据实际情况来考虑要不要提供)

2、dnsResolver实际测试

2.1、测试环境说明

我这里的测试环境是在Mac物理机上启动了grpc客户端,grpc服务器端,启动虚拟机;其中虚拟机里安装了centos系统,在centos系统里以容器的方式启动了coredns服务器。具体看下图所示:

如果想了解更多,可以参考下面链接

相关推荐

团队管理“布阵术”:3招让你的团队战斗力爆表!

为何古代军队能够以一当十?为何现代企业有的团队高效似“特种部队”,有的却松散若“游击队”?**答案正隐匿于“布阵术”之中!**今时今日,让我们从古代兵法里萃取3个核心要义,助您塑造一支战斗力爆棚的...

知情人士回应字节大模型团队架构调整

【知情人士回应字节大模型团队架构调整】财联社2月21日电,针对原谷歌DeepMind副总裁吴永辉加入字节跳动后引发的团队调整问题,知情人士回应称:吴永辉博士主要负责AI基础研究探索工作,偏基础研究;A...

豆包大模型团队开源RLHF框架,训练吞吐量最高提升20倍

强化学习(RL)对大模型复杂推理能力提升有关键作用,但其复杂的计算流程对训练和部署也带来了巨大挑战。近日,字节跳动豆包大模型团队与香港大学联合提出HybridFlow。这是一个灵活高效的RL/RL...

创业团队如何设计股权架构及分配(创业团队如何设计股权架构及分配方案)

创业团队的股权架构设计,决定了公司在随后发展中呈现出的股权布局。如果最初的股权架构就存在先天不足,公司就很难顺利、稳定地成长起来。因此,创业之初,对股权设计应慎之又慎,避免留下巨大隐患和风险。两个人如...

消息称吴永辉入职后引发字节大模型团队架构大调整

2月21日,有消息称前谷歌大佬吴永辉加入字节跳动,并担任大模型团队Seed基础研究负责人后,引发了字节跳动大模型团队架构大调整。多名原本向朱文佳汇报的算法和技术负责人开始转向吴永辉汇报。简单来说,就是...

31页组织效能提升模型,经营管理团队搭建框架与权责定位

分享职场干货,提升能力!为职场精英打造个人知识体系,升职加薪!31页组织效能提升模型如何拿到分享的源文件:请您关注本头条号,然后私信本头条号“文米”2个字,按照操作流程,专人负责发送源文件给您。...

异形柱结构(异形柱结构技术规程)

下列关于混凝土异形柱结构设计的说法,其中何项正确?(A)混凝土异形柱框架结构可用于所有非抗震和抗震设防地区的一般居住建筑。(B)抗震设防烈度为6度时,对标准设防类(丙类)采用异形柱结构的建筑可不进行地...

职场干货:金字塔原理(金字塔原理实战篇)

金字塔原理的适用范围:金字塔原理适用于所有需要构建清晰逻辑框架的文章。第一篇:表达的逻辑。如何利用金字塔原理构建基本的金字塔结构受众(包括读者、听众、观众或学员)最容易理解的顺序:先了解主要的、抽象的...

底部剪力法(底部剪力法的基本原理)

某四层钢筋混凝土框架结构,计算简图如图1所示。抗震设防类别为丙类,抗震设防烈度为8度(0.2g),Ⅱ类场地,设计地震分组为第一组,第一自振周期T1=0.55s。一至四层的楼层侧向刚度依次为:K1=1...

结构等效重力荷载代表值(等效重力荷载系数)

某五层钢筋混凝土框架结构办公楼,房屋高度25.45m。抗震设防烈度8度,设防类别丙类,设计基本地震加速度0.2g,设计地震分组第二组,场地类别为Ⅱ类,混凝土强度等级C30。该结构平面和竖向均规则。假定...

体系结构已成昭告后世善莫大焉(体系构架是什么意思)

实践先行也理论已初步完成框架结构留余后人后世子孙俗话说前人栽树后人乘凉在夏商周大明大清民国共和前人栽树下吾之辈已完成结构体系又俗话说青出于蓝而胜于蓝各个时期任务不同吾辈探索框架结构体系经历有限肯定发展...

框架柱抗震构造要求(框架柱抗震设计)

某现浇钢筋混凝土框架-剪力墙结构高层办公楼,抗震设防烈度为8度(0.2g),场地类别为Ⅱ类,抗震等级:框架二级,剪力墙一级,混凝土强度等级:框架柱及剪力墙C50,框架梁及楼板C35,纵向钢筋及箍筋均采...

梁的刚度、挠度控制(钢梁挠度过大会引起什么原因)

某办公楼为现浇钢筋混凝土框架结构,r0=1.0,混凝土强度等级C35,纵向钢筋采用HRB400,箍筋采用HPB300。其二层(中间楼层)的局部平面图和次梁L-1的计算简图如图1~3(Z)所示,其中,K...

死要面子!有钱做大玻璃窗,却没有钱做“柱和梁”,不怕房塌吗?

活久见,有钱做2层落地大玻璃窗,却没有钱做“柱子和圈梁”,这样的农村自建房,安全吗?最近刷到个魔幻施工现场,如下图,这栋5开间的农村自建房,居然做了2个全景落地窗仔细观察,这2个落地窗还是飘窗,为了追...

不是承重墙,物业也不让拆?话说装修就一定要拆墙才行么

最近发现好多朋友装修时总想拆墙“爆改”空间,别以为只要避开承重墙就能随便砸!我家楼上邻居去年装修,拆了阳台矮墙想扩客厅,结果物业直接上门叫停。后来才知道,这种配重墙拆了会让阳台承重失衡,整栋楼都可能变...

取消回复欢迎 发表评论: