百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

通过抓包来认识gRpc(抓包原理)

ccwgpt 2024-10-13 01:30 52 浏览 0 评论

在使用gRpc的过程中,有一个想法:gRpc客户端、服务端是怎么交互的呢?

从这个想法萌生出一个验证方法,通过抓包来分析其交互过程与底层数据,一起来看看吧。

1. gRpc是什么

gRpc是什么?

gRPC是一个高性能、开源和通用的 RPC 框架,面向移动和 HTTP/2 设计。目前提供 C、Java 和 Go 语言版本,分别是:grpc, grpc-java, grpc-go. 其中 C 版本支持 C, C++, Node.js, Python, Ruby, Objective-C, PHP 和 C# 支持。

gRPC基于 HTTP/2 标准设计,带来诸如双向流、流控、头部压缩、单 TCP 连接上的多复用请求等特。这些特性使得其在移动设备上表现更好,更省电和节省空间占用。

一句话概括:gRpc是Google基于 HTTP/2 + ProtoBuf 开源的一个RPC框架。

2. 准备工作

正所谓:欲善其事必先利其器,所以在开始抓包之前需要做好如下准备:

  • 抓包软件:wireshark
  • 代码:gRpc代码
  • 操作系统:Windows、Linux、Macos 其一

3. wireshark安装

官网下载地址:https://www.wireshark.org/download.html

4. gRpc示例代码

示例代码目录结构

.
└── helloworld
    ├── client
    │   └── main.go
    ├── go.mod
    ├── go.sum
    ├── proto
    │   ├── helloworld.pb.go
    │   └── helloworld.proto
    └── server
        └── main.go

helloworld.proto

syntax = "proto3";

package proto;

// The greeting service definition.
service Greeter {
    // Sends a greeting
    rpc SayHello (HelloRequest) returns (HelloReply) {}
}

// The request message containing the user's name.
message HelloRequest {
    string name = 1;
    int32 age = 2;
}

// The response message containing the greetings
message HelloReply {
    string message = 1;
    string address = 2;
}

通过protoc对proto文件生成go代码

cd proto
protoc --go_out=plugins=grpc:. ./*

服务端代码 - server/main.go

package main

import (
	"context"
	"log"
	"net"

	pb "github.com/ivansli/grpc_helloworld/proto"
	"google.golang.org/grpc"
)

const (
	port = ":8080"
)

// server is used to implement helloworld.GreeterServer.
type server struct {}

// SayHello implements helloworld.GreeterServer
func (s *server) SayHello(ctx context.Context, in *pb.HelloRequest) (*pb.HelloReply, error) {
	log.Printf("Received: %v", in.GetName())
	return &pb.HelloReply{Message: "Hello " + in.GetName()}, nil
}

func main() {
	lis, err := net.Listen("tcp", port)
	if err != nil {
		log.Fatalf("failed to listen: %v", err)
	}

	s := grpc.NewServer()
	pb.RegisterGreeterServer(s, &server{})

	log.Printf("server listening at %v", lis.Addr())
	if err := s.Serve(lis); err != nil {
		log.Fatalf("failed to serve: %v", err)
	}
}

客户端代码 - client/main.go

package main

import (
	"context"
	"google.golang.org/grpc/metadata"
	"log"
	"os"
	"time"

	pb "github.com/ivansli/grpc_helloworld/proto"
	"google.golang.org/grpc"
)

const (
	address     = "localhost:8080"
	defaultName = "world"
)

func main() {
	// Set up a connection to the server.
	conn, err := grpc.Dial(address, grpc.WithInsecure())
	if err != nil {
		log.Fatalf("did not connect: %v", err)
	}
	defer conn.Close()
	c := pb.NewGreeterClient(conn)

	// Contact the server and print out its response.
	name := defaultName
	iflen(os.Args) > 1 {
		name = os.Args[1]
	}
	ctx, cancel := context.WithTimeout(context.Background(), time.Second)
	defer cancel()
	
  // !metadata 用于在服务间传递一些参数,注意后面它在交互中出现的位置
	ctx = metadata.AppendToOutgoingContext(ctx, "metadata", "is metadata")

	r, err := c.SayHello(ctx, &pb.HelloRequest{Name: name})
	if err != nil {
		log.Fatalf("could not greet: %v", err)
	}
	log.Printf("Greeting: %s", r.GetMessage())
}

5. 步骤

① 运行服务端代码 server/main.go,监听在8080端口

go run server/main.go

② 打开wireshark,等待抓包

③ 运行客户端代码 client/main.go

go run client/main.go

6. wireshark抓包gRpc交互过程

仔细观察Protocol列的协议类型:

TCP 传输层

HTTP2 应用层

GRPC 应用层(基于HTTP/2)


GRPC 跟 HTTPS/2 不同之处在于:GRPC协议中包含了ProtoBuf序列化的数据,也间接印证了 GRPC = HTTP/2 + ProtoBuf

通过抓包我们发现,客户端使用53726端口监听在8080的服务端进行交互以及数据传递,其过程大概分为10个。

TCP三次握手

Magic

SETTINGS

HEADERS

DATA

WINDOW_UPDATE, PING

PING(pong)

HEADERS, DATA

WINDOW_UPDATE, PING

PING(pong)

在抓包的过程中,发现应用层出现若干不同帧类型,分别有:Magic、SETTINGS、HEADERS、DATA、WINDOW_UPDATE、PING。

至于它们的作用,且看下面分析:

Magic

Magic帧的主要作用是对使用HTTP/2双方协议的确认, 是一个链接前言。作用是确定启用HTTP/2连接。

SETTINGS

SETTINGS的主要作用是设置这一个连接的参数,作用于是整个连接。从图中可以看到出现了多个SETTINGS,原因是在发送完连接前言后,客户端、服务端还需要进一步地确定一些信息。

HEADERS

HEADERS的主要作用是存储和传递HTTP的头信息

可以看到很多重要的信息:

  • method
  • scheme
  • path
  • authority
  • content-type
  • user-agent

这些都是gRpc很重要的基础属性。

注意:

使用google.golang.org/grpc/metadata包metadata在客户端、服务端传递的数据,也在HEADERS中

仔细观察,服务端发送给客户端的HEADERS帧中 HEADERS数据分为两部分:

  • HTTP的响应状态及内容(第一个 Stream:HEADERS

status: 200

content-type: application/grpc

  • gRpc承载的状态信息(第二个 Stream:HEADERS,图片中框起的部分)

grpc-status: 0

grpc-message:

DATA

DATA的主要作用是填充主体信息,是数据帧。

其中,包含两个重要部分:

① GRPC Message

/proto.Greeter/SayHello 为proto中service定义的的方法,也是服务端对外提供的方法。

② Protocol Buffers

与protobuf有关,其中Field(1)为定义的pb.HelloRequest结构中Name参数 &pb.HelloRequest{Name: "world"}

注意:

① pb.HelloRequest{} 结构体中的age字段由于是零值,传输时被忽略,所以没有Field(2)

② 带有request标识,说明这是客户端发起的请求

与客户端发送给服务端的DATA类似,其中 Field(1) &pb.HelloReply{Message: "Hello world"}Message字段。

注意:

① pb.HelloReply{} 结构体中的address字段由于是零值,传输时被忽略,所以没有Field(2)

② 带有response标识,说明这是个响应信息

WINDOW_UPDATE

WINDOW_UPDATE的主要作用是管理流控制窗口。

PING

主要作用是用于判断当前连接是否依旧可用,相当于心跳,分为:

  • 客户端ping服务端,服务端pong
  • 服务端ping客户端,客户端pong

注意:同一个Ping/Pong,有相同的标识字符串(图示中标识为:02041010090e0707)

总结

我们通过抓包gRpc的交互过程,分析不同类型帧的作用,进一步了解了gRpc。

总结如下:

  • gRpc在三次握手之后,客户端/服务端会发送连接前言(Magic+SETTINGS)以确立协议和配置
  • gRpc在传输数据过程中会设计滑动窗口(WINDOW_UPDATE)等流控策略
  • gRpc附加信息基于HEADERS帧进行传递,具体的请求/响应数据存储在DATA帧中
  • gRpc请求/响应结果分为HTTP和gRpc状态响应(grpc-status、grpc-message)两种类型
  • 如果服务端发起PING,客户端会响应PONG,反之亦然

参考及扩展阅读

  • wireshark分析grpc协议
  • 抓包gRPC的细节及分析
  • 使用wireshark对grpc的helloworld抓包分析

相关推荐

团队管理“布阵术”:3招让你的团队战斗力爆表!

为何古代军队能够以一当十?为何现代企业有的团队高效似“特种部队”,有的却松散若“游击队”?**答案正隐匿于“布阵术”之中!**今时今日,让我们从古代兵法里萃取3个核心要义,助您塑造一支战斗力爆棚的...

知情人士回应字节大模型团队架构调整

【知情人士回应字节大模型团队架构调整】财联社2月21日电,针对原谷歌DeepMind副总裁吴永辉加入字节跳动后引发的团队调整问题,知情人士回应称:吴永辉博士主要负责AI基础研究探索工作,偏基础研究;A...

豆包大模型团队开源RLHF框架,训练吞吐量最高提升20倍

强化学习(RL)对大模型复杂推理能力提升有关键作用,但其复杂的计算流程对训练和部署也带来了巨大挑战。近日,字节跳动豆包大模型团队与香港大学联合提出HybridFlow。这是一个灵活高效的RL/RL...

创业团队如何设计股权架构及分配(创业团队如何设计股权架构及分配方案)

创业团队的股权架构设计,决定了公司在随后发展中呈现出的股权布局。如果最初的股权架构就存在先天不足,公司就很难顺利、稳定地成长起来。因此,创业之初,对股权设计应慎之又慎,避免留下巨大隐患和风险。两个人如...

消息称吴永辉入职后引发字节大模型团队架构大调整

2月21日,有消息称前谷歌大佬吴永辉加入字节跳动,并担任大模型团队Seed基础研究负责人后,引发了字节跳动大模型团队架构大调整。多名原本向朱文佳汇报的算法和技术负责人开始转向吴永辉汇报。简单来说,就是...

31页组织效能提升模型,经营管理团队搭建框架与权责定位

分享职场干货,提升能力!为职场精英打造个人知识体系,升职加薪!31页组织效能提升模型如何拿到分享的源文件:请您关注本头条号,然后私信本头条号“文米”2个字,按照操作流程,专人负责发送源文件给您。...

异形柱结构(异形柱结构技术规程)

下列关于混凝土异形柱结构设计的说法,其中何项正确?(A)混凝土异形柱框架结构可用于所有非抗震和抗震设防地区的一般居住建筑。(B)抗震设防烈度为6度时,对标准设防类(丙类)采用异形柱结构的建筑可不进行地...

职场干货:金字塔原理(金字塔原理实战篇)

金字塔原理的适用范围:金字塔原理适用于所有需要构建清晰逻辑框架的文章。第一篇:表达的逻辑。如何利用金字塔原理构建基本的金字塔结构受众(包括读者、听众、观众或学员)最容易理解的顺序:先了解主要的、抽象的...

底部剪力法(底部剪力法的基本原理)

某四层钢筋混凝土框架结构,计算简图如图1所示。抗震设防类别为丙类,抗震设防烈度为8度(0.2g),Ⅱ类场地,设计地震分组为第一组,第一自振周期T1=0.55s。一至四层的楼层侧向刚度依次为:K1=1...

结构等效重力荷载代表值(等效重力荷载系数)

某五层钢筋混凝土框架结构办公楼,房屋高度25.45m。抗震设防烈度8度,设防类别丙类,设计基本地震加速度0.2g,设计地震分组第二组,场地类别为Ⅱ类,混凝土强度等级C30。该结构平面和竖向均规则。假定...

体系结构已成昭告后世善莫大焉(体系构架是什么意思)

实践先行也理论已初步完成框架结构留余后人后世子孙俗话说前人栽树后人乘凉在夏商周大明大清民国共和前人栽树下吾之辈已完成结构体系又俗话说青出于蓝而胜于蓝各个时期任务不同吾辈探索框架结构体系经历有限肯定发展...

框架柱抗震构造要求(框架柱抗震设计)

某现浇钢筋混凝土框架-剪力墙结构高层办公楼,抗震设防烈度为8度(0.2g),场地类别为Ⅱ类,抗震等级:框架二级,剪力墙一级,混凝土强度等级:框架柱及剪力墙C50,框架梁及楼板C35,纵向钢筋及箍筋均采...

梁的刚度、挠度控制(钢梁挠度过大会引起什么原因)

某办公楼为现浇钢筋混凝土框架结构,r0=1.0,混凝土强度等级C35,纵向钢筋采用HRB400,箍筋采用HPB300。其二层(中间楼层)的局部平面图和次梁L-1的计算简图如图1~3(Z)所示,其中,K...

死要面子!有钱做大玻璃窗,却没有钱做“柱和梁”,不怕房塌吗?

活久见,有钱做2层落地大玻璃窗,却没有钱做“柱子和圈梁”,这样的农村自建房,安全吗?最近刷到个魔幻施工现场,如下图,这栋5开间的农村自建房,居然做了2个全景落地窗仔细观察,这2个落地窗还是飘窗,为了追...

不是承重墙,物业也不让拆?话说装修就一定要拆墙才行么

最近发现好多朋友装修时总想拆墙“爆改”空间,别以为只要避开承重墙就能随便砸!我家楼上邻居去年装修,拆了阳台矮墙想扩客厅,结果物业直接上门叫停。后来才知道,这种配重墙拆了会让阳台承重失衡,整栋楼都可能变...

取消回复欢迎 发表评论: