百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

grpc实战——构建一个简单的名称解析服务

ccwgpt 2024-10-13 01:32 57 浏览 0 评论

境说明:
语言主要用java实现,ide使用的是idea,使用maven作为软件项目管理工具。

本篇主要是对grpc的一个实战过程。主要完成服务简单调用,后面的文章中我会陆续给大家分享服务器流式调用、客户端流式调用和双向流式调用。关于grpc,大家大概知道这是一个Google开源的一套rpc(远程服务调用框架)就可以了。在使用grpc的时候需要定义一个的服务,以及服务中提供的方法,当然也需要定义服务的方法中所涉及到的入参和出参。简而言之,就是在服务端会实现服务的接口,并开启grpc服务器来接收客户端的请求。客户端则在连接上服务端后,会得到一个stub。利用这个stub可以调用相应的远程服务,操作上就像调用本地服务一样,框架屏蔽了大量的底层工作,包括网络传输协议,序列化对象等,使得开发非常简单。

借用一下官方文档中的图示,大家大概就能懂整个流程了,这个图示也很好地展现了grpc语言无关的特性,服务端和客户端可以是完全不一样的两个语言(但是必须是grpc支持的语言,目前主流的语言grpc都已经提供了支持)。


第一步:创建项目

这里我们主要是创建一个多模块项目名称为grpc,然后在其中创建两个模块grpc-server和grpc-client。不会创建的童鞋,可以查看我的另外一篇文章idea创建多模块项目。创建完成后整体项目结构如图所示:

第二步:安装protobuf support插件

安装该插件后,idea则对.proto文件有了编辑支持,相对来说更友好一些。

在设置界面中,选择Plugins,然后点击Browse repositories,在弹出页面搜索框中搜索protobuf support,安装即可。

第三步:pom.xml配置

 <dependency>
 <groupId>io.grpc</groupId>
 <artifactId>grpc-netty</artifactId>
 <version>${grpc.version}</version>
 </dependency>
 <dependency>
 <groupId>io.grpc</groupId>
 <artifactId>grpc-protobuf</artifactId>
 <version>${grpc.version}</version>
 </dependency>
 <dependency>
 <groupId>io.grpc</groupId>
 <artifactId>grpc-stub</artifactId>
 <version>${grpc.version}</version>
 </dependency>

其中版本主要是这样的(版本很重要!如果出现不兼容的版本,很可能程序就跑不起来,而且比较难找错)。这里官方文档已经用上了grpc

1.13.0,然而阿里云似乎找不到,所以这里只能用1.12.0版本了。

 <properties>
 <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
 <java.version>1.8</java.version>
 <grpc.version>1.12.0</grpc.version>
 <protoc.version>3.5.1-1</protoc.version>
 </properties>

另外,还需要配置一下插件protobuf maven插件,有了这个插件之后,我们才可以用idea来编译.proto文件。否则,手工编译的方式较为麻烦。这里需要注意一点的就是protoc-gen-grpc-java的版本需要和之前grpc依赖的版本一致。

 <build>
 <extensions>
 <extension>
 <groupId>kr.motd.maven</groupId>
 <artifactId>os-maven-plugin</artifactId>
 <version>1.5.0.Final</version>
 </extension>
 </extensions>
 <plugins>
 <plugin>
 <groupId>org.xolstice.maven.plugins</groupId>
 <artifactId>protobuf-maven-plugin</artifactId>
 <version>0.5.1</version>
 <configuration>
 <protocArtifact>com.google.protobuf:protoc:${protoc.version}:exe:${os.detected.classifier}</protocArtifact>
 <pluginId>grpc-java</pluginId>
 <pluginArtifact>io.grpc:protoc-gen-grpc-java:${grpc.version}:exe:${os.detected.classifier}</pluginArtifact>
 </configuration>
 <executions>
 <execution>
 <goals>
 <goal>compile</goal>
 <goal>compile-custom</goal>
 </goals>
 </execution>
 </executions>
 </plugin>
 </plugins>
 </build>

第四步:定义服务和参数

grpc定义服务的方式主要还是通过protocal buffer的形式(这也是服务调用过程中序列化的方式),protocal buffer是另外一个Google的开源项目(这里不得不感慨一下,谷歌是真的强)。

这里我们需要在一个.proto文件中定义我们的服务以及参数,不熟悉的童鞋可以去自行了解一下具体的语法,不过直接看我的代码应该也没什么问题,毕竟语法相对还是比较好理解的。

我们首先在main目录下创建一个proto文件夹,在这个文件夹中创建我们的.proto文件,比如我们这里取名为nameService.proto,定义如下:

syntax = "proto3";
option java_multiple_files = true;
option java_package = "io.grpc.examples.nameserver";
option java_outer_classname = "NameProto";
option objc_class_prefix = "NS";

package nameserver;
// 定义服务
service NameService { 
 // 服务中的方法,用于根据Name类型的参数获得一个Ip类型的返回值
 rpc getIpByName (Name) returns (Ip) {}
}
//定义Name消息类型,其中name为其序列为1的字段
message Name { 
string name = 1;
}
//定义Ip消息类型,其中ip为其序列为1的字段
message Ip { 
string ip = 1;
}

根据注释,大家应该还是比较容易理解这个服务定义和消息定义的,值得一提的是其中的java_package的选项,这个主要是为java服务的,可以用来指定一个符合java规范的报名(因为默认报名对于java规范来说不是那么友好),这个选项只对编译成java代码有效。

第五步:编译nameService.proto

目前,我们主要将proto文件放在了grpc-server的proto目录中,项目结构如下图所示:

因为我们已经安装了编译插件,在idea中可以利用maven编译proto文件了。

可以看到编译完成后,项目结构中多了一个target目录,里面就存放着我们需要用到的java类。感兴趣的童鞋可以在实践过程中,直接去研究一下。generated-sources目录下主要存放了生成的java代码。

其中NameServiceGrpc是一个很重要的类,直接关系到我们的服务,我们自己提供的服务需要继承它的一个内部类,在客户端中则是可以从中得到一个stub用于调用。Ip类和Name类则主要是消息类型,这里主要是作为一个参数类型。

第六步:写服务端代码

服务端其实需要做两件事。

第一件,实现提供的服务,这是本职工作。

第二件,启动一个grpc服务器,用于接收客户端的请求。

那么在这里,我也把两件事分开做。

实现提供的服务

要实现提供的服务,只需要写一个类继承NameServiceGrpc.NameServiceImplBase这个类即可,然后因为我们定义的方法是getIpByName,那么我们也实现这个方法,值得一提的是,需要注意一下这个方法的参数是固定的,不能随心所欲地写。主要代码如下:

public class NameServiceImplBaseImpl extends NameServiceGrpc.NameServiceImplBase {
 private Map<String,String> map = new HashMap<String,String>(); 
 private Logger logger = Logger.getLogger(NameServiceImplBaseImpl.class.getName()); 
 public NameServiceImplBaseImpl() { 
 map.put("Sunny","125.216.242.51"); 
 map.put("David","117.226.178.139");
 }
 
 @Override 
 public void getIpByName(Name request, StreamObserver<Ip> responseObserver) {
 logger.log(Level.INFO,"requst is coming. args=" + request.getName());
 Ip ip = Ip.newBuilder().setIp(getName(request.getName())).build();
 responseObserver.onNext(ip);
 responseObserver.onCompleted();
 } 
 
 public String getName(String name){
 String ip = map.get(name); 
 if(ip == null){ 
 return "0.0.0.0";
 } 
 return ip;
 }
}

在这里,名称服务主要是存储在一个map中,想要做的更好的童鞋可以尝试放到数据库中。在构造方法中,向map中加入一些条目。在getIpByName中,onNext方法用于向客户端返回结果,而onComplete方法则用于告诉客户端,这次调用已经完成。这些都是相对固定的套路。细心的童鞋可能注意到了,我们map实际存的是String类型的值,而非Name和Ip类型的值,那么我们需要有一定的转换,实际上getName方法会返回一个String类型的ip,在getIpByName中转换为Ip类型后才进行返回。另外,需要特别说一下,大家可以去看一下proto文件编译后的源码,消息类型生成的java类中,构造方法都是私有方法,因此我们只能通过类似Ip.newBuilder().setIp(getName(request.getName())).build()的方法来构造相应的参数对象,这些类型中都有一个Builder的内部类,可以用来辅助生成这些类型的对象。

构建grpcserver类用于接收客户端的请求。代码如下:

public class NameServer { 
 private Logger logger = Logger.getLogger(NameServer.class.getName()); 
 private static final int DEFAULT_PORT = 8088; 
 private int port;//服务端口号
 private Server server; 
 
 public NameServer(int port) { 
 this(port,ServerBuilder.forPort(port));
 } 
 
 public NameServer(int port, ServerBuilder<?> serverBuilder){ 
 this.port = port;
 server = serverBuilder.addService(new NameServiceImplBaseImpl()).build();
 } 
 
 private void start() throws IOException {
 server.start();
 logger.info("Server has started, listening on " + port);
 Runtime.getRuntime().addShutdownHook(new Thread() { 
 @Override
 public void run() {
 NameServer.this.stop();
 }
 });
 } 
 
 private void stop() { 
 if(server != null)
 server.shutdown();
 } 
 
 private void blockUntilShutdown() throws InterruptedException { 
 if (server != null) {
 server.awaitTermination();
 }
 } 
 
 public static void main(String[] args) throws IOException, InterruptedException {
 NameServer nameServer; 
 if(args.length > 0){
 nameServer = new NameServer(Integer.parseInt(args[0]));
 } else {
 nameServer = new NameServer(DEFAULT_PORT);
 }
 nameServer.start();
 nameServer.blockUntilShutdown();
 }
}

其中主要是start方法用于启动服务器并接收客户端的请求。在server中添加名称解析服务服务实在构造方法中进行的。另外,blockUntilShutdown方法则会让server阻塞到程序退出为止。

第七步:写客户端代码

同样的,也和服务端一样,我们把nameService.proto文件放到proto目录下,再执行编译过程,也可以直接将grpc-server中的文件拷贝到grpc-client模块中。这里我们还是同样进行一次编译。得到grpc-client目录如下:

现在,我们可以开始写客户端代码了,主要代码如下:

public class NameClient { 
 private static final String DEFAULT_HOST = "localhost"; 
 private static final int DEFAULT_PORT = 8088; 
 private ManagedChannel managedChannel; 
 private NameServiceGrpc.NameServiceBlockingStub nameServiceBlockingStub; 
 
 public NameClient(String host, int port) { 
 this(ManagedChannelBuilder.forAddress(host,port).usePlaintext(true).build());
 } 
 
 public NameClient(ManagedChannel managedChannel) { 
 this.managedChannel = managedChannel; 
 this.nameServiceBlockingStub = NameServiceGrpc.newBlockingStub(managedChannel);
 } 
 
 public void shutdown() throws InterruptedException {
 managedChannel.shutdown().awaitTermination(5, TimeUnit.SECONDS);
 } 
 
 public String getIpByName(String n){
 Name name = Name.newBuilder().setName(n).build();
 Ip ip = nameServiceBlockingStub.getIpByName(name); 
 return ip.getIp();
 } 
 
 public static void main(String[] args) {
 NameClient nameClient = new NameClient(DEFAULT_HOST,DEFAULT_PORT); 
 for(String arg : args){
 String res = nameClient.getIpByName(arg);
 System.out.println("get result from server: " + res + " as param is " + arg);
 }
 }
}

客户端类中主要有两个成员变量,一个是channel通道,主要用于通信,另外一个则是stub存根,我们客户端需要远程调用服务,在得到stub后,只需要调用stub的相应服务即可,操作相对来说非常简单,代码中用getIpByName方法对远程服务调用进行了包装。另外,我们这里在main函数里多次调用方法,参数args中的变量。需要注意的是,这里channel要设置成明文传输,即usePlainText设置为true,否则还需要配置ssl(官方文档中没用明文传输)。

第八步:启动grpc服务器

第九步:启动客户端

args参数设置为Sunny David Tom

至此,一个简单的名称解析服务就做完了。

相关推荐

团队管理“布阵术”:3招让你的团队战斗力爆表!

为何古代军队能够以一当十?为何现代企业有的团队高效似“特种部队”,有的却松散若“游击队”?**答案正隐匿于“布阵术”之中!**今时今日,让我们从古代兵法里萃取3个核心要义,助您塑造一支战斗力爆棚的...

知情人士回应字节大模型团队架构调整

【知情人士回应字节大模型团队架构调整】财联社2月21日电,针对原谷歌DeepMind副总裁吴永辉加入字节跳动后引发的团队调整问题,知情人士回应称:吴永辉博士主要负责AI基础研究探索工作,偏基础研究;A...

豆包大模型团队开源RLHF框架,训练吞吐量最高提升20倍

强化学习(RL)对大模型复杂推理能力提升有关键作用,但其复杂的计算流程对训练和部署也带来了巨大挑战。近日,字节跳动豆包大模型团队与香港大学联合提出HybridFlow。这是一个灵活高效的RL/RL...

创业团队如何设计股权架构及分配(创业团队如何设计股权架构及分配方案)

创业团队的股权架构设计,决定了公司在随后发展中呈现出的股权布局。如果最初的股权架构就存在先天不足,公司就很难顺利、稳定地成长起来。因此,创业之初,对股权设计应慎之又慎,避免留下巨大隐患和风险。两个人如...

消息称吴永辉入职后引发字节大模型团队架构大调整

2月21日,有消息称前谷歌大佬吴永辉加入字节跳动,并担任大模型团队Seed基础研究负责人后,引发了字节跳动大模型团队架构大调整。多名原本向朱文佳汇报的算法和技术负责人开始转向吴永辉汇报。简单来说,就是...

31页组织效能提升模型,经营管理团队搭建框架与权责定位

分享职场干货,提升能力!为职场精英打造个人知识体系,升职加薪!31页组织效能提升模型如何拿到分享的源文件:请您关注本头条号,然后私信本头条号“文米”2个字,按照操作流程,专人负责发送源文件给您。...

异形柱结构(异形柱结构技术规程)

下列关于混凝土异形柱结构设计的说法,其中何项正确?(A)混凝土异形柱框架结构可用于所有非抗震和抗震设防地区的一般居住建筑。(B)抗震设防烈度为6度时,对标准设防类(丙类)采用异形柱结构的建筑可不进行地...

职场干货:金字塔原理(金字塔原理实战篇)

金字塔原理的适用范围:金字塔原理适用于所有需要构建清晰逻辑框架的文章。第一篇:表达的逻辑。如何利用金字塔原理构建基本的金字塔结构受众(包括读者、听众、观众或学员)最容易理解的顺序:先了解主要的、抽象的...

底部剪力法(底部剪力法的基本原理)

某四层钢筋混凝土框架结构,计算简图如图1所示。抗震设防类别为丙类,抗震设防烈度为8度(0.2g),Ⅱ类场地,设计地震分组为第一组,第一自振周期T1=0.55s。一至四层的楼层侧向刚度依次为:K1=1...

结构等效重力荷载代表值(等效重力荷载系数)

某五层钢筋混凝土框架结构办公楼,房屋高度25.45m。抗震设防烈度8度,设防类别丙类,设计基本地震加速度0.2g,设计地震分组第二组,场地类别为Ⅱ类,混凝土强度等级C30。该结构平面和竖向均规则。假定...

体系结构已成昭告后世善莫大焉(体系构架是什么意思)

实践先行也理论已初步完成框架结构留余后人后世子孙俗话说前人栽树后人乘凉在夏商周大明大清民国共和前人栽树下吾之辈已完成结构体系又俗话说青出于蓝而胜于蓝各个时期任务不同吾辈探索框架结构体系经历有限肯定发展...

框架柱抗震构造要求(框架柱抗震设计)

某现浇钢筋混凝土框架-剪力墙结构高层办公楼,抗震设防烈度为8度(0.2g),场地类别为Ⅱ类,抗震等级:框架二级,剪力墙一级,混凝土强度等级:框架柱及剪力墙C50,框架梁及楼板C35,纵向钢筋及箍筋均采...

梁的刚度、挠度控制(钢梁挠度过大会引起什么原因)

某办公楼为现浇钢筋混凝土框架结构,r0=1.0,混凝土强度等级C35,纵向钢筋采用HRB400,箍筋采用HPB300。其二层(中间楼层)的局部平面图和次梁L-1的计算简图如图1~3(Z)所示,其中,K...

死要面子!有钱做大玻璃窗,却没有钱做“柱和梁”,不怕房塌吗?

活久见,有钱做2层落地大玻璃窗,却没有钱做“柱子和圈梁”,这样的农村自建房,安全吗?最近刷到个魔幻施工现场,如下图,这栋5开间的农村自建房,居然做了2个全景落地窗仔细观察,这2个落地窗还是飘窗,为了追...

不是承重墙,物业也不让拆?话说装修就一定要拆墙才行么

最近发现好多朋友装修时总想拆墙“爆改”空间,别以为只要避开承重墙就能随便砸!我家楼上邻居去年装修,拆了阳台矮墙想扩客厅,结果物业直接上门叫停。后来才知道,这种配重墙拆了会让阳台承重失衡,整栋楼都可能变...

取消回复欢迎 发表评论: