用Golang构建gRPC服务
本教程提供了Go使用gRPC的基础教程
在教程中你将会学到如何:
- 在
.proto
文件中定义一个服务。 - 使用protocol buffer编译器生成客户端和服务端代码。
- 使用gRPC的Go API为你的服务写一个客户端和服务器。
继续之前,请确保你已经对gRPC概念有所了解,并且熟悉protocol buffer。需要注意的是教程中的示例使用的是proto3
版本的protocol buffer:你可以在Protobuf语言指南与Protobuf生成Go代码指南中了解到更多相关知识。
为什么使用gRPC
我们的示例是一个简单的路线图应用,客户端可以获取路线特征信息、创建他们的路线摘要,还可以与服务器或者其他客户端交换比如交通状态更新这样的路线信息。
借助gRPC,我们可以在.proto
文件中定义我们的服务,并以gRPC支持的任何语言来实现客户端和服务器,客户端和服务器又可以在从服务器到你自己的平板电脑的各种环境中运行-gRPC还会为你解决所有不同语言和环境之间通信的复杂性。我们还获得了使用protocol buffer的所有优点,包括有效的序列化(速度和体积两方面都比JSON更有效率),简单的IDL(接口定义语言)和轻松的接口更新。
安装
安装grpc包
首先需要安装gRPC golang版本的软件包,同时官方软件包的examples
目录里就包含了教程中示例路线图应用的代码。
$ go get google.golang.org/grpc
然后切换到`grpc-go/examples/route_guide
:`目录:
$ cd $GOPATH/src/google.golang.org/grpc/examples/route_guide
安装相关工具和插件
- 安装protocol buffer编译器
安装编译器最简单的方式是去https://github.com/protocolbu... 下载预编译好的protoc二进制文件,仓库中可以找到每个平台对应的编译器二进制文件。这里我们以Mac Os
为例,从https://github.com/protocolbu... 下载并解压文件。
更新PATH
系统变量,或者确保protoc
放在了PATH
包含的目录中了。
- 安装protoc编译器插件
$ go get -u github.com/golang/protobuf/protoc-gen-go
编译器插件protoc-gen-go
将安装在$GOBIN
中,默认位于$GOPATH/bin
。编译器protoc
必须在$PATH
中能找到它:
$ export PATH=$PATH:$GOPATH/bin
定义服务
首先第一步是使用protocol buffer定义gRPC服务还有方法的请求和响应类型,你可以在下载的示例代码examples/route_guide/routeguide/route_guide.proto
中看到完整的.proto
文件。
要定义服务,你需要在.proto
文件中指定一个具名的service
service RouteGuide {...
}
然后在服务定义中再来定义rpc
方法,指定他们的请求和响应类型。gRPC允许定义四种类型的服务方法,这四种服务方法都会应用到我们的RouteGuide
服务中。
- 一个简单的RPC,客户端使用存根将请求发送到服务器,然后等待响应返回,就像普通的函数调用一样。
// 获得给定位置的特征
rpc GetFeature(Point) returns (Feature) {}
- 服务器端流式RPC,客户端向服务器发送请求,并获取流以读取回一系列消息。客户端从返回的流中读取,直到没有更多消息为止。如我们的示例所示,可以通过将<font color="red">stream</font>关键字放在响应类型之前来指定服务器端流方法。
//获得给定Rectangle中可用的特征。结果是
//流式传输而不是立即返回
//因为矩形可能会覆盖较大的区域并包含大量特征。
rpc ListFeatures(Rectangle) returns (stream Feature) {}
- 客户端流式RPC,其中客户端使用gRPC提供的流写入一系列消息并将其发送到服务器。客户端写完消息后,它将等待服务器读取所有消息并返回其响应。通过将<font color="red">stream</font>关键字放在请求类型之前,可以指定客户端流方法。
// 接收路线上被穿过的一系列点位, 当行程结束时
// 服务端会返回一个RouteSummary类型的消息.
rpc RecordRoute(stream Point) returns (RouteSummary) {}
- 双向流式RPC,双方都使用读写流发送一系列消息。这两个流是独立运行的,因此客户端和服务器可以按照自己喜欢的顺序进行读写:例如,服务器可以在写响应之前等待接收所有客户端消息,或者可以先读取消息再写入消息,或其他一些读写组合。每个流中的消息顺序都会保留。您可以通过在请求和响应之前都放置<font color="red">stream</font>关键字来指定这种类型的方法。
//接收路线行进中发送过来的一系列RouteNotes类型的消息,同时也接收其他RouteNotes(例如:来自其他用户)
rpc RouteChat(stream RouteNote) returns (stream RouteNote) {}
我们的.proto
文件中也需要所有请求和响应类型的protocol buffer消息类型定义。比如说下面的Point
消息类型:
// Points被表示为E7表示形式中的经度-纬度对。
//(度数乘以10 ** 7并四舍五入为最接近的整数)。
// 纬度应在+/- 90度范围内,而经度应在
// 范围+/- 180度(含)
message Point {int32 latitude = 1;int32 longitude = 2;
}
生成客户端和服务端代码
接下来要从我们的.proto
服务定义生成gRPC客户端和服务端的接口。我们使用protoc
编译器和上面安装的编译器插件来完成这些工作:
在示例route_guide
的目录下运行:
protoc -I routeguide/ routeguide/route_guide.proto --go_out=plugins=grpc:routeguide
运行命令后会在示例route_guide
目录的routeguide
目录下生成route_guide.pb.go
文件。
pb.go
文件里面包含:
- 用于填充、序列化和检索我们定义的请求和响应消息类型的所有protocol buffer代码。
- 一个客户端存根用来让客户端调用
RouteGuide
服务中定义的方法。 - 一个需要服务端实现的接口类型
RouteGuideServer
,接口类型中包含了RouteGuide
服务中定义的所有方法。
创建gRPC服务端
首先让我们看一下怎么创建RouteGuide
服务器。有两种方法来让我们的RouteGuide
服务工作:
- 实现我们从服务定义生成的服务接口:做服务实际要做的事情。
- 运行一个gRPC服务器监听客户端的请求然后把请求派发给正确的服务实现。
你可以在刚才安装的gPRC包的grpc-go/examples/route_guide/server/server.go找到我们示例中RouteGuide`服务的实现代码。下面让我们看看他是怎么工作的。
实现RouteGuide
如你所见,实现代码中有一个routeGuideServer
结构体类型,它实现了protoc
编译器生成的pb.go
文件中定义的RouteGuideServer
接口。
type routeGuideServer struct {...
}
...func (s *routeGuideServer) GetFeature(ctx context.Context, point *pb.Point) (*pb.Feature, error) {...
}
...func (s *routeGuideServer) ListFeatures(rect *pb.Rectangle, stream pb.RouteGuide_ListFeaturesServer) error {...
}
...func (s *routeGuideServer) RecordRoute(stream pb.RouteGuide_RecordRouteServer) error {...
}
...func (s *routeGuideServer) RouteChat(stream pb.RouteGuide_RouteChatServer) error {...
}
...
普通PRC
routeGuideServer
实现我们所有的服务方法。首先,让我们看一下最简单的类型GetFeature
,它只是从客户端获取一个Point
,并从其Feature
数据库中返回相应的Feature
信息。
func (s *routeGuideServer) GetFeature(ctx context.Context, point *pb.Point) (*pb.Feature, error) {for _, feature := range s.savedFeatures {if proto.Equal(feature.Location, point) {return feature, nil}}// No feature was found, return an unnamed featurereturn &pb.Feature{"", point}, nil
}
这个方法传递了RPC上下文对象和客户端的Point
protocol buffer请求消息,它在响应信息中返回一个Feature
类型的protocol buffer消息和错误。在该方法中,我们使用适当的信息填充Feature
,然后将其返回并返回nil
错误,以告知gRPC我们已经完成了RPC的处理,并且可以将`Feature返回给客户端。
服务端流式RPC
现在,让我们看一下服务方法中的一个流式RPC。 ListFeatures
是服务器端流式RPC,因此我们需要将多个Feature
发送回客户端。
func (s *routeGuideServer) ListFeatures(rect *pb.Rectangle, stream pb.RouteGuide_ListFeaturesServer) error {for _, feature := range s.savedFeatures {if inRange(feature.Location, rect) {if err := stream.Send(feature); err != nil {return err}}}return nil
}
如你所见,这次我们没有获得简单的请求和响应对象,而是获得了一个请求对象(客户端要在其中查找Feature
的Rectangle
)和一个特殊的RouteGuide_ListFeaturesServe
r对象来写入响应。
在该方法中,我们填充了需要返回的所有Feature
对象,并使用Send()
方法将它们写入RouteGuide_ListFeaturesServer
。最后,就像在简单的RPC中一样,我们返回nil
错误来告诉gRPC我们已经完成了响应的写入。如果此调用中发生任何错误,我们将返回非nil
错误; gRPC层会将其转换为适当的RPC状态,以在线上发送。
客户端流式RPC
现在,让我们看一些更复杂的事情:客户端流方法RecordRoute
,从客户端获取点流,并返回一个包含行程信息的RouteSummary
。如你所见,这一次该方法根本没有request
参数。相反,它获得一个RouteGuide_RecordRouteServer
流,服务器可以使用该流来读取和写入消息-它可以使用Recv()
方法接收客户端消息,并使用SendAndClose()
方法返回其单个响应。
func (s *routeGuideServer) RecordRoute(stream pb.RouteGuide_RecordRouteServer) error {var pointCount, featureCount, distance int32var lastPoint *pb.PointstartTime := time.Now()for {point, err := stream.Recv()if err == io.EOF {endTime := time.Now()return stream.SendAndClose(&pb.RouteSummary{PointCount: pointCount,FeatureCount: featureCount,Distance: distance,ElapsedTime: int32(endTime.Sub(startTime).Seconds()),})}if err != nil {return err}pointCount++for _, feature := range s.savedFeatures {if proto.Equal(feature.Location, point) {featureCount++}}if lastPoint != nil {distance += calcDistance(lastPoint, point)}lastPoint = point}
}
在方法主体中,我们使用RouteGuide_RecordRouteServer
的Recv()
方法不停地读取客户端的请求到一个请求对象中(在本例中为Point
),直到没有更多消息为止:服务器需要要在每次调用后检查从Recv()
返回的错误。如果为nil
,则流仍然良好,并且可以继续读取;如果是io.EOF,则表示消息流已结束,服务器可以返回其RouteSummary。如果错误为其他值,我们将返回错误“原样”,以便gRPC层将其转换为RPC状态。
双向流式RPC
最后让我们看一下双向流式RPC方法RouteChat()
func (s *routeGuideServer) RouteChat(stream pb.RouteGuide_RouteChatServer) error {for {in, err := stream.Recv()if err == io.EOF {return nil}if err != nil {return err}key := serialize(in.Location)s.mu.Lock()s.routeNotes[key] = append(s.routeNotes[key], in)// Note: this copy prevents blocking other clients while serving this one.// We don't need to do a deep copy, because elements in the slice are// insert-only and never modified.rn := make([]*pb.RouteNote, len(s.routeNotes[key]))copy(rn, s.routeNotes[key])s.mu.Unlock()for _, note := range rn {if err := stream.Send(note); err != nil {return err}}}
}
这次,我们得到一个RouteGuide_RouteChatServer
流,就像在客户端流示例中一样,该流可用于读取和写入消息。但是,这次,当客户端仍在向其消息流中写入消息时,我们会向流中写入要返回的消息。
此处的读写语法与我们的客户端流式传输方法非常相似,不同之处在于服务器使用流的Send()
方法而不是SendAndClose()
,因为服务器会写入多个响应。尽管双方总是会按照对方的写入顺序来获取对方的消息,但是客户端和服务器都可以以任意顺序进行读取和写入-流完全独立地运行(意思是服务器可以接受完请求后再写流,也可以接收一条请求写一条响应。同样的客户端可以写完请求了再读响应,也可以发一条请求读一条响应)
启动服务器
一旦实现了所有方法,我们还需要启动gRPC服务器,以便客户端可以实际使用我们的服务。以下代码段显示了如何启动RouteGuide
服务。
flag.Parse()
lis, err := net.Listen("tcp", fmt.Sprintf(":%d", *port))
if err != nil {log.Fatalf("failed to listen: %v", err)
}
grpcServer := grpc.NewServer()
pb.RegisterRouteGuideServer(grpcServer, &routeGuideServer{})
... // determine whether to use TLS
grpcServer.Serve(lis)
为了构建和启动服务器我们需要:
- 指定要监听客户端请求的接口
lis, err := net.Listen("tcp", fmt.Sprintf(":%d", *port))。
- 使用
grpc.NewServer()
创建一个gRPC server的实例。 - 使用gRPC server注册我们的服务实现。
- 使用我们的端口详细信息在服务器上调用
Serve()
进行阻塞等待,直到进程被杀死或调用Stop()
为止。
创建客户端
在这一部分中我们将为RouteGuide
服务创建Go客户端,你可以在grpc-go/examples/route_guide/client/client.go 看到完整的客户端代码。
Creating stub
要调用服务的方法,我们首先需要创建一个gRPC通道与服务器通信。我们通过把服务器地址和端口号传递给grpc.Dial()
来创建通道,像下面这样:
conn, err := grpc.Dial(*serverAddr)
if err != nil {...
}
defer conn.Close()
如果你请求的服务需要认证,你可以在grpc.Dial
中使用<font color="red">DialOptions
</font>设置认证凭证(比如:TLS,GCE凭证,JWT凭证)--不过我们的RouteGuide
服务不需要这些。
设置gRPC通道后,我们需要一个客户端存根来执行RPC。我们使用从.proto
生成的pb
包中提供的NewRouteGuideClient
方法获取客户端存根。
client := pb.NewRouteGuideClient(conn)
生成的pb.go
文件定义了客户端接口类型RouteGuideClient
并用客户端存根的结构体类型实现了接口中的方法,所以通过上面获取到的客户端存根client
可以直接调用下面接口类型中列出的方法。
type RouteGuideClient interface {GetFeature(ctx context.Context, in *Point, opts ...grpc.CallOption) (*Feature, error)ListFeatures(ctx context.Context, in *Rectangle, opts ...grpc.CallOption) (RouteGuide_ListFeaturesClient, error)RecordRoute(ctx context.Context, opts ...grpc.CallOption) (RouteGuide_RecordRouteClient, error)RouteChat(ctx context.Context, opts ...grpc.CallOption) (RouteGuide_RouteChatClient, error)
}
每个实现方法会再去请求gRPC服务端相对应的方法获取服务端的响应,比如:
func (c *routeGuideClient) GetFeature(ctx context.Context, in *Point, opts ...grpc.CallOption) (*Feature, error) {out := new(Feature)err := c.cc.Invoke(ctx, "/routeguide.RouteGuide/GetFeature", in, out, opts...)if err != nil {return nil, err}return out, nil
}
RouteGuideClient
接口的完整实现可以在生成的pb.go
文件里找到。
调用服务的方法
现在让我们看看如何调用服务的方法。注意在gRPC-Go中,PRC是在阻塞/同步模式下的运行的,也就是说RPC调用会等待服务端响应,服务端将返回响应或者是错误。
普通RPC
调用普通RPC方法GetFeature
如同直接调用本地的方法。
feature, err := client.GetFeature(context.Background(), &pb.Point{409146138, -746188906})
if err != nil {...
}
如你所见,我们在之前获得的存根上调用该方法。在我们的方法参数中,我们创建并填充一个protocol buffer对象(在本例中为Point对象)。我们还会传递一个context.Context
对象,该对象可让我们在必要时更改RPC的行为,例如超时/取消正在调用的RPC(cancel an RPC in flight)。如果调用没有返回错误,则我们可以从第一个返回值中读取服务器的响应信息。
服务端流式RPC
这里我们会调用服务端流式方法ListFeatures
,方法返回的流中包含了地理特征信息。如果你读过上面的创建客户端的章节,这里有些东西看起来会很熟悉--流式RPC在两端实现的方式很类似。
rect := &pb.Rectangle{ ... } // initialize a pb.Rectangle
stream, err := client.ListFeatures(context.Background(), rect)
if err != nil {...
}
for {feature, err := stream.Recv()if err == io.EOF {break}if err != nil {log.Fatalf("%v.ListFeatures(_) = _, %v", client, err)}log.Println(feature)
}
和简单RPC调用一样,调用时传递了一个方法的上下文和一个请求。但是我们取回的是一个RouteGuide_ListFeaturesClient
实例而不是一个响应对象。客户端可以使用RouteGuide_ListFeaturesClient
流读取服务器的响应。
我们使用RouteGuide_ListFeaturesClient
的Recv()
方法不停地将服务器的响应读入到一个protocol buffer响应对象中(本例中的Feature
对象),直到没有更多消息为止:客户端需要在每次调用后检查从Recv()
返回的错误err
。如果为nil
,则流仍然良好,并且可以继续读取;如果是io.EOF
,则消息流已结束;否则就是一定RPC错误,该错误会通过err
传递给调用程序。
客户端流式RPC
客户端流方法RecordRoute
与服务器端方法相似,不同之处在于,我们仅向该方法传递一个上下文并获得一个RouteGuide_RecordRouteClient
流,该流可用于写入和读取消息。
// 随机的创建一些Points
r := rand.New(rand.NewSource(time.Now().UnixNano()))
pointCount := int(r.Int31n(100)) + 2 // Traverse at least two points
var points []*pb.Point
for i := 0; i < pointCount; i++ {points = append(points, randomPoint(r))
}
log.Printf("Traversing %d points.", len(points))
stream, err := client.RecordRoute(context.Background())// 调用服务中定义的客户端流式RPC方法
if err != nil {log.Fatalf("%v.RecordRoute(_) = _, %v", client, err)
}
for _, point := range points {if err := stream.Send(point); err != nil {// 向流中写入多个请求消息if err == io.EOF {break}log.Fatalf("%v.Send(%v) = %v", stream, point, err)}
}
reply, err := stream.CloseAndRecv()// 从流中取回服务器的响应
if err != nil {log.Fatalf("%v.CloseAndRecv() got error %v, want %v", stream, err, nil)
}
log.Printf("Route summary: %v", reply)
RouteGuide_RecordRouteClient
有一个Send()
。我们可以使用它发送请求给服务端。一旦我们使用Send()写入流完成后,我们需要在流上调用
CloseAndRecv()方法让gRPC知道我们已经完成了请求的写入并且期望得到一个响应。我们从
CloseAndRecv()方法返回的
err中可以获得RPC状态。如果状态是
nil,
CloseAndRecv()`的第一个返回值就是一个有效的服务器响应。
双向流式RPC
最后,让我们看一下双向流式RPC RouteChat()
。与RecordRoute
一样,我们只向方法传递一个上下文对象,然后获取一个可用于写入和读取消息的流。但是,这一次我们在服务器仍将消息写入消息流的同时,通过方法的流返回值。
stream, err := client.RouteChat(context.Background())
waitc := make(chan struct{})
go func() {for {in, err := stream.Recv()if err == io.EOF {// read done.close(waitc)return}if err != nil {log.Fatalf("Failed to receive a note : %v", err)}log.Printf("Got message %s at point(%d, %d)", in.Message, in.Location.Latitude, in.Location.Longitude)}
}()
for _, note := range notes {if err := stream.Send(note); err != nil {log.Fatalf("Failed to send a note: %v", err)}
}
stream.CloseSend()
<-waitc
除了在完成调用后使用流的CloseSend()
方法外,此处的读写语法与我们的客户端流方法非常相似。尽管双方总是会按照对方的写入顺序来获取对方的消息,但是客户端和服务器都可以以任意顺序进行读取和写入-两端的流完全独立地运行。
启动应用
要编译和运行服务器,假设你位于$ GOPATH/src/google.golang.org/grpc/examples/route_guide
文件夹中,只需:
$ go run server/server.go
同样,运行客户端:
$ go run client/client.go
用Golang构建gRPC服务相关推荐
- php brotobuf,用Golang构建gRPC服务
根据官方文档要求需要提供一下环境支持 go环境已经搭建成功了,上一篇文章安装了protoc编辑器,现在只需要安装所需插件即可. 1.安装grpc所需要的插件:protoc-gen-go.protoc- ...
- 使用Golang搭建gRPC服务提供给.NetCore客户端调用
gRPC概述 RPC 说到gRPC就不得不提RPC,所谓RPC(remote procedure call 远程过程调用)框架实际是提供了一套机制,使得应用程序之间可以进行通信,简单点来说就是我A机器 ...
- 使用Golang搭建gRPC服务提供给.NetCore调用
文章目录 gRPC概述 RPC gRPC又是什么呢 安装 Golang IDE(Goland) Protocol Buffer 下载Protocal Buffer 配置Protocal Buffer编 ...
- grpc(3):使用 golang 开发 grpc 服务端和client
1,关于grpc-go golang 能够能够做grpc的服务端和client. 官网的文档: http://www.grpc.io/docs/quickstart/go.html https://g ...
- 经济学人使用Golang构建微服务历程回顾
关键点 经济学人内容分发系统需要更大的灵活性,将内容传递给日益多样化的数字渠道.为了实现这一灵活性目标并保持高水平的性能和可靠性,平台从一个单体结构过渡到微服务体系结构. 用Go编写的服务是新系统的一 ...
- golang 构建HTTP服务
一个go最简单的Http服务器程序 package mainimport ("fmt""net/http" )func IndexHandler(w http. ...
- golang构建htpp服务
1.简单实现 server package mainimport ("flag""net/http" )func main() {host := flag.St ...
- 深入浅出 gRPC 01:gRPC 服务端创建和调用原理
目录 1. RPC 入门 1.1 RPC 框架原理 1.2 业界主流的 RPC 框架 1.3 gRPC 简介 1.3.1 gRPC 概览 1.3.2 gRPC 特点 2. gRPC 服务端创建 2.1 ...
- 从零开始构建gRPC的Go服务
介绍 Protocol Buffers and gRPC是用于定义通过网络有效通信的微服务的流行技术.许多公司在Go中构建gRPC微服务,发布了他们开发的框架,本文将从gRPC入门开始,一步一步构建一 ...
最新文章
- [Cocos2d-x]视差滚屏效果的实现
- 2018年04月26日交的智商税
- MySQL数据表的创建、查看、插入
- 我拿什么融化你,冰冷的电子图书馆?
- AcWing 164. 可达性统计
- win7+GPU运行py-faster-rcnn
- 高浓度DHA 德国奎尔鱼油 (QÜELL FISH OIL™HIGH DHA)
- caffe教程笔记《Blobs, Layers, and Nets》
- Ant Design Upload 文件上传功能
- phpQuery的用法
- 计算机一级如何添加对角线,如何在表格中添加对角线
- java18.取球游戏,12种球类游戏,想怎么玩就怎么玩!
- Guawa的Splitter的工具类
- 牛客 华华听月月唱歌 贪心
- 学生个人网页制作成品
- 20-40K/月,百度车联网招聘多岗位Android工程师(地点:深圳)
- 基于微信小程序的校园二手交易
- 2019年4月中国编程语言排行榜,java占有率一骑绝尘,python工资领先
- STM8自学入门方向
- nsa组网语音部署策略_部署策略
热门文章
- 启动NASA“造导弹”,阿里为何要“上天”?
- 《为iPad而设计:打造畅销App》——快速回顾用户界面设计史
- 无意间发现我的博客园的年龄有11年了
- 家人重病什么心情都没了
- Matlab定义符号函数(ZZ)
- drupal 字符串替换符号 @ % !
- Primavera P6 安装配置指南
- 被黑客NeoN“附体” QQ为推产品谎报漏洞
- JBookManager v1.00.2008314 (编辑管理您的Jar电子书)
- 一个失败的创意:GPGPU纹理化通用加速kD树的实现