grpc 基础知识 - Go

该篇文章介绍了golang的grpc编程。

通过下面的例子,你将会学到:
1. 在一个.proto文件里define一个service
2. 用protocol buffer 编译工具生成server和client代码
3. 用go grpc的api写一个简单的server和client

你应该已经读过 概述( Overview),并且对 protocol buffers有所了解,注意教程中的例子用了protocol buffer 的proto3版本:详情见以下两个链接 proto3 language guide , Go generated code guide.

为什么用grpc?

我们的示例是一个简单的路由映射应用程序,它允许客户机获取有关其路由上功能的信息,创建其路由的摘要,并与服务器和其他客户机交换路由信息,如流量更新。
用grpc我们可以在.proto文件中定义我们的服务,并且支持任何语言的server和client..这些server和client可以在从谷歌的内部服务器到你的平板电脑上运行。所有的不同平台的语言的通讯的复杂性都由grpc为你处理。用protocol buffer的优势包括高效的序列化/简单的IDL/高可用的接口更新

实例代码和setup

示例代码在 grpc/grpc-go/examples/route_guide。去下载示例代码并且clone grpc-go通过运行如下命令:

$ go get google.golang.org/grpc

cd到grpc-go/examples/route_guide:

$ cd GOPATH/src/google.golang.org/grpc/examples/route_guide

你应该已经安装了相应的工具来生成server和client的接口代码。如果没有看如下链接:Go quick start guide.

定义service

我们的第一步是通过protoco buffer 定义grpc的service以及response和request的类型.你可以在examples/route_guide/routeguide/route_guide.proto看到完成的.proto文件。
在proto文件中定义service:

service RouteGuide {
   ...
}

然后再service里定义rpc方法,指定他们的request和response方法。grpc允许你定义四种类型的rpc方法。他们在RouteGuide 里都有用到。

  • 一个简单的RPC,客户端用stub发送请求到服务端,等待一个回应。就像普通的函数调用。
// Obtains the feature at a given position.
rpc GetFeature(Point) returns (Feature) {}
  • 一个server侧streaming RPC,客户端发送一个请求到server,获取一个stream,可以read一系列message。客户端read这个stream直到全部读完。在例子中可以看到,你指定server侧streaming方法,通过在response类型前面放置stream关键字。
// Obtains the Features available within the given Rectangle.  Results are
// streamed rather than returned at once (e.g. in a response message with a
// repeated field), as the rectangle may cover a large area and contain a
// huge number of features.
rpc ListFeatures(Rectangle) returns (stream Feature) {}
  • 一个客户端侧streaming RPC,客户端通过一个提供的stream,写入一系列的messages,并且发送到server。一旦客户端全部写完,他等待server全部读完,并且返回一个response。你指定客户端侧streaming方法,通过在request类型前面放置stream关键字。
// Accepts a stream of Points on a route being traversed, returning a
// RouteSummary when traversal is completed.
rpc RecordRoute(stream Point) returns (RouteSummary) {}
  • 一个双向的streaming RPC,两侧都通过read-write stream发送一串message。这两个steam的操作是独立的。因此client和server可以以任何进行读/写。例如server可以等message读完了之后回一个response。也可以读完之前回复response。也可以读一个回复一个,或者其他的读写组合。每个stream内message的顺序是保存好的。stream关键字在request/response前面。
// Accepts a stream of RouteNotes sent while a route is being traversed,
// while receiving other RouteNotes (e.g. from other users).
rpc RouteChat(stream RouteNote) returns (stream RouteNote) {}

.proto文件包含protocol buffer message类型(request/response的参数)的定义。例如下面是Point类型

// Points are represented as latitude-longitude pairs in the E7 representation
// (degrees multiplied by 10**7 and rounded to the nearest integer).
// Latitudes should be in the range +/- 90 degrees and longitude should be in
// the range +/- 180 degrees (inclusive).
message Point {
  int32 latitude = 1;
  int32 longitude = 2;
}
生产client/server代码

下面我们要通过.proto文件生成grpc client/server的接口。我们通过一个带有go插件的编译工具protoc。这类似于我们在quickstart guide所作的。
在route_guide实例目录执行:

protoc -I routeguide/ routeguide/route_guide.proto --go_out=plugins=grpc:routeguide

执行这个命令,在routeguide目录下生产文件:

route_guide.pb.go

文件包含:

  • 用于填充、序列化和检索请求和响应消息类型的所有的protocol buffer代码
  • 被客户端调用的一个接口类型(或 stub),包含在RouteGuide service中定义的一个方法。
  • 被服务端实现的一个接口类型(或 stub),包含在RouteGuide service中定义的一个方法。
创建server

首先我们来看看如何生产RouteGuide server。如果你只对生产rpc client 感兴趣,请跳过该章节。跳到Creating the client

  • 实现由service定义生成的service interface.
  • 运行gRPC服务器来侦听来自客户机的请求并将其发送到正确的服务实现。
    RouteGuide server的实现在 grpc-go/examples/route_guide/server/server.go。让我们进一步看一下,他们是如何工作的:
实现RouteGuide

如下,我们的server有routeGuideServer 结构体,来实现生成的RouteGuideServer接口:

type routeGuideServer struct {
        ...
}
...

func (s *routeGuideServer) GetFeature(ctx context.Context, point *pb.Point) (*pb.Feature, error) {
        ...
}
...

func (s *routeGuideServer) ListFeatures(rect *pb.Rectangle, stream pb.RouteGuide_ListFeaturesServer) error {
        ...
}
...

func (s *routeGuideServer) RecordRoute(stream pb.RouteGuide_RecordRouteServer) error {
        ...
}
...

func (s *routeGuideServer) RouteChat(stream pb.RouteGuide_RouteChatServer) error {
        ...
}
...
简单的rpc

routeGuideServer 实现所有的services方法。先看一下最简单的GetFeature,它从客户端获取Point然后return一个对应的feature信息。

func (s *routeGuideServer) GetFeature(ctx context.Context, point *pb.Point) (*pb.Feature, error) {
    for _, feature := range s.savedFeatures {
        if proto.Equal(feature.Location, point) {
            return feature, nil
        }
    }
    // No feature was found, return an unnamed feature
    return &pb.Feature{"", point}, nil
}

这个方法传递一个context对象和client的Pointprotocol buffer 请求。它返回一个包含response信息的Featureprotocol buffer 对象和error

server侧streaming RPC

我们来看一个streaming RPCs。 ListFeatures是一个server侧的streaming rpc,因此我们需要发送多个Fearute到client。

func (s *routeGuideServer) ListFeatures(rect *pb.Rectangle, stream pb.RouteGuide_ListFeaturesServer) error {
    for _, feature := range s.savedFeatures {
        if inRange(feature.Location, rect) {
            if err := stream.Send(feature); err != nil {
                return err
            }
        }
    }
    return nil
}

函数有一个请求参数(client想要通过Rectangle 来查找Features)和一个RouteGuide_ListFeaturesServer对象去write responses.
函数中,我们填充并return所有的Feature,通过Send()把他们写到RouteGuide_ListFeaturesServer 。

client侧streaming RPC

现在来看一下复杂一点的:客户端侧streaming方法RecordRoute。我们从客户端收到一个stream(内有多个Point),并且返回单个RouteSummary 。正如你所看到的,这次没有request参数,只有一个RouteGuide_RecordRouteServer stream,server可以用来读写message,通过Recv()读,通过SendAndClose()写。

func (s *routeGuideServer) RecordRoute(stream pb.RouteGuide_RecordRouteServer) error {
    var pointCount, featureCount, distance int32
    var lastPoint *pb.Point
    startTime := time.Now()
    for {
        point, err := stream.Recv()
        if err == io.EOF {
            endTime := time.Now()
            return stream.SendAndClose(&pb.RouteSummary{
                PointCount:   pointCount,
                FeatureCount: featureCount,
                Distance:     distance,
                ElapsedTime:  int32(endTime.Sub(startTime).Seconds()),
            })
        }
        if err != nil {
            return err
        }
        pointCount++
        for _, feature := range s.savedFeatures {
            if proto.Equal(feature.Location, point) {
                featureCount++
            }
        }
        if lastPoint != nil {
            distance += calcDistance(lastPoint, point)
        }
        lastPoint = point
    }
}

通过Recv()持续读,直到io.EOF

双向streaming RPC

最后,我们来看一下双向streaming RPC RouteChat()

func (s *routeGuideServer) RouteChat(stream pb.RouteGuide_RouteChatServer) error {
    for {
        in, err := stream.Recv()
        if err == io.EOF {
            return nil
        }
        if err != nil {
            return err
        }
        key := serialize(in.Location)
                ... // look for notes to be sent to client
        for _, note := range s.routeNotes[key] {
            if err := stream.Send(note); err != nil {
                return err
            }
        }
    }
}

这里读和写的语法和我们的client-streaming 的方法特别像,不同点是server用stream的Send()方法,而不是SendAndClose(),因为需要写入多个response。

启动server

我们完成所有的方法后,需要启动gRPC server,client才能发送请求。下面的片段展示了我们如何启动RouteGuide service的。

flag.Parse()
lis, err := net.Listen("tcp", fmt.Sprintf(":%d", *port))
if err != nil {
        log.Fatalf("failed to listen: %v", err)
}
grpcServer := grpc.NewServer()
pb.RegisterRouteGuideServer(grpcServer, &routeGuideServer{})
... // determine whether to use TLS
grpcServer.Serve(lis)

新建并且启动一个server:

  1. 指定用来监听request的的端口,使用lis, err := net.Listen("tcp", fmt.Sprintf(":%d", *port))
  2. grpc.NewServer()创建gRPC server的实例。
  3. 在GRPC服务器上注册我们的服务实现。
  4. 调用Serve()阻塞等待,直到进程被kill或者Stop()被调用。
创建一个client

这一部分我们会看一下如何为RouteGuideservice创建GO client。你可以看到完整的client code在 grpc-go/examples/route_guide/client/client.go

创建一个stub

为了调用服务的method,我们首先需要创建通讯的管道。把server的地址和port传到grpc.Dial(),如下:

conn, err := grpc.Dial(*serverAddr)
if err != nil {
    ...
}
defer conn.Close()

如果service要求的话,你可以在grpc.Dial中用DialOptions设置授权证书。
我们通过.proto文件生成的pb package中的NewRouteGuideClient 方法获取client stub。

client := pb.NewRouteGuideClient(conn)
调用service的方法

现在让我们看一下如何调用service方法。在gRPC-Go,PRCs操作是在阻塞/同步模式,PRC操作需要等待server 的response,要么返回response要么返回error。

简单的RPC

调用简单的RPC GetFeature就像调用本地的函数一样简单。

feature, err := client.GetFeature(context.Background(), &pb.Point{409146138, -746188906})
if err != nil {
        ...
}

函数的参数为protocol buffer对象(point)和context.Context对象,通过context参数我们可以改变PRC的行为,比如超时/取消。如果调用没有返回错误,我们可以从第一个return值中读到response信息。

log.Println(feature)
server侧streaming RPC

这里我们调用server侧streaming的方法ListFeatures,该方法返回一串Feature

rect := &pb.Rectangle{ ... }  // initialize a pb.Rectangle
stream, err := client.ListFeatures(context.Background(), rect)
if err != nil {
   ...
}
for {
   feature, err := stream.Recv()
   if err == io.EOF {
       break
   }
   if err != nil {
       log.Fatalf("%v.ListFeatures(_) = _, %v", client, err)
   }
   log.Println(feature)
}

这里返回值是一个RouteGuide_ListFeaturesClient实例,客户端可以通过RouteGuide_ListFeaturesClient读取server的一系列返回值。
我们使用routeguide_ListFeaturesClientrecv()方法重复读取服务器的响应到protocol buffer对象,直到不再有消息:客户端需要检查每次调用后recv()返回的错误。如果为nil,可以继续读取;如果为io.eof,则消息流已结束;否则,必须存在一个通过err传递的rpc错误。

client侧streaming RPC

客户端流方法recordroute与服务器端方法类似,只是我们只传递context参数获取routeguide_recordroute client stream,我们可以使用它来写入和读取消息。

// Create a random number of random points
r := rand.New(rand.NewSource(time.Now().UnixNano()))
pointCount := int(r.Int31n(100)) + 2 // Traverse at least two points
var points []*pb.Point
for i := 0; i < pointCount; i++ {
    points = append(points, randomPoint(r))
}
log.Printf("Traversing %d points.", len(points))
stream, err := client.RecordRoute(context.Background())
if err != nil {
    log.Fatalf("%v.RecordRoute(_) = _, %v", client, err)
}
for _, point := range points {
    if err := stream.Send(point); err != nil {
        log.Fatalf("%v.Send(%v) = %v", stream, point, err)
    }
}
reply, err := stream.CloseAndRecv()
if err != nil {
    log.Fatalf("%v.CloseAndRecv() got error %v, want %v", stream, err, nil)
}
log.Printf("Route summary: %v", reply)

routeguide_recordrouteclient有一个send()方法,我们可以使用它向服务器发送请求。一旦我们使用send()将客户机的请求写入流,我们就需要对该流调用closeAndrecv,让grpc知道我们已经完成了写入,并期望收到响应。我们从closeAndrecv返回的错误中获取RPC状态。如果状态为nil,那么closeAndrecv的第一个返回值将是有效的服务器响应。

双向streaming RPC

最后,让我们看看双向流式RPC RouteChat()。就像在recordroute中一样,我们只传递方法一个context对象,并返回一个可以用来写和读消息的流。但是,这一次我们通过自己的方法的stream返回response,而服务器仍在继续向其消息流写入消息。

stream, err := client.RouteChat(context.Background())
waitc := make(chan struct{})
go func() {
    for {
        in, err := stream.Recv()
        if err == io.EOF {
            // read done.
            close(waitc)
            return
        }
        if err != nil {
            log.Fatalf("Failed to receive a note : %v", err)
        }
        log.Printf("Got message %s at point(%d, %d)", in.Message, in.Location.Latitude, in.Location.Longitude)
    }
}()
for _, note := range notes {
    if err := stream.Send(note); err != nil {
        log.Fatalf("Failed to send a note: %v", err)
    }
}
stream.CloseSend()
<-waitc

这里的读写语法与我们的客户端流方法非常相似,只是我们在完成调用后使用了流的closesend()方法。尽管每一方总是按照对方的消息被写入的顺序来获取对方的消息,但是客户机和服务器都可以以任何顺序读写——流完全独立地运行。

Try it out!

编译和运行服务器,假设您在文件夹中$GOPATH/src/google.golang.org/grpc/examples/route_guide:

$ go run server/server.go

同样,要运行客户机:

$ go run client/client.go

参考文档:https://grpc.io/docs/tutorials/basic/go.html#try-it-out

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,542评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,596评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,021评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,682评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,792评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,985评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,107评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,845评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,299评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,612评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,747评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,441评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,072评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,828评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,069评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,545评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,658评论 2 350

推荐阅读更多精彩内容