写点什么

技术实践:教你用 Python 搭建 gRPC 服务

发布于: 1 小时前

​​​​​​​​​​​​​​​​​​​​​​​​​​摘要:gRPC 是一个高性能、通用的开源 RPC 框架,其由 Google 主要面向移动应用开发并基于 HTTP/2 协议标准而设计,基于 ProtoBuf 序列化协议开发,且支持众多开发语言。


本文分享自华为云社区《用python搭建gRPC服务》,原文作者:井冈山_阳春 。


gRPC 是一个高性能、通用的开源 RPC 框架,其由 Google 主要面向移动应用开发并基于 HTTP/2 协议标准而设计,基于 ProtoBuf 序列化协议开发,且支持众多开发语言。一个 gRPC 服务的大体结构图为:



​图一表明,grpc 的服务是跨语言的,但需要遵循相同的协议(proto)。相比于 REST 服务,gPRC 的一个很明显的优势是它使用了二进制编码,所以它比 JSON/HTTP 更快,且有清晰的接口规范以及支持流式传输,但它的实现相比 rest 服务要稍微要复杂一些,下面简单介绍搭建 gRPC 服务的步骤。


1.   安装 python 需要的库


pip install grpciopip install grpcio-tools  pip install protobuf
复制代码


2.   定义 gRPC 的接口


创建 gRPC 服务的第一步是在.proto 文件中定义好接口,proto 是一个协议文件,客户端和服务器的通信接口正是通过 proto 文件协定的,可以根据不同语言生成对应语言的代码文件。这个协议文件主要就是定义好服务(service)接口,以及请求参数和相应结果的数据结构,具体的 proto 语法参见如下链接(https://www.jianshu.com/p/da7ed5914088),关于二维数组、字典等 python 中常用的数据类型,proto 语法的表达见链接(https://blog.csdn.net/xiaoxiaojie521/article/details/106938519),下面是一个简单的例子。


syntax = "proto3";option cc_generic_services = true;//定义服务接口service GrpcService {    rpc hello (HelloRequest) returns (HelloResponse) {}  //一个服务中可以定义多个接口,也就是多个函数功能}//请求的参数message HelloRequest {    string data = 1;   //数字1,2是参数的位置顺序,并不是对参数赋值    Skill skill = 2;  //支持自定义的数据格式,非常灵活};//返回的对象message HelloResponse {    string result = 1;    map<string, int32> map_result = 2; //支持map数据格式,类似dict};message Skill {    string name = 1;};
复制代码


3.   使用 protoc 和相应的插件编译生成对应语言的代码


python -m grpc_tools.protoc -I ./ --python_out=./ --grpc_python_out=. ./hello.proto
复制代码


​利用编译工具把 proto 文件转化成 py 文件,直接在当前文件目录下运行上述代码即可。


  • -I 指定 proto 所在目录

  • -m 指定通过 protoc 生成 py 文件

  • --python_out 指定生成 py 文件的输出路径

  • hello.proto 输入的 proto 文件


执行上述命令后,生成 hello_pb2.py 和 hello_pb2_grpc.py 这两个文件。


4.   编写 grpc 的服务端代码


#! /usr/bin/env python# coding=utf8import timefrom concurrent import futuresimport grpcfrom gRPC_example import hello_pb2_grpc, hello_pb2_ONE_DAY_IN_SECONDS = 60 * 60 * 24class TestService(hello_pb2_grpc.GrpcServiceServicer):    '''    继承GrpcServiceServicer,实现hello方法    '''    def __init__(self):        pass    def hello(self, request, context):        '''        具体实现hello的方法,并按照pb的返回对象构造HelloResponse返回        :param request:        :param context:        :return:        '''        result = request.data + request.skill.name + " this is gprc test service"        list_result = {"12": 1232}        return hello_pb2.HelloResponse(result=str(result),                                       map_result=list_result)def run():    '''    模拟服务启动    :return:    '''    server = grpc.server(futures.ThreadPoolExecutor(max_workers=10))    hello_pb2_grpc.add_GrpcServiceServicer_to_server(TestService(),server)    server.add_insecure_port('[::]:50052')    server.start()    print("start service...")    try:        while True:            time.sleep(_ONE_DAY_IN_SECONDS)    except KeyboardInterrupt:        server.stop(0)if __name__ == '__main__':    run()
复制代码


​在服务端侧,需要实现 hello 的方法来满足 proto 文件中 GrpcService 的接口需求,hello 方法的传入参数,是在 proto 文件中定义的 HelloRequest,context 是保留字段,不用管,返回参数则是在 proto 中定义的 HelloResponse,服务启动的代码是标准的,可以根据需求修改提供服务的 ip 地址以及端口号。


5.   编写 gRPC 客户端的代码


#! /usr/bin/env python# coding=utf8import grpcfrom gRPC_example import #! /usr/bin/env python# coding=utf8import grpcfrom gRPC_example import hello_pb2_grpc, hello_pb2def run():    '''    模拟请求服务方法信息    :return:    '''    conn=grpc.insecure_channel('localhost:50052')    client = hello_pb2_grpc.GrpcServiceStub(channel=conn)    skill = hello_pb2.Skill(name="engineer")    request = hello_pb2.HelloRequest(data="xiao gang", skill=skill)    respnse = client.hello(request)    print("received:",respnse.result)if __name__ == '__main__':    run()def run():    '''    模拟请求服务方法信息    :return:    '''    conn=grpc.insecure_channel('localhost:50052')    client = hello_pb2_grpc.GrpcServiceStub(channel=conn)    skill = hello_pb2.Skill(name="engineer")    request = hello_pb2.HelloRequest(data="xiao gang", skill=skill)    response = client.hello(request)    print("received:",response.result)if __name__ == '__main__':    run()
复制代码


​客户端侧代码的实现比较简单,首先定义好访问 ip 和端口号,然后定义好 HelloRequest 数据结构,远程调用 hello 即可。需要强调的是,客户端和服务端一定要 import 相同 proto 文件编译生成的 hello_pb2_grpc, hello_pb2 模块,即使服务端和客户端使用的语言不一样,这也是 grpc 接口规范一致的体现。


6.   调用测试


先启动运行服务端的代码,再启动运行客户端的代码即可。


7.   gRPC 的使用总结


  • 定义好接口文档

  • 工具生成服务端/客户端代码

  • 服务端补充业务代码

  • 客户端建立 gRPC 连接后,使用自动生成的代码调用函数

  • 编译、运行


点击关注,第一时间了解华为云新鲜技术~

发布于: 1 小时前阅读数: 3
用户头像

提供全面深入的云计算技术干货 2020.07.14 加入

华为云开发者社区,提供全面深入的云计算前景分析、丰富的技术干货、程序样例,分享华为云前沿资讯动态,方便开发者快速成长与发展,欢迎提问、互动,多方位了解云计算! 传送门:https://bbs.huaweicloud.com/

评论

发布
暂无评论
技术实践:教你用Python搭建gRPC服务