基于python的protobuf简介及

2023-01-31 05:01:54 python 简介 protobuf

Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准,Protocol Buffers 是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或 rpc 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。

1、安装protobuf
安装以及在python下使用protobuf,要求Python版本必须>2.6。

a) windows

打开网页下载最新版的protobuf-python-3.5.1.zipprotoc-3.5.1-win32.zip

解压文件后,将protoc-3.5.1-win32\bin\protoc.exe 复制到protobuf-3.5.1\src,然后进入目录protobuf-3.5.1\python\,运行命令:

  • python setup.py build //生成大量*.py

  • python setup.py install

b) linux
打开网页下载最新版的protobuf-python-3.5.1.tar.gz,然后在当前目录下执行下述代码:
# 安装protobuf
tar zxvf protobuf-python-3.5.1.tar.gz
cd protobuf-3.5.1
./configure
make
make check
make install
​
# 验证
protoc --version
out:libprotoc 3.5.1 #表示安装成功
​
# 安装python protobuf模块
cd python
python setup.py install # 这一步需要先安装six模块才能正常安装

2、测试

创建一个proto文件test.proto,这实际上是定义数据类型,类似c中的struct

message CDevice
{
   optional int32 devId = 1;
   optional string name = 2;
}

该数据类型名为CDevice,其中包含两个属性,一个是int32型的设备Id devId,一个是string型的设备名称 name运行命令,生成test_pb2.py,该py文件需要import到测试程序中。如果proto文件中没有指定生成prot2还是proto3,默认生成proto2。在cmd中输入:

  • 【安装protec.exe的路径】-I=【proto文件所在的文件夹!注意是文件夹路径】 --python_out=【你期待输出的文件路径】【proto文件所在的文件夹+文件名】.proto

  • protoc -I=./ --python_out=./ test.proto

  • 注意等号两边不要留空格

-I为proto文件的路径,--python_out=./表示在当前路径下由指定的.proto生成python可用的*.py文件

import test_pb2
import traceback
import sys
#注:在该py文件中可以查到protobuf的调用方法,主要有序列化和反序列化。中间省略了数据传输部分,数据序列化后可以用rpc、Socket或者其他方式传输。
​
try:
    sendData = test_pb2.CDevice()
    sendData.devId = 9
    sendData.name = 'USB'
​
    sendDataStr = sendData.SerializeToString()
    print('SerializeToString:',sendDataStr)
​
    receiveDataStr = sendDataStr
    receiveData = test_pb2.CDevice()
    receiveData.ParseFromString(receiveDataStr)
    print('pares serialize string, return: devId = ', receiveData.devId, ', name = ',receiveData.name )
except Exception, e:
    print Exception, ':', e
    print traceback.print_exc()
    errInfo = sys.exc_info()
    print errInfo[0], ':', errInfo[1]
​
    
#输出结果:
('SerializeToString:', '\x08\t\x12\x03USB')
('pares serialize string, return: devId = ', 9, ', name = ', u'USB')


相关文章