基于python的protobuf简介及
Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准,Protocol Buffers 是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或 rpc 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。
1、安装protobuf
安装以及在python下使用protobuf,要求Python版本必须>2.6。
a) windows
打开网页下载最新版的protobuf-python-3.5.1.zip和protoc-3.5.1-win32.zip。
解压文件后,将protoc-3.5.1-win32\bin\protoc.exe 复制到protobuf-3.5.1\src,然后进入目录protobuf-3.5.1\python\,运行命令:
python setup.py build //生成大量*.py
- python setup.py install
b) linux
打开网页下载最新版的protobuf-python-3.5.1.tar.gz,然后在当前目录下执行下述代码:
# 安装protobuf
tar zxvf protobuf-python-3.5.1.tar.gz
cd protobuf-3.5.1
./configure
make
make check
make install
# 验证
protoc --version
out:libprotoc 3.5.1 #表示安装成功
# 安装python protobuf模块
cd python
python setup.py install # 这一步需要先安装six模块才能正常安装
2、测试
创建一个proto文件test.proto,这实际上是定义数据类型,类似c中的struct
message CDevice
{
optional int32 devId = 1;
optional string name = 2;
}
该数据类型名为CDevice,其中包含两个属性,一个是int32型的设备Id devId,一个是string型的设备名称 name运行命令,生成test_pb2.py,该py文件需要import到测试程序中。如果proto文件中没有指定生成prot2还是proto3,默认生成proto2。在cmd中输入:
【安装protec.exe的路径】-I=【proto文件所在的文件夹!注意是文件夹路径】 --python_out=【你期待输出的文件路径】【proto文件所在的文件夹+文件名】.proto
protoc -I=./ --python_out=./ test.proto
注意等号两边不要留空格
-I为proto文件的路径,--python_out=./表示在当前路径下由指定的.proto生成python可用的*.py文件
import test_pb2
import traceback
import sys
#注:在该py文件中可以查到protobuf的调用方法,主要有序列化和反序列化。中间省略了数据传输部分,数据序列化后可以用rpc、Socket或者其他方式传输。
try:
sendData = test_pb2.CDevice()
sendData.devId = 9
sendData.name = 'USB'
sendDataStr = sendData.SerializeToString()
print('SerializeToString:',sendDataStr)
receiveDataStr = sendDataStr
receiveData = test_pb2.CDevice()
receiveData.ParseFromString(receiveDataStr)
print('pares serialize string, return: devId = ', receiveData.devId, ', name = ',receiveData.name )
except Exception, e:
print Exception, ':', e
print traceback.print_exc()
errInfo = sys.exc_info()
print errInfo[0], ':', errInfo[1]
#输出结果:
('SerializeToString:', '\x08\t\x12\x03USB')
('pares serialize string, return: devId = ', 9, ', name = ', u'USB')
相关文章