protobuf介紹
protobuf是一種二進(jìn)制的序列化格式，相對(duì)于json來(lái)說(shuō)體積更小，傳輸更快。
安裝protobuf
安裝protobuf的目的主要用來(lái)將proto文件編譯成python、c、Java可調(diào)用的接口。
# 如果gcc版本較低，需要升級(jí)gcc
wget https://main.qcloudimg.com/raw/d7810aaf8b3073fbbc9d4049c21532aa/protobuf-2.6.1.tar.gz
tar -zxvf protobuf-2.6.1.tar.gz -C /usr/local/ cd /usr/local/protobuf-2.6.1
./configure
make make install
# 可以在/etc/profile或者~/.bash_profile末尾設(shè)置永久有效
export PATH=$PATH:/usr/local/protobuf-2.6.1/bin
使用下面命令查看是否安裝成功。
[root@CodeOnTheRoad ~]# protoc --version
libprotoc 2.6.1
構(gòu)建python接口
創(chuàng)建cls.proto文件，定義序列化結(jié)構(gòu)：
package cls;
message Log
{
message Content
{
required string key = 1; // 每組字段的 key
required string value = 2; // 每組字段的 value
}
required int64 time = 1; // 時(shí)間戳，UNIX時(shí)間格式
repeated Content contents = 2; // 一條日志里的多個(gè)kv組合
}
message LogTag
{
required string key = 1;
required string value = 2;
}
message LogGroup
{
repeated Log logs = 1; // 多條日志合成的日志數(shù)組
optional string contextFlow = 2; // 目前暫無(wú)效用
optional string filename = 3; // 日志文件名
optional string source = 4; // 日志來(lái)源，一般使用機(jī)器IP
repeated LogTag logTags = 5;
}
message LogGroupList
{
repeated LogGroup logGroupList = 1; // 日志組列表
}
只用下面命令將proto文件轉(zhuǎn)換為python可調(diào)用的接口。
protoc cls.proto --python_out=./
執(zhí)行完后，在此目錄下生成cls_pb2.py。
序列化
import cls_pb2 as cls
import time
# 構(gòu)建protoBuf日志內(nèi)容
LogLogGroupList = cls.LogGroupList()
LogGroup = LogLogGroupList.logGroupList.add()
LogGroup.contextFlow = "1"
LogGroup.filename = "python.log"
LogGroup.source = "localhost"
LogTag = LogGroup.logTags.add()
LogTag.key = "key"
LogTag.value = "value"
Log = LogGroup.logs.add()
Log.time = int(round(time.time() * 1000000))
Content = Log.contents.add()
Content.key = "Hello"
Content.value = "World"
print(LogLogGroupList)
# 序列化
data = LogLogGroupList.SerializeToString()
print(data)
其實(shí)就是講一個(gè)protobuf的結(jié)構(gòu)文本序列化成了二進(jìn)制的形式。
反序列化
反序列化就是將二進(jìn)制轉(zhuǎn)換成protobuf結(jié)構(gòu)。
# 反序列化
LogLogGroupList = cls.LogGroupList()
LogLogGroupList.ParseFromString(data)
print(LogLogGroupList)
運(yùn)行結(jié)果
上面序列化和反序列化代碼結(jié)果運(yùn)行如下：
到此這篇關(guān)于Python使用protobuf序列化和反序列化的實(shí)現(xiàn)的文章就介紹到這了,更多相關(guān)Python 序列化和反序列化內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
您可能感興趣的文章:- java程序中protobuf的基本用法示例
- 淺談序列化之protobuf與avro對(duì)比(Java)
- 基于Protobuf動(dòng)態(tài)解析在Java中的應(yīng)用 包含例子程序
- protobuf c++編程筆記
- python使用protobufde的過(guò)程解析
- SpringBoot使用protobuf格式的接口方式
- Netty結(jié)合Protobuf進(jìn)行編解碼的方法
- Protobuf在Cmake中的正確使用方法詳解
- C#語(yǔ)言使用gRPC、protobuf(Google Protocol Buffers)實(shí)現(xiàn)文件傳輸功能
- 在java程序中使用protobuf
