百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

protobuf之序列化数据和反序列化数据基础知识

haoteby 2025-05-08 18:31 26 浏览

什么是 protobuf

Protocal Buffers(简称protobuf)是谷歌的一项技术,用于结构化的数据序列化、反序列化。

Protocol Buffers 是一种语言无关、平台无关、可扩展的序列化结构数据的方法,它可用于(数据)通信协议、数据存储等。

Protocol Buffers 是一种灵活,高效,自动化机制的结构数据序列化方法-可类比 XML,但是比 XML 更小(3 ~ 10倍)、更快(20 ~ 100倍)、更为简单。

你可以定义数据的结构,然后使用特殊生成的源代码轻松的在各种数据流中使用各种语言进行编写和读取结构数据。你甚至可以更新数据结构,而不破坏由旧数据结构编译的已部署程序

protobuf 就是一个序列化数据和反序列化数据的方法,类似的还有 XML、Json、Java 的 Serializable 等。
但protobuf的效率高于XML、Json,不过protobuf生成的是字节码,可读性相比之略差

生成代码指定

protoc demo.proto --java_out=./

--cpp_out :在目标目录DST_DIR中产生C++代码
--java_out :在目标目录DST_DIR中产生Java代码
--python_out :在目标目录 DST_DIR 中产生Python代码
--go_out :在目标目录 DST_DIR 中产生Go代码
--ruby_out:在目标目录 DST_DIR 中产生Ruby代码
--javanano_out:在目标目录DST_DIR中生成JavaNano
--objc_out:在目标目录DST_DIR中产生Object代码
--csharp_out:在目标目录DST_DIR中产生Object代码
 --php_out:在目标目录DST_DIR中产生Object代码

protobuf安装配置

protobuf编辑器安装

下载地址:
https://github.com/protocolbuffers/protobuf/releases

配置环境变量

打开cmd命令行,输入

protoc
protoc --version
# 生成protoc代码
protoc demo.proto --java_out=./

IDEA配置protobuf

1、File->Setting->Plugins

安装protobuf插件

重启之后我们可以在工具栏看到这两个选项
一个是配置全局的 protobuf
一个是生成所有的 protobuf 文件

2、配置protobufs :Configure->GenProtobuf

此处配置的是安装的protoc.exe

protoc path :我们下载的 protobuf 编辑器的位置,在 bin 目录下有一个 .exe 文件
quick gen : 对应的语言,这里选择伟大的 Java


简单-proto案例

1、引入pom依赖

        <!--  protobuf 支持 Java 核心包-->
        <dependency>
            <groupId>com.google.protobuf</groupId>
            <artifactId>protobuf-java</artifactId>
            <version>3.20.1</version>
        </dependency>
        <!--  proto 与 Json 互转会用到-->
        <dependency>
            <groupId>com.google.protobuf</groupId>
            <artifactId>protobuf-java-util</artifactId>
            <version>3.20.1</version>
        </dependency>

2、编写 .proto 文件

新建一个 demo.proto

//使用 proto3 语法 ,未指定则使用proto2
syntax = "proto3";

//生成 proto 文件所在包路径
package com.qingfeng.proto;

//生成 proto 文件所在包路径
option java_package = "com.qingfeng.proto";

//生成 proto 文件名
option java_outer_classname="DemoProto";

message Demo{
  //自身属性
  int32 id = 1;
  string code = 2;
  string name = 3;
}

3、生成 proto 对象

选中我们新建的.proto 文件,右键,选择框中的选项就可以生成了,将生成之后的文件拷贝到java目录下面。

4、新建测试类

package com.qingfeng.test;

import com.google.protobuf.InvalidProtocolBufferException;
import com.google.protobuf.util.JsonFormat;
import com.qingfeng.proto.DemoProto;

import java.util.Arrays;

/**
 * @author Administrator
 * @version 1.0.0
 * @ProjectName com.qingfeng-client
 * @Description TODO
 * @createTime 2022年05月01日 18:10:00
 */
public class DemoTest {

    public static void main(String[] args) {

        //初始化数据
        DemoProto.Demo.Builder demo = DemoProto.Demo.newBuilder();
        demo.setId(1)
                .setCode("001")
                .setName("张三")
                .build();

        //序列化
        DemoProto.Demo build = demo.build();
        //转换成字节数组
        byte[] s = build.toByteArray();
        System.out.println("protobuf数据bytes[]:" + Arrays.toString(s));
        System.out.println("protobuf序列化大小: " + s.length);


        DemoProto.Demo demo1 = null;
        String jsonObject = null;
        try {
            //反序列化
            demo1 = DemoProto.Demo.parseFrom(s);
            //转 json
            jsonObject = JsonFormat.printer().print(demo1);

        } catch (InvalidProtocolBufferException e) {
            e.printStackTrace();
        }

        System.out.println("Json格式化结果:\n" + jsonObject);
        System.out.println("Json格式化数据大小: " + jsonObject.getBytes().length);
    }

}

protobuf 与 Java 数据类型对应

1、字段规则

required : 字段只能也必须出现 1 次,多用于必填项,必须赋值的字符

required  int32 id = 1

optional : 字段可出现 0 次或多次,可有可无的字段,可以使用[default = xxx]配置默认值

optional string name = 1 [default = "张三"]

repeated : 字段可出现任意多次(包括 0),多用于 Java List 属性

//list String
repeated string strList = 5;
//list 对象
repeated Role roleList = 6;

2、字段类型

protobuf 类型

java 类型

double

double

float

float

int32

int

int64

long

bool

boolean

string

String

系统默认值
string默认为空字符串
bool默认为false
数值默认为0
enum默认为第一个元素

3、复杂类型

Java String、Integer List 在 protobuf 的定义

//创建一个 User 对象
message User{
	//list Int
	repeated int32 intList = 1;
	//list String
	repeated string strList = 5;
}

Java 对象 List 在 protobuf 的定义

//创建一个 User 对象
message User{
	//list 对象
	repeated Role roleList = 6;
}

Java String、Integer Map 在 protobuf 的定义

//创建一个 User 对象
message User{
	// 定义简单的 Map string
	map<string, int32> intMap = 7;
	// 定义复杂的 Map 对象
	map<string, string> stringMap = 8;
}

Java 对象 Map 在 protobuf 的定义

//创建一个 User 对象
message User{
	// 定义复杂的 Map 对象
	map<string, MapVauleObject> mapObject = 8;
}


// 定义 Map 的 value 对象
message MapVauleObject {
	string code = 1;
	string name = 2;
}

Java 实体类中嵌套实体 在 protobuf 的定义

//创建一个 User 对象
message User{
	// 对象
	NickName nickName = 4;
}

// 定义一个新的Name对象
message NickName {
	string nickName = 1;
}

相关推荐

提高购票成功率!官方“捡漏神器”,收藏!

清明小长假火车票已全部开售您买好假期出行的车票了吗?如果还没有买到的话不妨试试官方“捡漏神器”铁路12306的候补购票功能候补购票说明每个用户同时可以保有6个待兑现候补订单;每个候补订单最多可选择3个...

手把手教你用官方“捡漏神器”!提高购票成功率的秘诀在这

清明小长假火车票已全部开售您买好假期出行的车票了吗?...

微信里隐藏一个免费存放照片的相册,不占手机内存,不会用太浪费

才发现,不知道太可惜了,手机里有个免费存放照片的相册,你知道吗?简单一学就会,可惜好多人不知道,这个相册有三大优点:一就是免费长期使用二就是不占手机内存三就是无限次的上传...

速存!2025 教资笔试报名照片上传规范细则

教资报名卡在照片环节?!照片不合规直接导致报名失败,务必按这5点:1.基本要求:近6个月内免冠正面证件照,清晰无遮挡!2.尺寸要求:295像素(宽)*413像素(高)3.大小要求:文件不能超过...

微信新功能:朋友圈支持图片、表情包评论

不知道大家是否还记得,在2019年12月期间微信朋友圈评论支持发送自定义表情包,这个当时我也为大家分享过,只不过该功能在上线后没多久就下线了,具体原因未知,但我个人猜测可能跟一些用户发送的图片...

全红婵更新抖音动态,上传12张照片,第一张就是妹妹戴眼镜的合照

全红婵都抖音动态终于更新了,一共上传十二张照片,第一张就是和妹妹一起游玩戴眼镜的合照,还有婵宝的美甲照片全红婵刚发的新照片炸出一堆粉丝!首图就是她和妹妹戴着3D眼镜,头靠头贴在一起,口罩都挡不住姐妹...

女人给你发照片是暗示了什么?读懂背后心意,把握情感信号

在日常交流中,女人突然发来照片,看似随意的举动,可能暗藏深意。了解这些照片背后的暗示,不仅能让你更懂她的想法,还能更好地把握彼此之间的情感走向。接下来,就为你解析女人发照片背后的多种潜在含义。一、分享...

微信朋友圈评论区迎来大更新:支持发图片和动图

最近,不少用户发现微信正在悄悄上线一个全新功能——...

有这个神器,插入500个员工照片只需1分钟

如下图,是一份模拟的员工档案表,需要根据A列的员工姓名,在C列插入对应的员工照片:...

上传模特和商品图片,就能自动合成带货展示视频!

上传一张模特照片,再上传一张产品照片,就可以直接生成这种AI数字人带货的展示视频。这就是微度最近上线的主体库功能。·只需要在微度里面找到参考生视频的功能,选择主体库,把自己常用的模特照片和商品图片上传...

微信朋友圈终于可以发图片评论了!这次是灰度测试,你中招了吗?

微信近期悄然上线了一项全新功能——朋友圈评论可发图片!尽管当下仅在部分iOS用户群体中开展测试,但已有不少用户开始尝鲜使用。该功能最早于2019年曾短暂亮相,后因审核方面的问题而被下线,如今再度回归大...

2025税务师报名照上传必看:详细要求+手机制作全攻略

一、2025年税务师考试报名时间网上报名时间:2025年5月6日-7月15日...

前端移动端上传图片pc端如何实时获取

在一个前后端分离的项目中,如果你希望前端移动端上传图片后,PC端能实时获取这张图片,通常有几种实现方式:一、使用轮询(简单但不是实时)PC端每隔几秒请求一次服务器,看是否有新图片。...

上传照片文件大小超过了规定的大小怎么办?一招教你搞定!

上传照片文件大小如果超过了规定大小怎么办?比如上传照片,首先原始图像的大小多大?把光标放在图片上面,可以直接显示大小是二百四十六,也可以选中图片按右键,属性也可以查看图像大小,属性里面也可以,但也可以...

用最简单的方法给手机照片添加文字!雷哥手把手教你2分钟搞定

用最简单的方法给手机照片添加文字!雷哥手把手教你2分钟搞定...