Protocol Buffers

Protocol Buffers(简称 protobuf)是由 Google 开发的一种语言无关、平台无关的可扩展结构化数据序列化机制。开发者通过 proto 文件描述数据的结构,再借助编译器生成目标语言的读写代码,实现高效的数据编码与交换。

概述

protobuf 最初于 2000 年代初在 Google 内部诞生,用于替代基于 XML 的数据交换,2008 年对外开源,采用 BSD 许可证。它的设计目标是比 XML、JSON 更小、更快、更简单。经过多个版本演进,目前广泛使用的是 proto3 语法,并成为 gRPC 的默认序列化格式。

核心特点

• Schema 先行:数据结构在 proto 文件中显式声明,字段带有唯一编号,保证前后兼容。
• 二进制编码:序列化结果为紧凑的二进制流,体积通常远小于等价 JSON,解析也更快。
• 多语言支持:官方与社区提供 C++、Java、Python、Go、C# 等众多语言的代码生成器。
• 向前向后兼容:通过字段编号与可选字段规则,新增或废弃字段时旧代码仍能安全解析。
• 强类型:字段类型明确,减少手工解析带来的错误。

应用场景

protobuf 常用于服务间通信的消息定义,尤其是与 gRPC 搭配;也用于配置文件、日志、缓存与持久化存储等对体积和速度敏感的场景。许多大型分布式系统以它作为统一的数据契约,在跨语言的组件之间可靠地传递结构化数据。

常见问题

问:protobuf 与 JSON 该怎么选?答:追求体积小、速度快、强类型契约选 protobuf;需要人类可读、调试方便或与浏览器直接交互时,JSON 更合适。

问:为什么字段要写编号?答:编号是编码时的字段标识,一旦使用不应更改或复用,它是实现向前向后兼容的关键。