新媒技术大章节堂protobuf序列化协议及应用.pptVIP

基础业务开发部 高磊 2010年10月15日 Request Questions? 使用import引入其他文件中的定义 如果.proto文件定义在许多不同的文件中，可以用import关键字导入其它的定义后使用其它.proto文件中定义的message type 使用protoc编译的时候，需要添加设置 -I/--import_path?参数去确定import的目录，如果不指定import目录，默认为调用protoc的当前目录 import myproject/other_to; 嵌套定义 可以在message定义内部定义message type 引用时需要全名，如SearchResponse.Result 可以多层嵌套 message SearchResponse { message Result { required string url = 1; optional string title = 2; repeated string snippets = 3; } repeated Result result = 1; } message SomeOtherMessage { optional SearchResponse.Result result = 1; } 升级规范 如何保持向下兼容性 不改变任何已经存在的字段的序号 新增字段应该标记为optional或repeated 不再需要的字段可以删除，但建议先加上OBSOLETE_前缀，这样可以保证序号被保留 默认值都是反序列化时产生的，但要保证序列化方没有将默认值当成一个有意义的值进行传输 字段类型兼容 int32,?uint32,?int64,?uint64, bool互相兼容 sint32?sint64?互相兼容，但不兼容其他整形数字 在utf-8编码下，string和bytes是兼容的， Fixed32与sfixed32兼容, fixed64与sfixed64兼容 Agenda 快速开始 语言及协议规范 开发示例 性能对比 RPC及应用 演示: C++ Demo 演示: Java Demo 演示: C# Demo Agenda 快速开始 语言及协议规范 开发示例 性能对比 RPC及应用 性能比较 使用一个统一的消息体格式 评估以下性能指标 序列化速度 报文大小 Java Java Serialize XML: JAXB JSON: 使用gson库 protobuf: 标准 C# .Net Serialize: Protobuf C++ Protobuf: 性能评估结果 报文大小 （Bytes） 序列化耗时 （ms） 反序列化耗时 （ms） Java Serialize 1610 997 1037 Java XML 4141 2468 4001 Java Json 3153 11437 17351 Java Protobuf 933 776 422 C# .Net Serialize 2726 4573 3185 C# Protobuf 933 488 673 C++ Protobuf 933 282 297 Agenda 快速开始 语言及协议规范 开发示例 性能对比 RPC及应用 远程调用的种类 开放协议 Web Service 平台私有协议 .Net Remoting .Net WCF Java RMI 其他常用的协议 xml over Http Protocol Buffers对Rpc的支持 支持在.proto文件中定义Rpc Service 能够通过protoc生成框架代码 通过实现RpcChannel抽象类，完成Rpc在通信层的交互 第三方实现 /p/protobuf/wiki/ThirdPartyAddOns 用.proto方式定义远程调用 service SearchService: 服务名称 rpc Search： 方法名 SearchRequest 请求类型 SearchResponse 应答类型 service SearchService { rpc Search (SearchRequest) returns (SearchResponse); } 选择通信层协议 对通信层协议的要求 有Transaction的处理机制 可以传送二进制报文 长连接或短连接均可 适合的协议 HTTP Sipc Tcp（需要自己添加Transaction管理，连接控制，并发控制等功能） 制定一个简单的Rpc协议（over Http) POST rpc.do?service=method= HTTP/1.1 User-Agent: user-agen