protocol buffers的使用示例[z]

[http://blog.csdn.net/zhu_xun/article/details/19397081]

protocol buffers的使用示例

如果不了解protocol buffers,可以先参看:http://blog.csdn.net/zhu_xun/article/details/19343079

本例的protobuf的版本为2.5.0,运行环境为windows平台(当然,在Linux下使用的方法也一样,只不过是使用shell脚本驱动protobuf程序的运行)

下载protobuf运行环境包:可以到http://download.csdn.net/detail/u012875880/6931679下载。

一、测试protobuf:

1.先写个例子测试一下吧:

在proto.exe所在的目录下新建一个.proto文件test.proto:

里面的内容如下:

[java] view plain copy

  1. package protobuf;
  2. option java_package = "protobuf";
  3. option java_outer_classname = "FirstExample";
  4. message testBuf  {
  5. required string name= 1;
  6. required int32 age = 2;
  7. }

2.打开dos命令窗口

3.进入protocbuf目录,本例中目录为C:\Users\zhkj\Desktop\protoc-2.5.0-win32

cd C:\Users\zhkj\Desktop\protoc-2.5.0-win32

4.运行protoc.exe程序生成数据访问类:

protoc.exe --java_out=./ ./test.proto

说明:java_out后的第一参数表示生成的数据访问类所在的目录,本例中为当前目录;第二个为proto文件的位置,本例中为当前目录下的test.proto文件。

运行上述命令后,会发现在当前目录下生成了一个文件夹"protobuf":

这是,进入刚生成的protobuf文件夹,会发现有个Java类:FirstExample.java

至此,一个简单的测试就ok了。

二、在eclipse工程中的使用说明

1.新建一个Java工程"protobuf",工程目录结构如下:

2.在lib目录下导入protobuf-java-2.5.0.jar、将protoc.exe拷贝至在protobuf工程跟目录下。

3.在org.zhu.utils工具包里面新建一个可以自动生成数据访问类的工具类"GenerateClass.java",GenerateClass的内如下:

[java] view plain copy

  1. public class GenerateClass_Windows {
  2. /**
  3. * Windows版本
  4. * 调用protoc.exe生成java数据访问类
  5. * */
  6. public static void main(String[] args) throws Exception {
  7. //String protoFile = "testFirstExample.proto";//如果要更换生成的数据访问类,只需在此进行更改
  8. String protoFile = "person.proto";//
  9. //String strCmd = "protoc.exe --java_out=./src ./proto/" + protoFile;
  10. /**
  11. * protoc --java_out=./src--proto_path=./conf/person.proto可以简写为:
  12. * protoc --java_out=./src (空格)./conf/person.proto(把"proto_path"参数名去掉)
  13. * */
  14. String strCmd = "protoc.exe --java_out=./src--proto_path=./proto/" + protoFile;
  15. Runtime.getRuntime().exec("cmd /c " + strCmd).waitFor();//通过执行cmd命令调用protoc.exe程序
  16. }
  17. }

4.在proto目录下新建.proto文件"person.proto",其中内容如下:

[java] view plain copy

  1. package testProtobuf;//生成的数据访问类所在的包名(注意:在此无需写全包路径)
  2. option java_package = "org.zhu.testProtobuf";//生成的数据访问类所在包的全路径
  3. option java_outer_classname = "PersonProbuf";//生成的数据访问类的类名
  4. message Person {
  5. required string name = 1;//必须字段,在后面的使用中必须为该段设置值
  6. required int32 id = 2;//同上
  7. optional string email = 3;//可选字段,在后面的使用中可以自由决定是否为该字段设置值
  8. enum PhoneType {//设置一个枚举类型
  9. MOBILE = 0;
  10. HOME = 1;
  11. WORK = 2;
  12. }
  13. message PhoneNumber {
  14. required string number = 1;
  15. optional PhoneType type = 2 [default = HOME];
  16. }
  17. repeated PhoneNumber phone = 4;//重复字段(可以认为是一个集合),在后面的使用中可以为该字段设置多个值
  18. }

注:以上字段后面的"0","1","2"数字表示该条消息序列化时的字段编号即顺序

5.运行GenerateClass.java程序生成数据访问类Person.java

运行程序后,需刷新protobuf工程,这是你可以发现,在org,zhu,testProtobuf包下生成了一个PersonProtobuf.java类,参考如下:

6.编写测试类:

在org.zhu.test包下新建测试类TestPersonProbuf.java,内容如下:

[java] view plain copy

  1. /**
  2. * 测试PersonProbuf.java
  3. * */
  4. public class TestPersonProbuf {
  5. /**
  6. * @param args
  7. * @throws Exception
  8. */
  9. public static void main(String[] args) throws Exception {
  10. // 序列化过程
  11. // PersonProtobuf是生成的数据访问类的名字,即proto文件中的java_outer_classname
  12. // Person是里面某个消息序列的名字,即proto文件中的message Person
  13. PersonProtobuf.Person.Builder builder = PersonProtobuf.Person.newBuilder();
  14. //设置消息序列中的字段值
  15. builder.setEmail("[email protected]");
  16. builder.setId(320324);
  17. builder.setName("Jack Zhu");
  18. //phone字段在person.proto文件中被定义为repeated型,可以放多个值
  19. //(在本例中,phone字段的数据类型为消息类型PhoneNumber)
  20. builder.addPhone(PersonProtobuf.Person.PhoneNumber.newBuilder().setNumber("18762678793").setType(Person.PhoneType.HOME));
  21. builder.addPhone(PersonProtobuf.Person.PhoneNumber.newBuilder().setNumber("18651581021").setType(Person.PhoneType.HOME));
  22. Person person = builder.build();
  23. byte[] buf = person.toByteArray();
  24. //把序列化后的数据写入本地磁盘
  25. ByteArrayInputStream stream = new ByteArrayInputStream(buf);
  26. BufferedOutputStream bos = new BufferedOutputStream(new FileOutputStream("F:/protobuf.txt"));//设置输出路径
  27. BufferedInputStream bis = new BufferedInputStream(stream);
  28. int b = -1;
  29. while ((b = bis.read()) != -1) {
  30. bos.write(b);
  31. }
  32. bis.close();
  33. bos.close();
  34. //读取序列化后的数据
  35. try {
  36. Person person01 = PersonProtobuf.Person.parseFrom(buf);
  37. List<PhoneNumber> phones = person01.getPhoneList();
  38. String strPhone = "";
  39. for(PhoneNumber phone : phones){
  40. strPhone += phone.getNumber() + "   ";
  41. }
  42. //String strResult = person01.getName() + "," + person01.getId() + "," + person01.getEmail() + "," + strPhone;
  43. //System.out.println(strResult);
  44. } catch (InvalidProtocolBufferException e) {
  45. e.printStackTrace();
  46. }
  47. //读取序列化后写入磁盘的数据
  48. try {
  49. BufferedInputStream bis2 = new BufferedInputStream(new FileInputStream("F:/protobuf.txt"));
  50. byte b2 = -1;
  51. List<Byte> list = new LinkedList<Byte>();
  52. while ((b2 = (byte) bis2.read()) != -1) {
  53. list.add(b2);
  54. }
  55. bis2.close();
  56. int length = list.size();
  57. byte[] byt = new byte[length];
  58. for(int i = 0; i < length; i++){
  59. byt[i] = list.get(i);
  60. }
  61. Person person01 = PersonProtobuf.Person.parseFrom(byt);
  62. List<PhoneNumber> phones = person01.getPhoneList();
  63. String strPhone = "";
  64. for(PhoneNumber phone : phones){
  65. strPhone += phone.getNumber() + "   ";
  66. }
  67. String strResult = person01.getName() + "," + person01.getId() + "," + person01.getEmail() + "," + strPhone;
  68. System.out.println(strResult);
  69. } catch (InvalidProtocolBufferException e) {
  70. e.printStackTrace();
  71. }
  72. }
  73. }

以上演示了把信息通过protobuf序列化后写入磁盘,以及从磁盘读取后反序列化的过程。protobuf把信息写入磁盘后,文件的大小为69字节,而用json表示大概有90多字节,用xml表示大概需150字节(在去掉xml换行及空格的情况下),用此可见protobuf的威力了。当然,protobuf除了占用空间小外,还有速度快,使用简单等诸多优点。

如要参考本示例工程代码,可以到http://download.csdn.net/detail/u012875880/6933021下载

更详尽的使用说明请参看官方文档;https://developers.google.com/protocol-buffers/docs/javatutorial

时间: 2024-10-26 09:28:05

protocol buffers的使用示例[z]的相关文章

Protocol Buffers(Protobuf)开发者指南---概览

Protocol Buffers(Protobuf)开发者指南---概览 欢迎来到protocol buffers的开发者指南文档,protocol buffers是一个与编程语言无关‘.系统平台无关.可扩展的结构化数据序列化/反序列化工具,适用于通讯协议,数据存储等场合. ps:为了方便拼写,下文的protobuf就是指protocol buffers. 本文档的面向读者是:希望使用protobuf的 Java.C++.Python的开发者.此概览将向您介绍如何开始使用protobuf,然后您

Protocol Buffers(Protobuf) 官方文档--Protobuf语言指南

Protocol Buffers(Protobuf) 官方文档--Protobuf语言指南 约定:为方便书写,ProtocolBuffers在下文中将已Protobuf代替. 本指南将向您描述如何使用protobuf定义i结构化Protobuf数据,包括.proto文件语法和如何使用.proto文件生成数据存取类. 作为一个参考指南,本文档将以示例的形式一步步向您介绍Protobuf的特点.您可以参考您所选择的语言的示例.tutorial ----------------------------

FlatBuffers vs Protocol Buffers

FlatBuffers去年发布,最近看了一下,与同是出自Google之手的Protocol Buffers非常类似.在官网上介绍,FlatBuffers(简称FB)主要针对game development和对性能有要求的应用.相对于Protocol Buffers(简称PB),FB不需要解析,只通过序列化后的二进制buffer即可完成数据访问. FB的主要特点有: 1)数据访问不需要解析 将数据序列化成二进制buffer,之后的数据访问直接读取这个buffer,所以读取的效率很高. 2)内存高效

Protocol buffers 介绍

Protocol buffers和mxl一样在序列化数据结构时很灵活.高效和智能,但是它的优势在于定义文件更小,读取速度更快,使用更加简单.目前protocol buffers支持C++.java和python三种语言并且独立于平台. linux环境安装 下载protobuf-2.5.0.tar.gz tar -xvf protobuf-2.5.0.tar.gz ./configure --prefix=/usr/local/protobuf-2.5.0 make make install 安装

从Protocol Buffers 到 gRPC

从Protocol Buffers 到 gRPC 我们项目中准备使用Protocol Buffers来进行服务器和客户端的消息交互,采用gRPC开源框架,服务器使用Java,客户端有Android和iOS. 从Protocol Buffers 到 gRPC 一Protocol Buffers 文档 使用 1 定义一个消息类型 官方例子 2 字段限制 3 Tags 4 具体使用 Protoc源码的编译以及使用 1 安装ProtocolBuffer工具 2 使用protoc编译proto文件 二gR

Google Protocol Buffers 快速入门(带生成C#源码的方法)

Google Protocol Buffers是google出品的一个协议生成工具,特点就是跨平台,效率高,速度快,对我们自己的程序定义和使用私有协议很有帮助. Protocol Buffers入门:1.去 http://code.google.com/p/protobuf/downloads/list 下载一个源代码包和一个已编译好的二进制包2.找一个Proto示例代码,使用命令 protoc -I=$SRC_DIR --java_out=$DST_DIR $SRC_DIR/addressbo

protocol buffers的编码原理

protocol buffers使用二进制传输格式传递消息,因此相比于xml,json来说要轻便很多. 示例:假设定义了一个Message message Test1 { required int32 a = 1; } 实际使用的时候将a设置为150,然后将其序列化到输出流,查看编码后的message,可以看到如下3个byte 08 96 01 解析: 上述三个字节实际分为两部分: 08  96 01.第一部分(08)包含了message成员变量的field number(a=1)和变量类型(V

Protocol Buffers简明教程

随着微服务架构的流行,RPC框架渐渐地成为服务框架的一个重要部分.在很多RPC的设计中,都采用了高性能的编解码技术,Protocol Buffers就属于其中的佼佼者.Protocol Buffers是Google开源的一个语言无关.平台无关的通信协议,其小巧.高效和友好的兼容性设计,使其被广泛使用. 概述 protobuf是什么? Protocol buffers are Google's language-neutral, platform-neutral, extensible mecha

Java使用Protocol Buffers入门四步骤

Protocol Buffers(简称protobuf)是谷歌的一项技术,用于将结构化的数据序列化.反序列化,经常用于网络传输. 这货实际上类似于XML生成和解析,但protobuf的效率高于XML,不过protobuf生成的是字节码,可读性比XML差.类似的还有json.Java的Serializable等. protobuf支持各种语言.本文以Java为例,简单介绍protobuf如何使用.其他语言使用方法类似. 首先需要下载: http://download.csdn.net/downlo