protobuf文件作为数据传输和存储的协议
已经使用的越来越广泛了。使用protobuf有如下的优势:
- protocol buffers 是一种语言无关、平台无关、可扩展的序列化结构数据。
- 相比xml,有编码后体积更小,编解码速度更快的优势;相比于 json,protobuf 有更高的转化效率,时间效率和空间效率都是 json 的 3-5 倍。
- protobuf还提供了不同语言的protoc的编译工具,使用简单的编译指令就更生成支持不同语言的调用包。
主要介绍在java使用maven编译proto文件的插件
protobuf-maven-plugin
我们在工程目录下创建一个lib的module,用来统一管理proto的包和编译后生成的java包。然后我们在跟java同级的目录创建proto的文件夹,用来存放.proto文件(如下图)
在pom的build中配置proto的编译插件
// pom.xml <build> <extensions> <extension> <groupid>kr.motd.maven</groupid> <artifactid>os-maven-plugin</artifactid> <version>${os.plugin.version}</version> </extension> </extensions> <plugins> <plugin> <groupid>org.xolstice.maven.plugins</groupid> <artifactid>protobuf-maven-plugin</artifactid> <version>${protobuf.plugin.version}</version> <extensions>true</extensions> <configuration> <!-- 工具版本 --> <protocartifact>com.google.protobuf:protoc:${protobuf.version}:exe:${os.detected.classifier}</protocartifact> <!--默认值,proto源文件路径--> <protosourceroot>${project.basedir}/src/main/proto</protosourceroot> <!--默认值,proto目标java文件路径--> <outputdirectory>${project.basedir}/src/main/java</outputdirectory> <!--设置是否在生成java文件之前清空outputdirectory的文件,默认值为true,设置为false时也会覆盖同名文件--> <clearoutputdirectory>false</clearoutputdirectory> </configuration> <executions> <execution> <!--在执行mvn compile的时候会执行以下操作--> <phase>compile</phase> <goals> <!--生成outerclass类--> <goal>compile</goal> <!--生成grpc类--> <!--goal>compile-custom</goal--> </goals> </execution> </executions> </plugin> </plugins> </build>
- 该配置先使用os-maven-plugin插件,该插件主要是为了识别不同的操作系统,这样插件可以根据不同的平台加载不同protoc编译器文件。google的protobuf团队也是用该插件来识别protoc的运行操作系统信息
- 后面配置了protobuf-maven-plugin编译参数,下面我说下主要的几个参数。详细的参数可以参考官方文档:maven protocol buffers plugin – protobuf:compile
protobuf-maven-plugin插件主要参数介绍:
从上文的配置中,我们可以看到主要的配置参数如下:
protocartifact
: protoc编译器工具的格式规范,groupid:artifactid:version[:type[:classifier]]。如果指定了该参数,protoc将尝试按照指定的参数对文件proto文件进行编译'protocexecutable
:配置protoc的编译执行程序的路径protocplugindirectory
: protoc的执行文件目录protosourceroot
: 原始proto文件的路径,比如${project.basedir}/src/main/protooutputdirectory
: 编译后生成.java文件的路径,比如:${project.basedir}/src/main/javatemporaryprotofiledirectory
: 临时使用目录clearoutputdirectory
: 设置是否在生成java文件之前清空outputdirectory的文件,默认值为true,设置为false时也会覆盖同名文件additionalprotopathelement
:附加的源proto文件定义路径,如果设备源路径没找到,会到该目录找excludes
:排除不需要编译的文件列表includes
:包含需要编译的proto文件列表,默认的
<includes> <include>**/*.proto</include> </includes>
使用自定义编译插件编译grpc服务
如果只是编译proto文件,可以不使用该插件,使用上面的配置即可。当要使用自定义插件的时候,必须将goal设置为compile-custom。设置好goal后,可以配置插件的信息,如下:
pluginid
: 唯一标识protoc的插件,不能为内置的protoc插件,比如grpc-java插件pluginartifact
: 识别插件版本pluginparameter
: 传递给插件的参数
下面使用示例为使用grpc-java编译proto文件的bom的build配置
// pom.xml <build> <extensions> <extension> <groupid>kr.motd.maven</groupid> <artifactid>os-maven-plugin</artifactid> <version>${os.plugin.version}</version> </extension> </extensions> <plugins> <plugin> <groupid>org.xolstice.maven.plugins</groupid> <artifactid>protobuf-maven-plugin</artifactid> <version>${protobuf.plugin.version}</version> <extensions>true</extensions> <configuration> <protocartifact>com.google.protobuf:protoc:${protobuf.version}:exe:${os.detected.classifier}</protocartifact> <pluginid>grpc-java</pluginid> <pluginartifact>io.grpc:protoc-gen-grpc-java:${grpc.java.version}:exe:${os.detected.classifier}</pluginartifact> <!--默认值--> <protosourceroot>${project.basedir}/src/main/proto</protosourceroot> <!--默认值--> <outputdirectory>${project.basedir}/src/main/java</outputdirectory> <!--设置是否在生成java文件之前清空outputdirectory的文件,默认值为true,设置为false时也会覆盖同名文件--> <clearoutputdirectory>false</clearoutputdirectory> <!--更多配置信息可以查看https://www.xolstice.org/protobuf-maven-plugin/compile-mojo.html--> </configuration> <executions> <execution> <!--在执行mvn compile的时候会执行以下操作--> <phase>compile</phase> <goals> <!--生成outerclass类--> <goal>compile</goal> <!--生成grpc类--> <goal>compile-custom</goal> </goals> </execution> </executions> </plugin> </plugins> </build>
这里我们主要配置了gprc-java插件,用来生成grpc服务的包
使用protobuf-maven-plugin生成grpc的包
首先我们先proto的test目录下,创建一个hello.proto的文件,内容如下
syntax = "proto3"; option java_multiple_files = true; option java_package = "cn.ckeen.lib.grpc.test"; option java_outer_classname = "helloworldproto"; // the greeting service definition. service simple { // sends a greeting rpc sayhello (hellorequest) returns (helloreply) { } } // the request message containing the user's name. message hellorequest { string name = 1; } // the response message containing the greetings message helloreply { string message = 1; }
使用上述自定义插件的插件的pom配置,使用maven compile编译一下,我们可以看到编译的生成的包
然后我们在gprc的的服务端和客户端引用该包。
可能遇到的问题
- 配置了goal为compile-custom必须配置maven-protoc插件,否则会报错。
the parameters 'pluginid' for goal org.xolstice.maven.plugins:protobuf-maven-plugin:0.6.1:compile-custom are missing or invalid
- 注意所有文件路径中不要使用中文
总结
以上为个人经验,希望能给大家一个参考,也希望大家多多支持代码网。
发表评论