【问题标题】:Combining Google proto buffers with Jersey/JAX-RS将 Google proto 缓冲区与 Jersey/JAX-RS 相结合
【发布时间】:2015-01-21 10:19:42
【问题描述】:

目前我有一个 RESTful Web 服务,其端点通过 Jersey/JAX-RS 公开:

@Path("/widgets")
public class WidgetResource {
    @GET
    List<Widget> getAllWidgets() {
        // gets Widgets somehow
    }

    @POST
    Widget save(Widget w) {
        // Save widget and return it
    }
}

我使用 Jackson 将我的 POJO 序列化/反序列化为 JSON,我的服务以application/json 的形式响应并发送回我的 POJO。

我现在正在寻找可能使用 Google 协议缓冲区(或等效技术)来帮助压缩/优化客户端和服务之间的通信,因为 JSON/文本非常庞大/浪费。

实际上,我有一个由“微服务”架构组成的大型后端;数十个相互通信的 REST 服务;这就是为什么我希望优化所有这些消息之间来回发送的消息。

所以我问:是否仍然可以让 Jersey/JAX-RS 为我的服务端点提供服务,但要清除 Jackson/JSON 的东西并用 Google 协议缓冲区替换它?如果是这样,这段代码会是什么样子?

【问题讨论】:

    标签: java rest jersey jax-rs protocol-buffers


    【解决方案1】:

    JAX-RS 使用 MessageBodyReaderMessageBodyWriter 的实现对不同媒体类型进行序列化/反序列化。您可以在JAX-RS Entity Providers 阅读更多内容。您可以编写自己的代码来处理 protobuf 对象的序列化/反序列化。然后只需通过发现显式或隐式向应用程序注册提供程序。

    示例

    widgets.proto

    package widget;
    
    option java_package = "protobuf.example";
    option java_outer_classname = "WidgetsProtoc";
    
    message Widget {
        required string id = 1;
        required string name = 2;
    }
    
    message WidgetList {
        repeated Widget widget = 1;
    }
    

    编译后,我将得到一个带有静态内部 WidgetWidgetList 类的 WidgetsProtoc 类。

    WidgetResource

    import javax.ws.rs.Consumes;
    import javax.ws.rs.GET;
    import javax.ws.rs.POST;
    import javax.ws.rs.Path;
    import javax.ws.rs.Produces;
    import javax.ws.rs.core.Response;
    import protobuf.example.WidgetsProtoc.Widget;
    import protobuf.example.WidgetsProtoc.WidgetList;
    
    @Path("/widgets")
    public class WidgetResource {
        
        @GET
        @Produces("application/protobuf")
        public Response getAllWidgets() {
            Widget widget1 = 
                    Widget.newBuilder().setId("1").setName("widget 1").build();
            Widget widget2 = 
                    Widget.newBuilder().setId("2").setName("widget 2").build();
            WidgetList list = WidgetList.newBuilder()
                    .addWidget(widget1).addWidget(widget2).build();
            return Response.ok(list).build();
        }
        
        @POST
        @Consumes("application/protobuf")
        public Response postAWidget(Widget widget) {
            StringBuilder builder = new StringBuilder("Saving Widget \n");
            builder.append("ID: ").append(widget.getId()).append("\n");
            builder.append("Name: ").append(widget.getName()).append("\n");
            return Response.created(null).entity(builder.toString()).build();
        }
    }
    

    您会注意到"application/protobuf" 媒体类型的使用。这不是standard media type,但有draft in the working。还有Guava library has define this media type as MediaType.PROTOBUF,翻译成"application/protobuf",所以我选择坚持那个

    MessageBodyReaderMessageBodyWriter 都定义在一个类中。您可以选择单独进行。没有区别。

    import java.io.IOException;
    import java.io.InputStream;
    import java.io.OutputStream;
    import java.lang.annotation.Annotation;
    import java.lang.reflect.Type;
    import javax.ws.rs.BadRequestException;
    import javax.ws.rs.Consumes;
    import javax.ws.rs.Produces;
    import javax.ws.rs.WebApplicationException;
    import javax.ws.rs.core.MediaType;
    import javax.ws.rs.core.MultivaluedMap;
    import javax.ws.rs.ext.MessageBodyReader;
    import javax.ws.rs.ext.MessageBodyWriter;
    import javax.ws.rs.ext.Provider;
    import protobuf.example.WidgetsProtoc.Widget;
    import protobuf.example.WidgetsProtoc.WidgetList;
    
    @Provider
    @Produces("application/protobuf")
    @Consumes("application/protobuf")
    public class WidgetProtocMessageBodyProvider 
                       implements MessageBodyReader, MessageBodyWriter {
    
        @Override
        public boolean isReadable(Class type, Type type1, 
                Annotation[] antns, MediaType mt) {
            return Widget.class.isAssignableFrom(type) 
                    || WidgetList.class.isAssignableFrom(type);
        }
    
        @Override
        public Object readFrom(Class type, Type type1, Annotation[] antns, 
                MediaType mt, MultivaluedMap mm, InputStream in) 
                throws IOException, WebApplicationException {
            if (Widget.class.isAssignableFrom(type)) {
                return Widget.parseFrom(in);
            } else if (WidgetList.class.isAssignableFrom(type)) {
                return WidgetList.parseFrom(in);
            } else {
                throw new BadRequestException("Can't Deserailize");
            }
        }
    
        @Override
        public boolean isWriteable(Class type, Type type1, 
                Annotation[] antns, MediaType mt) {
            return Widget.class.isAssignableFrom(type) 
                    || WidgetList.class.isAssignableFrom(type);
        }
    
        @Override
        public long getSize(Object t, Class type, Type type1, 
                Annotation[] antns, MediaType mt) {  return -1; }
    
        @Override
        public void writeTo(Object t, Class type, Type type1, 
                Annotation[] antns, MediaType mt, 
                MultivaluedMap mm, OutputStream out) 
                throws IOException, WebApplicationException {
            if (t instanceof Widget) {
                Widget widget = (Widget)t;
                widget.writeTo(out);
            } else if (t instanceof WidgetList) {
                WidgetList list = (WidgetList)t;
                list.writeTo(out);
            }
        }  
    }
    

    TestCase(确保提供程序在服务器和客户端都注册了)

    @Test
    public void testGetIt() {
        Client client = ClientBuilder.newClient();
        WebTarget target = client.target("http://localhost:8080/api");
        // Get all list
        WidgetList list = target.path("/widgets").request().get(WidgetList.class);
        System.out.println("===== Response from GET =====");
        for (Widget widget: list.getWidgetList()) {
            System.out.println("id: " + widget.getId() 
                             + ", name: " + widget.getName());
        }
        
        // Post one 
        Widget widget = Widget.newBuilder().setId("10")
                              .setName("widget 10").build();
        Response responseFromPost = target.path("widgets").request()
                .post(Entity.entity(widget, "application/protobuf"));
        System.out.println("===== Response from POST =====");
        System.out.println(responseFromPost.readEntity(String.class));
        responseFromPost.close();
    }
    

    结果:

    ===== Response from GET =====
    id: 1, name: widget 1
    id: 2, name: widget 2
    ===== Response from POST =====
    Saving Widget 
    ID: 10
    Name: widget 10
    

    【讨论】:

    • 谢谢@peeskillet (+1 !!!) 真棒回答!快速跟进:您能否证明(可能来自个人经验)使用 Protobug(相对于 JSON)所带来的网络/带宽/性能收益值得此实施?再次感谢!
    • 不幸的是,我从来没有真正使用过 protobuf(只是在这里和那里尝试过),所以我对性能提升没有任何真正的见解 :-( 我想也许你有,这就是你提出的原因问题:-)
    • @peeskillet 如何向服务器和客户端注册提供程序?
    • @SambitTripathy 如果您正在扫描包裹,它应该会自动注册。否则,这取决于您的应用程序配置。使用 Java 配置(使用 Jersey),您只需调用 register.除此之外,我需要了解有关您的环境的更多信息。注册提供者的方法有很多
    • @peeskillet 我正在扫描它。由于我没有使用 Guava 库,因此媒体类型“application/protobuf”无法识别。你用的是哪个版本的番石榴?
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2013-07-27
    • 2012-04-20
    • 2017-07-02
    • 2018-05-30
    • 1970-01-01
    • 2011-06-29
    • 2011-12-16
    相关资源
    最近更新 更多