【问题标题】:Default serializer for kafka 0.8.2.0kafka 0.8.2.0 的默认序列化程序
【发布时间】:2015-03-12 01:41:06
【问题描述】:

我正在使用他们的新 KafkaProducer API 设置 Kafka 生产者并出现​​以下错误

Exception in thread "main" org.apache.kafka.common.config.ConfigException: Missing required configuration "key.serializer" which has no default value.
at org.apache.kafka.common.config.ConfigDef.parse(ConfigDef.java:124)
at org.apache.kafka.common.config.AbstractConfig.<init>(AbstractConfig.java:48)
at org.apache.kafka.clients.producer.ProducerConfig.<init>(ProducerConfig.java:235)
at org.apache.kafka.clients.producer.KafkaProducer.<init>(KafkaProducer.java:129)
at com.kafka.producer.App.KafkaProducer(App.java:43)
at com.kafka.producer.App.main(App.java:33)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:483)
at com.intellij.rt.execution.application.AppMain.main(AppMain.java:134)

http://kafka.apache.org/documentation.html#newproducerconfigs 似乎没有默认序列化程序和文档,我看不到可能的值。

这个问题是针对Kafka 0.8.2.0版本的

【问题讨论】:

  • 可以分享生产者代码吗?

标签: apache-kafka


【解决方案1】:

早期版本的 Kafka 带有默认序列化程序,但这造成了很多混乱。

使用 0.8.2,您需要自己从 API 附带的 StringSerializer 或 ByteArraySerializer 中选择一个序列化器,或者自己构建。

API 序列化程序可以在以下位置找到 字符串序列化器: http://kafka.apache.org/082/javadoc/org/apache/kafka/common/serialization/StringSerializer.html 字节数组序列化器: http://kafka.apache.org/082/javadoc/org/apache/kafka/common/serialization/ByteArraySerializer.html

因此,如果您希望使用默认序列化程序,您的解决方案是使用以下选项之一。

props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");

或

props.put("key.serializer", "org.apache.kafka.common.serialization.ByteArraySerializer");

【讨论】:

    【解决方案2】:

    假设你想要一个 StringSerializer,使用:

    props.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,StringSerializer.class.getName()); props.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG,StringSerializer.class.getName());

    此处的完整示例:https://github.com/CameronGregory/kafka/blob/master/TestProducer.java

    【讨论】:

    • 我喜欢这个解决方案,因为它与字符串无关,而是与真实的类/值相关,所以即使发生变化,它也会起作用!
    • 什么是,我们想发送整数作为一个值。我应该如何在这里使用序列化程序!
    • 从 0.9 开始有一个IntegerSerializer。
    猜你喜欢
    • 1970-01-01
    • 2020-07-27
    • 2016-10-27
    • 2021-03-26
    • 2014-09-30
    • 2016-11-05
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多