【发布时间】:2019-11-16 16:01:00
【问题描述】:
我想知道将 json 模式添加到您的消息中有什么好处,因为 kafka connect 确实支持它?
【问题讨论】:
标签: json apache-kafka apache-kafka-connect
我想知道将 json 模式添加到您的消息中有什么好处,因为 kafka connect 确实支持它?
【问题讨论】:
标签: json apache-kafka apache-kafka-connect
架构是数据管道的重要组成部分。 Kafka Connect 支持将其嵌入 JSON,或者您可以使用其他选项(Avro、Protobuf)。如果您没有架构,那么数据消费者的生活就会变得更加困难,有些人会坚持使用它——例如 JDBC Sink 连接器需要有一个架构,如果没有架构就会失败不。
所以要回答您的问题,如果您不想使用 Avro 或 Protobuf(并且如果您喜欢包含大量冗余重复数据的大型消息;-)那么您可以使用 Kafka Connect JSON 模式格式。
【讨论】: