【发布时间】:2021-03-06 12:16:57
【问题描述】:
我正在关注 Flink 关于如何将 WatermarkStrategy 与 KafkaConsumer 一起使用的文档。代码如下所示
val kafkaSource = new FlinkKafkaConsumer[MyType]("myTopic", schema, props)
kafkaSource.assignTimestampsAndWatermarks(
WatermarkStrategy
.forBoundedOutOfOrderness(Duration.ofSeconds(20)))
val stream: DataStream[MyType] = env.addSource(kafkaSource)
每当我尝试编译上面的代码时,我都会收到一个错误提示
错误:使用替代方法重载了方法值 assignTimestampsAndWatermarks:
error: overloaded method value assignTimestampsAndWatermarks with alternatives:
[ERROR] (x$1: org.apache.flink.streaming.api.functions.AssignerWithPeriodicWatermarks[String])org.apache.flink.streaming.connectors.kafka.FlinkKafkaConsumerBase[String] <and>
[ERROR] (x$1: org.apache.flink.streaming.api.functions.AssignerWithPunctuatedWatermarks[String])org.apache.flink.streaming.connectors.kafka.FlinkKafkaConsumerBase[String] <and>
[ERROR] (x$1: org.apache.flink.api.common.eventtime.WatermarkStrategy[String])org.apache.flink.streaming.connectors.kafka.FlinkKafkaConsumerBase[String]
[ERROR] cannot be applied to (org.apache.flink.api.common.eventtime.WatermarkStrategy[Nothing])
[ERROR] consumer.assignTimestampsAndWatermarks(
【问题讨论】:
-
你用的是哪个flink版本?能否请您粘贴完整的错误消息。
-
我添加了错误。我正在使用 flink 1.11.2
-
如果没有我自己的测试,我会说你在这里缺少一个类型。在 Watermarker 分配的一个测试用例中有一个很好的例子:github.com/apache/flink/blob/…。在那里您可以看到 WatermarkStrategy 采用一种类型(在您的示例中为 MyType )。希望有帮助
标签: apache-kafka apache-flink flink-streaming