【问题标题】:why Kafka delete my data replicated by mirrormaker2为什么Kafka删除mirrormaker2复制的我的数据
【发布时间】:2021-11-24 03:59:00
【问题描述】:

奇怪的是,在我启动 mm2 将日期从源集群 A 复制到目标集群 B 之后, 数据在被复制的同时,也在被删除。见图片:

它最终会删除集群 B 中复制的所有数据。 我不知道为什么会发生这种情况,有人可以帮助我吗?

【问题讨论】:

  • 即使我停止了mirrormaker,所有数据最终也会被删除。
  • 是的,Kafka 本身“最终会删除”数据,这与 MirrorMaker 无关。您对该主题的保留设置是什么?
  • 你是对的。源集群设置主题retention.ms为1年,但mm2没有复制,在目标集群中,retention.ms是7天。

标签: apache-kafka apache-kafka-mirrormaker


【解决方案1】:

原来源集群设置topicretention.ms为1年,但是mm2没有复制,在目标集群retention.ms是7天。

所以这是一个配置问题。

【讨论】:

    猜你喜欢
    • 2020-05-30
    • 2020-07-24
    • 1970-01-01
    • 2021-09-11
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多