【问题标题】:Path for Flink state.checkpoints.dir in docker-compose in Windows 10 environmentWindows 10 环境下 docker-compose 中 Flink state.checkpoints.dir 的路径
【发布时间】:2021-02-17 07:26:56
【问题描述】:

我有 Windows 10 操作系统,docker-compose 并希望使用 Apache Flink 教程 Playground,docker-compose 正确启动 starting docker-compose 但经过几分钟的工作, Apache Flink 必须创建检查点,但是访问文件系统存在一些问题。

例外:

org.apache.flink.runtime.checkpoint.CheckpointException: Could not finalize the pending checkpoint 104. Failure reason: Failure to finalize checkpoint.
    at org.apache.flink.runtime.checkpoint.CheckpointCoordinator.completePendingCheckpoint(CheckpointCoordinator.java:1216) ~[flink-dist_2.11-1.12.1.jar:1.12.1]
…..

Caused by: org.apache.flink.util.SerializedThrowable: Mkdirs failed to create file:/tmp/flink-checkpoints-directory/d73c2f87b0d7ea6748a1913ee4b50afe/chk-104
    at org.apache.flink.core.fs.local.LocalFileSystem.create(LocalFileSystem.java:262) ~[flink-dist_2.11-1.12.1.jar:1.12.1]

您能帮我确定正确的路径和 docker 访问权限吗?

state.backend: filesystem
state.checkpoints.dir: file:///tmp/flink-checkpoints-directory
state.savepoints.dir: file:///tmp/flink-savepoints-directory

我也尝试使用完整的 Windows 路径,但得到了同样的错误。

【问题讨论】:

  • 您使用的是 Windows 还是 Linux Docker 容器?

标签: windows docker apache-flink checkpoint


【解决方案1】:

您使用的是 Windows Docker 容器还是 Linux Docker 容器?

右键单击 Docker 桌面图标以查看您当前的配置。

  • 切换到 Windows 容器

  • 切换到 Linux 容器

您必须根据您的目标 Docker 容器类型配置 Flink 路径。

注意:您不能同时使用 Windows 和 Linux 容器。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2022-06-10
    • 2017-09-25
    • 2018-05-08
    • 2017-01-15
    • 1970-01-01
    • 2015-06-17
    • 2016-03-10
    相关资源
    最近更新 更多