【问题标题】:Tensorboard with S3 location带有 S3 位置的 Tensorboard
【发布时间】:2022-03-26 21:08:56
【问题描述】:

我正在尝试通过 tensorboard --logdir 命令使用 S3 路径并收到以下错误:

tensorflow.python.framework.errors_impl.UnimplementedError:文件系统方案“s3”未实现(文件:“s3://bucket/repo/dummyExperiments”)

即使在环境变量中设置了 S3_REGION 后,它对我也不起作用。
我的 tensorboard 版本是 1.7.0。
使用的命令:tensorboard --logdir=s3://repo/dummyExperiments

我试图从tensorboard logdir with s3 path 帖子中获得一些意见,但没有多大帮助。

张量板是否支持 S3?

【问题讨论】:

    标签: tensorboard


    【解决方案1】:

    是的。 Tensorboard 确实支持 S3。

    我创建了一个 EC2 实例并在 ubuntu 机器上安装了 tensorflow 1.7。 最初,我在使用 S3 位置运行 tensorboard 时收到错误“Curl 错误代码 6”。 但后来我安装了旧的 tensorflow 1.5 版,即使没有设置任何环境变量,它也能正常工作。

    不知何故,最新的 1.7 版本与 S3 不兼容并引发错误。

    注意:在 tensorboard --logdir=s3://repo/dummyExperiments 之前,请确保您的服务器已连接到 S3。

    【讨论】:

      【解决方案2】:

      截至 2022 年 1 月 19 日,this is fixed。您需要 pip install tensorflow-io 才能使用它。

      过去,这通常是开箱即用的,但在过去一年左右的时间里,直接从 S3 读取 tboard 日志已被破坏。

      【讨论】:

        猜你喜欢
        • 2021-05-27
        • 2016-03-01
        • 2019-03-02
        • 2020-04-30
        • 2019-08-03
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        相关资源
        最近更新 更多