【问题标题】:Save histogram during evaluation with estimator api使用 estimator api 在评估期间保存直方图
【发布时间】:2019-06-30 12:27:42
【问题描述】:

是否可以在评估期间使用估算器 API 保存直方图?

我找不到解决方案,因为估算器 api 在评估期间没有写下任何摘要,我只能将标量添加到评估指标。

【问题讨论】:

    标签: tensorflow histogram tensorboard


    【解决方案1】:

    为了那些来到这里并没有找到解决方案的人,我将更新我使用上述方法,稍作修改:

        summary_writer = tf.compat.v1.summary.FileWriter(
            logdir=self.model_dir + '/eval_histograms/',
            filename_suffix='.host_call')
        summary_ops = [tf.compat.v1.summary.histogram(name=k, values=v)
                       for k, v in
                       prepare_endpoints_for_summary(endpoints).items()]
        eval_hooks = [
            tf.estimator.SummarySaverHook(save_steps=1,
                                          summary_writer=summary_writer,
                                          summary_op=summary_op)
            for summary_op in summary_ops]
    

    而且效果很好!

    【讨论】:

      【解决方案2】:

      您可以使用 SummarySaverHook

      eval_hooks = []
      
      eval_summary_hook = tf.train.SummarySaverHook(
                          save_steps=1,
                          output_dir='model_dir',
                          summary_op=tf.summary.histogram(logits.name, logits))
      
      eval_hooks.append(eval_summary_hook)
      
      return tf.estimator.EstimatorSpec(mode=mode,
                                                loss=loss,
                                                eval_metric_ops=eval_metric_ops,
                                                evaluation_hooks=evaluation_hooks
                                                )
      

      【讨论】:

      • 我刚刚在 tensorflow github 存储库的一个问题中找到了这个解决方案。问题是,我希望直方图与其他指标在同一个文件中,因为它们是一起评估的。我正在使用流媒体指标,所以我尽量不进行两种不同的评估。
      • 如果我在 SummarySaverHook 中指定模型目录,它会在同一张量板图中显示直方图。不过,这不适用于 train_and_evaluate。
      • 我使用的是 train_and_evaluate。我想问题是,自定义评估挂钩不能附加到 train_and_evaluate 使用的评估挂钩?
      • 我不知道为什么这对 train_and_evaluate 不起作用,我猜它会以某种方式覆盖摘要
      猜你喜欢
      • 2018-02-07
      • 1970-01-01
      • 2018-04-15
      • 2018-09-12
      • 1970-01-01
      • 2018-04-01
      • 1970-01-01
      • 2016-05-01
      • 2019-04-05
      相关资源
      最近更新 更多