【问题标题】:CNN: Unstable of model score vs iterationCNN:模型得分与迭代不稳定
【发布时间】:2022-11-28 22:01:21
【问题描述】:

我的模型分数与迭代图不稳定。我该如何改进它?

This is what I get

这是我的代码

Code 1

Code 2

Code 3

Code 4

Code 5

【问题讨论】:

  • 以后请使用 github gist 或 pastebin。屏幕截图根本不适合重现您的问题或让其他人帮助您。我分开回答。我只是想指出你的问题很难读懂。

标签: iteration conv-neural-network mnist dl4j


【解决方案1】:

您的网络看起来相当库存/复制和粘贴。我很确定我以前看过这段代码。

在不太了解您的输入数据的情况下,我不确定您是否正在解决分类问题,但首先尝试将其切换为输出的 softmax 和负对数似然。

输出激活和损失函数主要用于二元分类。

您还可以去掉 ReNormalizeL2PerLayer。这可能会阻碍网络根据您的数据进行学习。

如果不了解您的输入数据也很难提供帮助,但有时单位均值零方差可能不适合您的数据集。考虑改用从 0 到 1 的缩放比例。

最后,为了快速迭代,在测试时首先考虑对少量数据进行过度拟合。这将帮助您查看数据中是否有任何信号,以及您的网络是否可以学习。

【讨论】:

    猜你喜欢
    • 2020-01-27
    • 2018-05-05
    • 1970-01-01
    • 2012-06-02
    • 1970-01-01
    • 1970-01-01
    • 2023-02-06
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多