训练斯坦福 NER 的最大训练数据集限制是多少？

Question

我正在尝试为 2 个新命名实体训练一个斯坦福 NER 模型，并且我有一个庞大的可用训练集（每个大约 2k 约 300,000 个文件）。可以一次训练吗？内存要求可能是什么？

Answer 1

本身没有最大值。限制取决于您拥有多少内存以及您的 CPU 的速度/您愿意等待多长时间。

我们没有太多关于任何人用来成功训练模型的最大数据集的数据。您必须进行实验，看看您的设置有什么可能。