验证集是训练集的一部分吗？

Question

在机器学习中，我们使用验证集来调整超参数。 但我对验证集的起源感到困惑。 它是训练集的一部分吗？ 这意味着，该模型之前已经看过数据。 还是像测试集，即模型从未见过的数据？ 我真的很困惑..

Answer 1

您应该将训练数据分成两部分，一部分用于训练，另一部分用于验证。

您在第一部分训练数据，同时根据验证分数设置超参数。 通常使用 80%-20% 拆分，其他值可能会很好，具体取决于您拥有的数据量。

对于算法的最终评估，请使用另一个单独的测试集，该集未包含在训练和超参数搜索中。