cntk - CNTK にオーバーフィッティングを検出させることはできますか?

Question

CNTK は maxEpochs に達した後にのみ停止し、テストを実行します。各エポックの後にテストを実行して、過度に適合しているかどうかを確認する方法はありますか?

Answer 1

最後まで実行してから、異なるエポックで検証するのはどうですか? このリンクを参照してください。

Answer 2

ここには 2 つの問題があります。各エポック後にテスト データでテストを実行する技術的な問題があります (これについてはコメントできません)。しかし、これは重要な問題ではありません。2 つ目の問題は、テスト データセットを数回使用すると、テスト データセットが汚染されることです。使用している場合は、データをテストデータセットに適合させる停止基準としてデータをテストします! したがって、テスト データは時間通りにのみ使用し、テスト データはいかなる種類のトレーニングにも使用しないでください。