machine-learning - ドロップアウト使用時の停止手順は?

Question

現在、ドロップアウトを利用したニューラル ネットワークを実装しています。出てきた問題は、いつトレーニングをやめるべきかということでした。

通常、私はその点を判断するために早期停止を使用しますが、元のドロップアウト ペーパーでは、「ドロップアウトにより、はるかに大きなネットをトレーニングできるようになり、早期停止の必要がなくなる」と述べられています。

早期停止を適用しない場合、どの停止手順を使用しますか?

Answer 1

早期停止とは、十分な結果が得られたら、またはしばらくの間大幅な改善が見られなくなったら、トレーニングを停止するスキームを指します。

彼らの停止手順は、「x反復回数/エポックのトレーニングを実行する」だけです。