在深度神經網絡中調整學習率

Question

目前，我正在訓練YOLO模型以檢測對象，但是我注意到有時輸出中的損失就像是循環，例如“在訓練20分鍾后，每次程序減少到20％時，我的損失在0.2到0.5之間0.2會自動增加到0.5，然后像這樣循環

我的問題是：如果出現虧損循環，是否需要更改學習率？

Answer 1

學習率是一種可能（並非唯一一種）。 優化學習率（並在需要時安排衰減）可能是訓練過程中最重要的事情。

您需要對損失值有一個很好的了解（大概期望得到什么，以及在訓練開始時損失的價值是什么）。 另外，由於YOLO是一種對象檢測算法（我不完全記得紙張的詳細信息），分類或回歸，或者兩者都很高。

還要看看您的數據。 在訓練中使用數據之前，您可能需要先對其進行混洗。

這是一個較晚的答案，但是如果您給我有關我提到的內容的反饋，我可能會提供更多幫助。