Kehilangan melompat tiba-tiba ketika saya meluruhkan tingkat pembelajaran dengan Adam optimizer di PyTorch
Saya sedang melatih auto-encoderjaringan dengan Adampengoptimal (dengan amsgrad=True) dan MSE lossuntuk tugas Pemisahan Sumber Audio saluran Tunggal. Setiap kali saya meluruhkan tingkat pembelajaran oleh suatu faktor, kehilangan jaringan melonjak secara tiba-tiba dan kemudian menurun sampai...