カード編集

問題

答え・判断基準 損失の急激な発散、勾配ノルムの異常増大、パラメータ更新の振動、Inf・NaNの発生など。

種類 即答 選択肢消去 数式 PyTorch対応 用語

章

論点

解説 損失がゆっくり下がらないだけでは勾配消失・学習率不適切など別原因もある。勾配ノルムを監視すると切り分けやすい。

Is active