GLOSSARY

minima

極小点（minimumの複数）。損失が谷になる点

1本の論文題名に登場

定義

minimum の複数形で、損失関数が周囲より低くなる点を指す。深層学習の損失地形には無数の極小点があり、どこに落ち着くかが汎化性能を左右するため形式的な話ではない。すべての極小点が同等ではなく、谷の広さや到達までの経路が結果に影響するという観点から研究が進んでいる。

学習が落ち着く谷