GLOSSARY

frozen

凍結した。重みを更新せず固定する

1本の論文題名に登場

定義

学習中に重みを更新せず固定しておくことを指す語。大きな事前学習モデルをそのまま活かしつつ、接続部分や小さなアダプタだけを学習させる構成で使われ、計算コストの削減と、元の能力が壊れる破滅的忘却の防止が目的になる。推論時に動かないという意味ではなく、勾配で更新されないという意味である点に注意。

学習させない部分を指す