adaptation

定義

既に学習済みのモデルを、新しい課題やドメイン、利用者に合わせて作り替えること。ゼロから訓練するより桁違いに安く済むため、基盤モデルを土台に各用途へ枝分かれさせる現在の開発形態を支えている。全パラメータを更新する fine-tuning のほか、LoRA のように一部だけ足す軽量な方法も含む広い語。

論文題名での読み方

微調整・転用を指す

この語が出てくる解説

• 論文解説: Normalized Low-Rank Adaptation — LoRAの「入口行列」を正規化するだけで効く理由Normalized Low-Rank Adaptation
• 画像生成の実務地図 — SD・ControlNet・LoRA適用LoRA: Low-Rank Adaptation of Large Language Models
• 特異値分解と低ランク近似 — LoRAの数学的な下地LoRA: Low-Rank Adaptation of Large Language Models