用語集 › interpolation
GLOSSARY
interpolation
内挿。既知の値の間を補って埋めること
2本の論文題名に登場
定義
既知の値の間を埋めて中間を推定すること。長文脈化では、学習済みの位置範囲に収まるよう位置インデックスを縮小して詰め込む位置補間(Position Interpolation)として現れ、少量の追加学習で扱える長さを伸ばせる。範囲外へ伸ばす外挿(extrapolation)と違い、内側に押し込む点が要点。
論文題名での読み方
位置の補間・中間生成
この語が出てくる解説
- 長文脈LLMの技術 — RoPE補間からリング注意までExtending Context Window of Large Language Models via Positional Interpolation