用語集 › imitating
GLOSSARY
imitating
模倣する。まねて学ぶ
4本の論文題名に登場
定義
強いモデルの出力をそのまま真似て学習することを指す語。公開モデルを商用モデルの応答で微調整する手法がこれにあたり、口調や書式は素早く似せられる一方、元の推論能力までは移らないという指摘が知られている。教師信号を正解ラベルではなく他モデルの出力に置く点が特徴。
論文題名での読み方
模倣学習の主張
この語が出てくる解説
- 蒸留モデルの評価 — 「教師に近い」は良い指標かThe False Promise of Imitating Proprietary LLMs