JA EN
用語集 › length-controlled

GLOSSARY

length-controlled

回答の長さによる有利不利を補正した

1本の論文題名に登場

定義

回答の長さが採点を有利にしてしまう偏りを、統計的に補正した評価方式。AlpacaEvalの長さ制御版が代表例で、長さと勝率の関係をモデル化し、長さの寄与を差し引いた勝率を報告する。生成を短くさせるという意味ではなく、採点側の偏りを事後に取り除く処理である点が紛らわしい。

論文題名での読み方

長文有利の是正