用語集 › harness
GLOSSARY
harness
一般には馬具。この分野では評価や実行の枠組み
7本の論文題名に登場
定義
評価や実行のための土台となる仕組み。評価ハーネスは、課題の読み込み・プロンプト整形・出力の採点までを統一手順で行い、モデル間の比較を成立させる。同じベンチマークでもハーネスの実装差で数値が動くため、点数を比べるときは同じハーネスかを確認する必要がある。
論文題名での読み方
評価ハーネス=測る土台
この語が出てくる解説
- 論文解説: HarnessDev — LLMは自分のエージェント・ハーネスを作り、育てられるかHarnessDev: Can LLMs Create and Evolve Their Own Agent Harness?
- 論文解説: Training Agents to Evolve with Their Harness — ハーネスごと進化するエージェントを訓練するTraining Agents to Evolve with Their Harness: TaoLive Digital Avatar Agent Technical Report
- 論文解説: AutoSaddler — エージェントの失敗ログから「壊れないハーネス」を自動で育てるAutoSaddler: Automatic Harness Optimization with Durable Updates from Agent Execution Traces