standardized

定義

標準化された。形式・手順・評価条件を共通のものにそろえた状態を指す。ベンチマークやエージェント評価では、環境・タスク集合・採点方法をそろえない限り数値が論文間で比較できないため、標準化そのものが実質的な貢献になる。一方で標準を固めると測れる範囲も固定されるので、網羅性とはトレードオフの関係にある。

論文題名での読み方

共通規格化を示す

この語が出てくる解説

• 論文解説: OSReward — AIの「採点者」は信用できるか。コンピュータ操作エージェントの報酬を測り直すOSReward: Instituting Standardized Evaluation for Cross-Platform Computer-Use Reward Models