asi-bench

超知能(ASI)の能力を測る評価ベンチマーク名

1本の論文題名に登場

定義

人間を超える知能（ASI）の水準を測ることを掲げた評価データ集の名前。この種のベンチマークは、既存の試験では現行モデルが天井に達してしまうため、より難しい課題を集めて差を測り直そうとするもの。何を「超えた」と見なすかは設計者の定義次第なので、名称ではなく採点方法を確認する必要がある。

固有名。評価用データ集