calibration

較正。自信度と実際の正解率を合わせること

2本の論文題名に登場

定義

モデルが示す確信度と、実際に正解する割合を一致させること。七割の確信で答えたものが概ね七割当たるなら較正が取れている状態で、確率を意思決定に使う場面では正解率と同じくらい重要になる。当てる力そのものとは独立で、精度が高くても自信過剰なモデルはあり得る。

確信度の正しさ