accelerating

定義

高速化する。同じ結果により少ない時間や反復で到達することを指し、BatchNorm の原題のように提案の効き所を示す見出し語になる。ただし壁時計時間・目標損失までの更新回数・スループットのどれが速いのかは別の主張なので、本文の計測条件を確認する必要がある。

論文題名での読み方

速くしたとの主張

この語が出てくる解説

• 正規化レイヤー全史 — BatchNormからRMSNormまでBatch Normalization: Accelerating Deep Network Training by Reducing Internal Covariate Shift