boosting

定義

精度の低い学習器を順番に足し合わせ、直前までの誤りを次の学習器に埋めさせて強い予測器を作る手法群。決定木と組み合わせた勾配ブースティングが実用の中心で、表形式データでは今も最上位の性能を出す。多数を独立に学習して平均する bagging とは、逐次か並列かで対照的。

論文題名での読み方

木を積み上げる学習法

この語が出てくる解説

• 決定木と勾配ブースティング — 表データ最強の座は今もXGBoost: A Scalable Tree Boosting System