リッジ回帰分析

リッジ回帰分析はラッソ回帰分析と似た手法です。

重回帰分析では、誤差が一番小さくなるように回帰線を求めようとします。リッジ回帰分析では、これに正則化項というものも加えることで、どこかの係数が極端に大きくなりにくくします。

カーネルリッジ回帰分析

リッジ回帰分析にカーネル法を取り入れて、非線形でも扱えるようにしたのが、カーネルリッジ回帰分析です。

カーネルリッジ回帰分析で、回帰線の近辺については、計算に入れないようにして、ロバスト性を持たせる方法がサポートベクター回帰分析です。

カーネルリッジ回帰分析にベイズ統計の考え方を入れて、ベイズ回帰分析の一種にしたのが、ガウス過程回帰分析です。