LASSOまたは関連するスパース性の問題における正則化パスの意味は何ですか?


8

パラメータ異なる値を選択すると、異なるスパースレベルの解を得ることができます。これは、正則化パスがより速く収束できる座標を選択する方法であることを意味しますか?スパースについてよく耳にしますが、少し混乱しています。また、既存の問題の解決策について簡単に説明してもらえますか?λLASSO

回答:


13

あなたが持つモデル持っていると言う予測変数を:X 1X 2... のx のp。セットλの初期値に、そしてあなたの係数を推定β 1β 2... β のp。これらの係数は、p次元空間内の点と考えることができます。*px1,x2,xpλβ1,β2,βpp

次の値について手順を繰り返し、別の推定値のセットを取得します。これらは、p次元空間の別のポイントを形成します。すべてのλに対してこれを行うと、そのような点のシーケンスが得られます。このシーケンスが正則化パスです。λpλ


β0(p+1)β0


4

Lassoソリューションのグラフィカルな説明は、テキスト「Elements of Statistical Learning」の69〜73ページにあります(オンラインバージョンはこちら)。


1
ありがとうございます!はい!Fig. 3.10投げ縄正則化パスです。
2014
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.