Processing math: 100%

| tags:regularization machine learning julia

Regularization

次の最小化問題を Julia+Convex+Gadfly+Interact を使って可視化してみた.
L1正則化:minimizewRdˆL(w)+λw1L2正則化:minimizewRdˆL(w)+λ2w22損失関数:ˆL(w)=12Xwy22 なお,行列Xとベクトルyは以下のように設定した(d=2). X=[10.501],y=[1.750.5]. ソースコードはこちら