L0、L1、L2范数整理
2018-08-07 本文已影响0人
小歪与大白兔
L0范数：向量中非零元素的个数
L1范数：向量中各个元素的绝对值之和
L2范数：元素的平方和开根号（平方根）
L1和L2对比：
L1趋向于产生少量的特征，其他的特征都是0
L2会选择更多的特征，这些特征的wi都会接近于0
下图是本人学习西瓜书（讲的很清楚）整理的笔记：
image.png
image.png
image.png
L0范数：向量中非零元素的个数
L1范数：向量中各个元素的绝对值之和
L2范数：元素的平方和开根号（平方根）
L1和L2对比：
L1趋向于产生少量的特征，其他的特征都是0
L2会选择更多的特征，这些特征的wi都会接近于0
下图是本人学习西瓜书（讲的很清楚）整理的笔记：
image.png
