范数(norm)
它是衡量一个向量的大小的函数,(即将向量映射到非负的函数)
L1范数
L2范数
L1,L2,Lq的范数
上图中,可以明显看到一个趋势,即q越小,曲线越贴近坐标轴,q越大,曲线越远离坐标轴,并且棱角越明显。那么 q=0 和 q=oo 时极限情况如何呢?猜猜看。 聪明的你猜对了吧,答案就是十字架和正方形。也许你又开始有问题了,既然L0是十字架,为什么不用L0作为正则项?
ML中的L1,L2
http://m.blog.csdn.net/jinping_shi/article/details/52433975
http://blog.csdn.net/zouxy09/article/details/24971995 讲述得很好,引申到一些哲学层面
还有《深度学习》有介绍