个人见解：

1.所有可以表示成內积形式<x_i, x_j>的方法如svm, 感知机都可以使用核技巧。

2.L1范式是L0范式的最优凸近似。从数学公式角度解释。。。。

3.-

4.无约束优化算法

1）梯度下降，一阶梯度；2）牛顿法，二阶梯度；3）拟牛顿法，一阶信息近似二阶梯度；

4）共轭梯度法

.......