sin(x)

Tag: 支持向量机

机器学习:支持向量机

在不同机器学习教材上多次看到支持向量机,但是我并没有很好地掌握其对偶形式的推导以及求解对偶形式问题的序列最小化算法,所以就在本文中详细推导一下支持向量机的对偶问题以及实现序列最小优化算法。

支持向量机

线性可分形式

支持向量机尝试使用一个超平面将样本从样本空间中分开,样本中距离超平面最近的样本称为支持向量,支持向量机需要保证这个超平面到所有支持向量的距离最大化。

对于超平面,某样本到超平面的距离就是:

Continue reading

机器学习:习题笔记(二)

第5章 神经网络

  • 5.3 对于图 5.7 中的 ,试推导出 BP 算法中的更新公式 (5.13)。

按照链式法则:

其中,

Continue reading