Congying Wang
机器学习性能评价指标汇总 机器学习性能评价指标汇总
1 分类1.1 混淆矩阵 True Positive(真正, TP):将正类预测为正类数. True Negative(真负 , TN):将负类预测为负类数. False Positive(假正, FP):将负类预测为正类数 → 误报 (T
2019-10-30
牛顿法理解 牛顿法理解
1. 牛顿法牛顿法(Newton's method)是一种近似求解方程的方法,它使用函数$f(x)$的泰勒级数的前面几项来寻找方程$f(x)=0$的根,后来由于最优化研究兴起后,将其应用在了最优化领域。 牛顿法和梯度下降法的目标一样
2019-10-08
最优化算法之Momentum 最优化算法之Momentum
1 Momentum Momentum 中文为:动量法 虽然随机梯度下降仍然是非常受欢迎的优化方法,但其学习过程有时会很慢,并且有的时候对于比较的复杂的模型,我们很难得到global minima, 当然他们的梯度在这些地方也是0,所以就
2019-10-08
梯度下降概述(未完结) 梯度下降概述(未完结)
0 前言在求解机器学习算法的模型参数,即无约束优化问题时,梯度下降算法是机器学习中使用非常广泛的算法之一。几乎当前每一个机器学习库或者深度学习库都会包括梯度下降算法的不同变种实现。它们就像一个黑盒优化器,很难得到它们优缺点的实际解释。 本文
2019-09-26