野仙生活网

野仙生活网

机器学习100天(十六):016 逻辑回归损失函数

民生 0

机器学习 100 天,今天讲的是:逻辑回归损失函数。

一、如何找到最佳分类直线

讲完了逻辑回归基本原理之后,我们再来思考一个非常关键的问题:就是如何找到最佳的分类直线呢?

在这里插入图片描述

如图中所示,如何判断这三条直线哪个更好?线性回归里,我们可以用均方误差作为损失函数,选择均方误差最小的直线。但是逻辑回归的损失函数是什么呢?

下面我将以最通俗的语言来构建逻辑回归的损失函数。

逻辑回归模型最后经过 Sigmoid 函数,输出一个概率值,这个概率值反映了预测为正类的可能性,概率越大,可能性越大。

y ^ = 1 e − ( w