美文网首页
softmax函数

softmax函数

作者: Ten_Minutes | 来源:发表于2018-05-02 10:43 被阅读56次

softmax用于多分类过程中,它将多个神经元的输出,映射到(0,1)区间内,可以看成概率来理解,从而来进行多分类!那么怎么理解多分类呢?很容易,如果你想选取俩个动作,那么就找概率最大的俩个值即可~ sigmoid函数只能分两类,而softmax能分多类,softmax是sigmoid的扩展。

假设我们有一个数组,V,Vi表示V中的第i个元素,那么这个元素的Softmax值就是



也就是说,是该元素的指数,与所有元素指数和的比值

softmax直白来说就是将原来输出是3,1,-3通过softmax函数一作用,就映射成为(0,1)的值,而这些值的累和为1(满足概率的性质),那么我们就可以将它理解成概率,在最后选取输出结点的时候,我们就可以选取概率最大(也就是值对应最大的)结点,作为我们的预测目标!

相关文章

  • softmax函数详解

    softmax函数详解softmax的log似然代价函数(公式求导)

  • Softmax

    Softmax 我们令 , 定义 softmax 函数为 这样, Softmax Regression 算法是 L...

  • Logistic Regression

    推导 sigmoid 推导LR损失函数 推导LR梯度下降 Softmax原理 softmax 损失函数 softm...

  • Softmax函数 Logistic函数

    Softmax函数:https://en.wikipedia.org/wiki/Softmax_function ...

  • softmax函数的求导学习

    今天学习了softmax函数的求导,和其他函数求导不同,softmax函数中的参数不是常量,而是向量。 对于陌生的...

  • 12- 深度学习之神经网络核心原理与算法-Softmax

    softmax 输出层的激励函数softmax 前面我们已经接触了一种激励函数,sigmoid函数。含义: 似然度...

  • 神经网络[输出层]激活函数的选择

    目录 1.输出层激活函数的选择 2.Softmax激活函数的特征 3.Softmax激活函数的实现以及优化 对于机...

  • 损失函数和优化-损失函数(2)

    引言 这一节的笔记,主要讲解除了SVM以外的另一种损失函数——softmax损失函数。 softmax损失函数 如...

  • softmax函数

    这几天学习了一下softmax激活函数,以及它的梯度求导过程,整理一下便于分享和交流! 一、softmax函数so...

  • softmax函数

    softmax用于多分类过程中,它将多个神经元的输出,映射到(0,1)区间内,可以看成概率来理解,从而来进行多分类...

网友评论

      本文标题:softmax函数

      本文链接:https://www.haomeiwen.com/subject/nabqrftx.html