美文网首页
生活的困境与局部最小值

生活的困境与局部最小值

作者: 新的故事 | 来源:发表于2019-06-14 10:52 被阅读0次

2019年6月14日,惊闻老家的堂弟自杀,悲痛之余,有一些感想。

我一直觉得,人一辈子,总会有走不出来的困境,想要自杀的冲动,也许大部分人没有突破动物的求生本能,随着时间就慢慢平复了,而另一些人,即便是时间也无法让他的悲痛消除,在困境中愈演愈烈,走向绝境。

机器学习中有一个经典问题,如何解决梯度下降算法的局部最小值。

timg.jpg

梯度下降算法,带入到生活中,我想可以这么理解:人会对日常中接触到的事情尝试找到最优解,过程是不断迭代的:尝试一下,根据反馈做调整,再尝试一下,直到找到最优解。

陷阱就在这里。

梯度下降算法往往会陷入局部最小值(Local Minima),在局部最小值,迭代的信息会告诉你,周围没有比这更低的点了,这就是最优解,而实际上,这远不是全局最优解(Global Minima)。

而处在局部最小值点的人,就陷入了生活的困境。他们挣扎、困顿,不断的与周围的事物迭代试图找到最优解,而他接触到的信息则不断告诉他,你已经走投无路了。就好像笼中困兽以头戗壁,做的越多,越绝望。

好消息是,研究表明,局部最小值往往仅存在于低维空间中,对于高维空间,局部最小值要求在每一个维度上都是最小值,这种概率非常低。举个例子:你生活中接触到的事情就男(女)朋友、工作,结果有一天分手同时被裁了,于是你陷入了生活的困境。但是如果你生活中除了这些还有很多其他的事情,那同时都丧的概率就低多了。

所以,关键在于,当你陷入了生活的困境,其实是你接触到的信息让你误以为自己陷入了无法自拔的困境,这时候,你也许需要换个环境,接触点不同的信息。

相关文章

  • 生活的困境与局部最小值

    2019年6月14日,惊闻老家的堂弟自杀,悲痛之余,有一些感想。 我一直觉得,人一辈子,总会有走不出来的困境,想要...

  • 局部最小值

    定义局部最小的概念。arr长度为1时,arr[0]是局部最小。arr的长度为N(N>1)时,如果arr[0]

  • 二分搜索

    应用: 找一个数组中的局部最小值,任意一个都行。(这个就不要求二分必须有序)局部最小值:如果arr[0]

  • [线性回归] 重点

    线性回归 线性回归只有一个最小值,也就是只有全局最小值,没有局部值。 代价函数(Cost Function)是预测...

  • 不要陷入局部最小值

    不要只见秋毫,而不见舆薪。譬如发现某个细枝末节的问题,翻来覆去、折腾一天找到各种偏方。但是在工程上来说,如果绕过这...

  • 六月第1周周检视

    “事业工作是一个局部,学习是局部,生活是局部,金钱与健康都是局部。。。所有的局部构建出人生恢弘的全部。假如当下我们...

  • 让“生活教育”走过来 ——中学生德育的途径探索

    现代德育面临的困境在于与现实的生活疏离。学校德育要走出困境,就应回归生活,从德育走向生活,从生活走向德育。德育的产...

  • 2022-10-28

    不在意结果的勇敢做事,带来超越局部和有限的喜乐。陷入了困境,就应洗去各种尘垢,他们带来了沉重与犹豫。人们因选择众多...

  • python实现leetcode之121. 买卖股票的最佳时机

    解题思路 一遍扫描,找到两个值一个是局部最大差值一个是最小值扫描完成时:局部最大差值就是全局最大差值 121. 买...

  • 李宏毅机器学习——深度学习训练的技巧

    神经网络训练的技巧 优化失败的原因: 局部最小值或鞍点,可以通过对H矩阵特征值正负性进行判断 batch:加快梯度...

网友评论

      本文标题:生活的困境与局部最小值

      本文链接:https://www.haomeiwen.com/subject/hxhufctx.html