参考知乎
核心:原始的高维稀疏数据到低维数据(低维流形)的映射。深度学习的任务就是学习到一种好的映射关系,使得映射后的数据变得可分,具有很强的特征表达性。这个映射就叫嵌入。
这里有个前提假设,即自然的原始数据是低维流形嵌入于原始数据所在的高维空间。
以自然图像为例,一幅500x500x3大小的RGB图像,是高维的,每个灰度通道可取0-255范围内的值。但是像素值随机生成后得到的图像就是个噪点图像,大概率和自然图像差别很大。所以真实的自然图像在高维空间分布是稀疏的,换句话说,就是一个低维流形。
网友评论