熵的本质是香农信息量,被用于描述一个系统中的不确定性。
在决策树算法中的信息熵:
在反向传播算法中衡量两个分布和差异的交叉熵:
KL散度(相对熵):
本文标题:信息熵+交叉熵+KL散度
本文链接:https://www.haomeiwen.com/subject/npztmhtx.html
网友评论