最后,作者用图片表示了一下几个概念之间的关系:

这是说:
- 最大熵来自于均匀分布;如果真实的分布就是如此,那么这时候冗余最大、本质上没有任何“信息”
- 如果真实的情况是不均匀的概率分布,冗余减少,也就有了“信息”
总之,信息论确实和概率密切相关。
最后,作者用图片表示了一下几个概念之间的关系:
这是说:
- 最大熵来自于均匀分布;如果真实的分布就是如此,那么这时候冗余最大、本质上没有任何“信息”
- 如果真实的情况是不均匀的概率分布,冗余减少,也就有了“信息”
总之,信息论确实和概率密切相关。
本文标题:General data compression limits(
本文链接:https://www.haomeiwen.com/subject/djdemdtx.html
网友评论