二元信息熵的定义

熵是随机变量不确定度的度量

当p=0.5时，变量的不确定度达到最大
当p=0或p=1时，变量不再是随机的

二元信息熵

代码

import matplotlib.pyplot as plt
from math import log
import numpy as np
#计算二元信息熵
def entropy(props, base=2):
    sum = 0
    for prop in props:
        sum += prop * log(prop, base)
    return sum * -1
 
#构造数据
x = np.arange(0.01,1,0.01)
props = []
for i in x:
    props.append([i, 1-i])
 
y = [entropy(i) for i in props]
 
 
plt.plot(x,y)
plt.xlabel("p(x)")
plt.ylabel("H(x)")
plt.show()

Jietu20190930-150441@2x.jpg

更多精彩代码请关注我的专栏

Python代码库之绘制信息熵的图形
二元信息熵的定义熵是随机变量不确定度的度量当p=0.5时，变量的不确定度达到最大当p=0或p=1时，变量不再...
Python-Turtle库
使用turtle库在Python中绘制简单图形【方法】 #引入绘制图形的turtle库•import turtl...
人机交互到艺术设计
-Python库之图形用户界面-Python库之游戏开发-Python库之虚拟现实-Python库之图形艺术 Py...
turtle库使用简介
python之绘制图形库turtle turtle库是python的基础绘图库，官方手册这个库被介绍为一个最常用...
Python代码库OpenCV之04读取图片绘制直方图（含代码）
Python代码库OpenCV之04读取图片绘制直方图（含代码）展开成直方图代码效果分离颜色通道代码运...
2.1
简介 Python图形绘制2.1 深入理解Python语言2.2 实例绘制2.3 模块一 turtle库的使用2...
Python——turtle库
turtle（海龟）是Python重要的标准库之一，它能够进行基本的图形绘制。turtle图形绘制的概念诞生于19...
用python画小猪票佩奇
turtle是python中绘制图形的库，还是挺方便的，需要的是耐心。附上代码，网上也有很多。 #使用turtl...
递归可视化：使用turtle库画分形树（二叉树）
turtle是Python3重要的内置标准库，它能够进行基本的图形绘制，以LOGO语言为基础。turtle库绘制图...
python学习第二天
python中的turtle绘图，图形库 1.绘制NEUSOFT turtle.penup()抬笔，turtle....