为什么我获得负面信息收益？-Java 学习之路

[解决了]

我的错误是我没有意识到如果熵都是一种，熵就是0 . 因此，如果所有都是正数，则熵为0，如果全部为负，则它也为零 . 如果等量是正数和负数，则熵将为1 .

人们会获得负面信息，这是没有意义的 .

然而，基于这个例子，我获得了负面的信息收益 .

这是数据：
enter image description here

如果我计算Humidity属性的信息增益，我会得到：

enter image description here

显然我在这里遗漏了一些东西 .

编辑：澄清我是如何理解它的 .

整个系统的熵定义为：

enter image description here

在这种情况下，那是：

enter image description here

每个属性的信息增益定义为：

enter image description here

我计算的湿度为：

系统的熵 - （1/4）湿度正态熵 - （3/4）湿度熵高

按照这个Libre Office Calc：
enter image description here

或者我对属性的信息获取公式的理解不正确？

1 回答