什么是信息?什么是熵?

2019-07-09  本文已影响0人  MrXiong_e

    (都是我在公众号中学习,摘抄的干货概念,所以也看不太懂也没有事儿。)

一件事有多种不同的状态,不知道是哪种具体的状态的不确定性,便是熵。而信息是多种可能状态中确定一个具体的状态的物理量。

信息与熵的关系:数量相等,意义相反,获得信息等于消除熵。

信息用来消除不确定性。不确定性越大,熵越大。

信息的种类:(能消除不确定性的信息)

1.正确调整某件事的可能情况的概率。

2.能正确排除某件事的干扰情况。

3.能直接确定某件事的情况。

噪音是干扰某人获得正确信息的事物,数据是信息与噪音的混合体。知识能够区别信息和噪音。

概率与熵的区别:概率是某件事(宏观态)某个情况(微观态)的确定性。而熵是某件事(宏观态),具体是哪种情况(微观态)的不确定性。

上一篇 下一篇

猜你喜欢

热点阅读