话题
搜索


在物理学中,熵这个词作为一个系统的“无序”量具有重要的物理含义。在数学中,使用了更抽象的定义。变量的(香农)熵X(X)定义为

 H(X)=-总和_(X)P(X)log_2[P(X)]

位,其中P(x)是指X(X)处于状态x个,Plog_2P(打印_2P)定义为0,如果P=0.变量的联合熵X_1型, ...,X(_n)然后由定义

 H(X_1,…,X_n)=-总和_(X_1)。。。总和_(x_n)P(x_1,…,x_n。

另请参见

微分熵,信息论,科尔莫戈罗夫,最大熵方法,度量熵,相互的问询处,国家,奥恩斯坦的定理,冗余,相对,拓扑熵

与Wolfram一起探索| Alpha

工具书类

R.S.埃利斯。熵、大偏差和统计力学。纽约:Springer-Verlag,1985年。哈维尔,J.《不确定性测量》第14.1节伽马射线:探索欧拉常数。新泽西州普林斯顿:普林斯顿大学出版社,第139-145页,2003A.I.钦钦。数学信息理论基础。纽约:多佛,1957年。拉苏塔,A.和Mackey,M.C。混乱,分形与噪声:动力学的随机方面,第2版。纽约:Springer-Verlag,1994Ott,E.《熵》第4.5节混乱在动力系统中。纽约:剑桥大学出版社,第138-144页,1993信息、测量和量子力学科学类 114, 171-175, 1951.Schnakenberg,J.“网络主方程系统的微观和宏观行为理论。"修订版Mod。物理学。 48, 571-585, 1976.香农,C.E。“传播的数学理论。”贝尔系统技术J。 27,379-423和623-656,1948年7月和10月。http://cm.bell-labs.com/cm/ms/what/shannonday/shannon1948.pdf.香农,C.E.公司。和Weaver,W。数学传播理论。伊利诺伊州厄巴纳:伊利诺伊大学出版社,1963年。

引用的关于Wolfram | Alpha

引用如下:

埃里克·魏斯坦(Eric W.Weisstein)。“熵”。来自数学世界--Wolfram Web资源。https://mathworld.wolfram.com/Entropy.html

主题分类