信息是个很抽象的概念。我们常常说信息很多,或者信息较少,但却很难说清楚信息到底有多少。比如一本五十万字的中文书到底有多少信息量。熵表示物质系统状态的一个物理量(记为S),它表示该状态可能出现的程度。在热力学中,是用以说明热学过程不可逆性的一个比较抽象的物理量。孤立体系中实际发生的过程必然要使它的熵增加。