엔트로피
published 2026-03-30
aka Entropy, エントロピー, Entropie, 열역학적 엔트로피, 섀넌 엔트로피
physics/thermodynamics mathematics/information-theory science/statistical-mechanics complex-systems philosophy/science
엔트로피(Entropy)는 물리학, 정보이론, 수학 등 여러 분야에서 무질서·불확실성·가능성의 다양성을 정량화하는 개념이다. 분야마다 표면적 정의는 다르지만, 수학적 구조는 확률분포에 대한 $-\sum p \log p$ 형태로 통일된다.