엔트로피(entropy)는 열역학과 통계역학에서 시스템의 무질서도 또는 에너지의 분산 정도를 나타내는 물리량이며, 정보 이론에서는 정보 엔트로피라는 이름으로 정보원의 불확실성을 나타내는 척도이다. 국제단위계(SI)에서 단위는 켈빈당 줄(J/K)이며, 기호는 S로 표기한다.
역사
엔트로피 개념의 기원은 19세기 초로 거슬러 올라간다. 1824년 프랑스의 물리학자 사디 카르노(Sadi Carnot)는 열기관에 관한 연구에서 열이 온도 차이를 통해 이동할 때 일이 발생한다는 것을 밝혀 열역학 제2법칙의 초기 통찰을 제공했다. 1850년대에 독일의 물리학자 루돌프 클라우지우스(Rudolf Clausius)는 열기관에서 사용할 수 없는 에너지가 증가하는 현상을 수학적으로 정식화하였고, 1865년에 그리스어 'τροπή(트로페, 변환)'에서 '엔트로피'라는 용어를 만들어냈다. 이후 1877년 오스트리아의 물리학자 루트비히 볼츠만(Ludwig Boltzmann)은 엔트로피를 시스템의 미시적 상태(미시상태)의 수와 관련짓는 통계적 정의를 제시했으며, 이 정의의 비례 상수는 볼츠만 상수(k_B)로 명명되었다. 미국의 물리학자 조사이어 윌러드 기브스(Josiah Willard Gibbs)와 제임스 클러크 맥스웰(James Clerk Maxwell)도 통계역학적 엔트로피 이론의 발전에 기여했다.
어원
클라우지우스는 '변환'을 뜻하는 그리스어 τροπή에서 '엔트로피'라는 이름을 만들었다. 그는 '에너지(energy)'라는 단어와 유사하게 발음되도록 의도적으로 이 용어를 선택했는데, 이는 두 개념이 물리적 의미에서 밀접하게 연관되어 있기 때문이었다. '에너지'의 어근인 ἔργον(에르곤, 일) 대신 τροπή(트로페, 변형)를 사용하여 '엔트로피'를 형성했다.
열역학적 정의
고전 열역학에서 엔트로피는 상태 함수(state function)로 정의된다. 가역적 과정에서 시스템의 엔트로피 변화 dS는 다음과 같이 표현된다:
dS = δQ_rev / T
여기서 δQ_rev는 가역적 과정에서 시스템에 전달된 열의 미소량이고, T는 절대 온도이다. 이 정의는 카르노 사이클(Carnot cycle) 분석에서 비롯되었으며, 가역적 사이클에서 엔트로피의 선적분은 0이 된다(∮ δQ_rev/T = 0). 엔트로피는 상태 함수이므로 초기 상태와 최종 상태에만 의존하며, 그 경로에는 의존하지 않는다.
통계역학적 정의
통계역학에서 엔트로피는 볼츠만의 공식으로 표현된다:
S = k_B ln Ω
여기서 k_B는 볼츠만 상수, Ω는 주어진 거시상태에 대응하는 가능한 미시상태의 수이다. 보다 일반적인 깁스 엔트로피(Gibbs entropy) 공식은 다음과 같다:
S = -k_B ∑_i p_i ln p_i
여기서 p_i는 각 미시상태 i가 점유될 확률이다. 이 정의는 시스템의 불확실성 또는 무질서의 정도를 정량적으로 나타낸다.
열역학 제2법칙
열역학 제2법칙은 고립계의 엔트로피는 시간이 지남에 따라 감소하지 않으며, 비가역적 과정에서 항상 증가한다고 명시한다. 이는 자연 현상의 방향성을 결정하는 근본적인 법칙으로, 다음과 같은 결과를 초래한다:
- 영구 운동 기계는 불가능하다.
- 열은 더 뜨거운 물체에서 더 차가운 물체로 자발적으로 흐른다.
- 모든 자연 과정은 전체 엔트로피를 증가시키는 방향으로 진행된다.
정보 이론에서의 엔트로피
1948년 클로드 섀넌(Claude Shannon)은 정보 이론에서 정보 엔트로피(섀넌 엔트로피)를 도입했다. 이는 이산 확률 변수 X에 대해 다음과 같이 정의된다:
H(X) = -∑_i p(x_i) log₂ p(x_i)
단위는 비트(bit)이다. 정보 엔트로피는 메시지의 불확실성 또는 평균 정보량을 측정하며, 열역학적 엔트로피와 수학적으로 동일한 형태를 가진다.
응용 분야
엔트로피 개념은 물리학과 화학을 넘어 다양한 학문 분야에서 응용된다:
- 화학 열역학: 화학 반응의 자발적 방향을 예측하는 깁스 자유 에너지(G = H - TS)의 핵심 요소이다.
- 생물학: DNA 염기 서열 분석, 생체 시스템의 에너지 대사 연구에 활용된다.
- 우주론: 우주의 열죽음(heat death) 가설과 엔트로피의 증가 경향이 연관된다.
- 경제학: 니콜라스 조르주스쿠-로겐(Nicholas Georgescu-Roegen)은 엔트로피 법칙을 경제 과정에 적용한 바 있다.
- 블랙홀 물리학: 베켄슈타인-호킹 엔트로피(S = k_B c³ A / 4Gℏ)는 블랙홀의 사건 지평선 표면적에 비례하는 엔트로피를 정의한다.
측정
엔트로피는 직접 측정할 수 없으며 간접적인 방법(엔트로피 측정법, entropymetry)을 통해 계산된다. 물질을 절대 영도에 가깝게 냉각한 후 소량의 열을 가하면서 온도 변화를 기록하고, dS = dQ/T를 적분하여 절대 엔트로피 값을 구한다. 열역학 제3법칙에 따르면 완전한 결정체의 엔트로피는 절대 영도에서 0이다.