AI 서버 한 랙의 전력이 120 kW까지 오르자 공기만으로는 열을 다 빼기 어려워졌습니다. 그래서 칩 위에 구리판을 얹고 그 속 가는 유로로 냉각액을 흘려, 열이 나는 자리에서 바로 열을 가져갑니다.
물이 차갑지 않아도 되는 이유는 열이 뜨거운 쪽에서 차가운 쪽으로 흐르기 때문입니다. 칩이 냉각액보다 뜨거우면 45 °C 물로도 열은 넘어가고, 물을 차게 만들 냉동기 부담이 줄어듭니다.
용어 정리
액체냉각(칩 직접 냉각)
칩 위에 얹은 금속판 속으로 냉각액을 흘려 열을 빼는 방식입니다. 냉각액은 물 75%와 프로필렌글리콜 25%를 섞은 액체이고, 한 번 채운 뒤 닫힌 고리로 돕니다.
콜드 플레이트(구리판)
칩에 맞닿는 밀봉 금속판입니다. 안쪽에 깎아 세운 핀이나 가는 유로가 있어 냉각액이 닿는 면적을 넓힙니다. 칩과 판 사이에는 열전달 물질(TIM)을 바릅니다.
랙(서버 선반)
서버를 층층이 꽂는 높이 2 m 남짓한 철제 선반입니다. GB200 NVL72 랙 하나에는 GPU 72개와 CPU 36개가 들어갑니다.
kW(킬로와트)
전력의 단위입니다. 서버가 쓴 전기는 거의 모두 열이 되므로, 랙 전력이 곧 빼내야 할 열의 크기입니다.
열교환기·CDU
냉각수 분배 장치(CDU) 안의 열교환기는 칩을 돈 냉각액과 건물 쪽 냉각수가 섞이지 않게 얇은 판을 사이에 두고 열만 건네주는 장치입니다.
※ 수치·사실은 NVIDIA 블로그 'Hotter Than a Hot Tub: The 45°C Breakthrough to Cool AI's Biggest Machines'(2026-06-21: 냉각액 최대 45 °C, 온탕 38~40 °C, 45 °C로 들어가 약 55 °C로 나옴, 물 75%·프로필렌글리콜 25%, 닫힌 고리), NVIDIA 블로그 'NVIDIA Blackwell Platform Boosts Water Efficiency by Over 300x'(2025-04-22: GB200 NVL72 랙 120 kW, 예전 랙 20 kW, 공랭은 이 전력에서 버거움, CDU 액체-액체 열교환기), NVIDIA GB200 NVL72 제품 페이지(GPU 72·CPU 36, 랙 단위 액체냉각), JetCool 기술 글(마이크로채널 콜드 플레이트·핀·TIM), NIST Chemistry WebBook(25 °C 물·질소·산소 밀도·비열로 계산: 물 4,169 kJ/(m³·K), 공기 약 1.195 kJ/(m³·K), 약 3,500배) 기준입니다(2026-10-11 열람).
※ 45 °C(최대)는 NVIDIA가 2026년 6월 밝힌 최신 AI 서버의 냉각액 온도이고, GPU 72개·120 kW는 GB200 NVL72(2025년 4월 발표) 수치입니다. 영상은 두 사실을 같은 72-GPU 랙 그림으로 보여 줄 뿐, 특정 제품이 45 °C로 운용된다는 뜻은 아닙니다.
※ 랙·트레이·패키지·구리판의 모양과 배치, 핀 수·간격, 투명 덮개와 투명 관, 냉각액의 색(45 °C 연한 호박색 → 55 °C 주황, 온도를 나타내는 설명용 색), 흐름 입자 속도, 물·공기 정육면체의 칸 배열(14×14×18칸), 열교환기 모양, 칩의 발광은 원리를 보여 주는 설명용 그림입니다.
영상에서 못 다 한 얘기
45 °C 물이 통하는 건, 물을 차게 만들 필요가 없어서예요.
물이 45 °C면 냉동기 없이 바깥 공기로 식히는 건식 냉각기로도 돌릴 수 있습니다(기후가 맞을 때).
냉각탑은 물을 증발시켜 열을 버리는데, 이 방식이면 시설 냉각수 소비가 MW당 연 약 260만 갤런에서 거의 0까지 줄 수 있다고 합니다.
흔히 'AI 서버가 물을 먹는다'는 건 이 증발 쪽 이야기이고, 칩 위를 도는 냉각액은 한 번 채워 닫힌 고리로 돕니다.
물은 열을 담는 양뿐 아니라 열전도도 공기(질소 기준)의 약 23배입니다.
출처
NVIDIA Blog (2026-06-21, 2025-04-22) / NVIDIA GB200 NVL72 제품 페이지 / JetCool (2021-08-26) / NIST Chemistry WebBook. 기준일 2026년 10월 11일.