Dlaczego ciepło generowane przez lokalną sztuczną inteligencję odczuwa się inaczej na otwartej półce niż w zamkniętej szafce?

Eva Wong jest Technicznym pisarzem i stałym majsterkowiczem w ZimaSpace. Całe życie geek z pasją do homelabów i oprogramowania open-source, specjalizuje się w tłumaczeniu skomplikowanych koncepcji technicznych na przystępne, praktyczne przewodniki. Eva wierzy, że samodzielne hostowanie powinno być zabawą, a nie czymś onieśmielającym. Poprzez swoje samouczki umożliwia społeczności rozwiewanie tajemnic konfiguracji sprzętu, od budowy pierwszego NAS po opanowanie kontenerów Docker.

Lokalne AI odczuwa się inaczej, ponieważ otwarta półka wymienia ciepłe powietrze z pomieszczeniem, podczas gdy zamknięta szafka może zatrzymywać i ponownie cyrkulować ogrzane powietrze.

Serwer GPU może pobierać taką samą moc 180 W w obu miejscach, a mimo to powietrze w szafce będzie się stopniowo nagrzewać, a obudowa będzie wydawać się cieplejsza. W obu przypadkach energia elektryczna zamienia się w ciepło. Różnica polega na tym, jak szybko ciepło opuszcza środowisko wlotowe urządzenia oraz czy powietrze wylotowe wraca do wentylatorów rozmieszczonych w pobliżu półek, przewodów i zamkniętych paneli.

Obciążenie określa ilość generowanego ciepła, ale miejsce instalacji decyduje o jego odprowadzaniu

Niemal cała energia elektryczna zużywana przez lokalny serwer AI ostatecznie zamienia się w ciepło w pomieszczeniu. Otwarta półka zazwyczaj zapewnia powietrzu wlotowemu i wylotowemu dużą wspólną przestrzeń. Szafka zwiększa opór przepływu przez drzwi, filtry, wąskie szczeliny i półki.

Poradnik dotyczący chłodzenia szaf rackowych opisuje zarządzanie przepływem powietrza jako podstawę kontroli temperatury sprzętu. Ograniczenie przepływu zmniejsza masę chłodnego powietrza dostępną do odprowadzania ciepła.

W stanie ustalonym wzrost temperatury zależy od obciążenia cieplnego i wymiany powietrza. Jeśli przepływ w szafce zmniejszy się o połowę, a moc pozostanie stała, powietrze musi zazwyczaj nagrzać się bardziej, aby odprowadzić taką samą ilość ciepła. Ciepło wyczuwalne na powierzchni jest opóźnioną wskazówką, a nie bezpośrednim miernikiem mocy.

Recyrkulacja podnosi temperaturę powietrza wlotowego przed wzrostem temperatury w pomieszczeniu

W obudowie powietrze wylotowe może krążyć wokół półki lub drzwi i ponownie trafiać do serwera. Wentylatory nadal tłoczą powietrze i mogą wskazywać prawidłową prędkość, ale strumień wlotowy zaczyna się od wyższej temperatury. Komponenty muszą wtedy uzyskać większy wzrost temperatury albo wentylatory muszą pracować szybciej, aby odprowadzić taką samą ilość ciepła.

Analiza recyrkulacji gorącego powietrza w środowiskach serwerowych pokazuje, jak powracające gorące powietrze podnosi temperaturę wlotową, nawet gdy całkowita wydajność chłodzenia wydaje się wystarczająca. Droga przepływu jest równie ważna jak nominalna objętość powietrza tłoczonego przez wentylatory.

Otwarta półka również może działać nieprawidłowo, jeśli stoi przy ścianie albo jest otoczona innymi źródłami powietrza wylotowego. „Otwarta” nie oznacza automatycznie chłodna; decydujące są niezakłócony wlot, droga ujścia powietrza oraz oddzielenie wlotu od wylotu.

Kiedy umiejscowienie w szafce nie jest główną przyczyną

Wyjaśnienie związane z obudową nie ma zastosowania, jeśli temperatura wlotu, temperatura komponentów, pobór mocy i zachowanie wentylatorów pozostają takie same w obu miejscach. Cieplejsza w dotyku metalowa powierzchnia może wynikać z kontaktu, emisyjności lub sposobu rozchodzenia się ciepła, a nie z wyższej temperatury krzemu.

Praktyczny przegląd wentylacji wymuszonej rozróżnia konwekcję naturalną, wentylację wymuszoną i aktywne chłodzenie. Różne konstrukcje obudów mogą skutecznie wymieniać ciepło mimo zamkniętych paneli.

Mechanizm ten przestaje mieć zastosowanie również wtedy, gdy obciążenia nie są w rzeczywistości takie same. Taktowanie GPU, wykorzystanie CPU, aktywność pamięci masowej, temperatura otoczenia, ilość kurzu i limity mocy muszą pozostać stałe. Szafka nie jest z definicji niebezpieczna; granicę wyznacza niewystarczająca, zmierzona wymiana powietrza.

Porównaj wzrost temperatury wlotowej przy kontrolowanym obciążeniu AI

Uruchom w obu miejscach obciążenie AI o takim samym, stałym czasie trwania, po osiągnięciu równowagi cieplnej. Rejestruj moc pobieraną ze ściany, temperaturę pomieszczenia, temperaturę powietrza na wlocie i wylocie serwera, temperaturę CPU i GPU, taktowanie, prędkość wentylatorów w obr./min oraz występowanie throttlingu. Umieść sondy w szafce z dala od bezpośredniego kontaktu z metalem.

Użyj powtarzalnego obciążenia długotrwałego lokalnego obciążenia AI i zachowaj logi na serwerze. Utrzymuj stałe parametry modelu, rozmiar partii, limit mocy oraz stan systemu HVAC w pomieszczeniu.

Jeśli różnica między temperaturą wlotu a temperaturą pomieszczenia wzrasta w szafce, popraw drogę przepływu powietrza albo zmniejsz długotrwały pobór mocy. Jeśli rośnie wyłącznie temperatura komponentów przy takiej samej temperaturze wlotu, sprawdź przepływ powietrza w obudowie. Jeśli wszystkie mierzone wartości są takie same, ale odczucie przy dotyku się różni, nie wyciągaj wniosku o usterce chłodzenia wyłącznie na podstawie temperatury powierzchni.

Centrum Technologii i Sztucznej Inteligencji

Więcej do przeczytania

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.