Koude kolom, hete uiteinden: leidingen voor een Gree in een gestapelde 6U GPU-behuizing

geplaatst in: Uncategorized | 0

Ik was halverwege een training op een vloeistofgekoelde desktop GPU die nog steeds richting ~80 °C klom tijdens een lange LoRA-taak, terwijl ik keek naar een open 6U stalen chassis op de grond: vier open RTX 3090-kaarten, twee ongeveer 2 kW voedingen en bijna geen behuizingventilatoren. De eerste vraag was eerlijk en dom: hoeveel 120 mm ventilatoren koop ik?

Die vraag overleefde geen contact met de doos. Wat ik eigenlijk nodig had was een koude kolom gedeeld met een reserve Gree kanaalverdeelkop die al in de plafonddoos boven het rek zat — en de discipline om te voorkomen dat HVAC CFM het chassis van binnen naar buiten blaast.

Dit is een bouwlogboek voor mensen die al een rek, een stapel gebruikte 3090’s en een kanaal binnen hebben die ze nog niet hebben bedraad. Ventilatoren verzegelen het staal. De Gree is een gedeelde koude bron. De divider PWM is de balansklep. Stapelen werkt alleen als de doorvoer aan de koude kant blijft.

De doos op de vloer

Het chassis is een 6U stalen multi-GPU frame met twee kamers gescheiden door een middenventilatorvlak:

  • Voorkamer: dubbele hoogvermogen voedingen achter een honingraatpaneel (ruimte voor drie 120 mm bevestigingen).
  • Achterkamer: vier openlucht 3090’s plus het moederbord.
  • Middenvlak: het standaard had twee eenzame 120 mm ventilatoren die al onderaan rechts waren gemonteerd.
  • Deksel: een geperforeerd rooster. We gingen eerst ervan uit dat het over de voedingen zat. Dat is niet zo — het zit over de GPU-bay. Die fout werd bijna een AC-bypass.

Boodschappenlijst voor alleen het staal, voor HVAC: +4 op het middenvlak (zes in totaal als een gesloten muur) en +3 op het voorste honingraat = zeven nieuwe ventilatoren. Een Arctic SATA→PWM adapter zodat de divider zes een enkele PWM-kanaal delen. Lege 120 mm uitsparingen worden verzegeld — een gat zonder ventilator is een lek, geen gratis lunch.

Top-down diagram van 6U GPU-chassis met PSU-bay, middenventilatorvlak en vier RTX 3090's
Top-down (deksel af): PSU-bay vooraan, zes-ventilator gesloten muur in het midden, openlucht GPU-bank achteraan. Het rooster van de deksel zit over de GPU-helft — verzegel het zodra de AC arriveert.

Luchtstroomregels waar we uiteindelijk voor kozen

  1. Laat niet de PSU-uitlaat en GPU-uitlaat op elkaar uitblazen.
  2. PSU-ventilatoren blazen naar voren uit. De drie voorste 120’s blazen ook uit.
  3. 3090 / GPU-kamer blaast naar achteren uit.
  4. De middelste zes zijn de klep tussen de bays. PWM ze als groep om “voeding naar de PSUs” vs “voeding naar de kaarten” in evenwicht te brengen.
  5. Open-air 3090’s dumpen warmte in het behuizingsvolume. Het zijn geen blower-kaarten. Als je toevoerlucht op het dekrooster boven de GPU-bay dumpt, stroomt koude lucht kortgesloten naar achteren en raakt de inlaten nooit.

Dat laatste punt is de reden waarom het afdichten van het GPU-dekrooster geen optionele esthetiek is. Het is thermodynamica met ducttape.

Verkeerde afslag: voorste inlaat voor altijd

Spiergeheugen van gamingcases zegt “kou in de voorkant, warm naar achteren.” Met dubbele high-watt PSUs die al naar voren uitblazen door de honingraat, betekent voorste inlaat dat je tegen de PSUs vecht en twee pluimen in hetzelfde gat mengt. Zodra de voorste drie als uitlaat zijn vergrendeld, is de enige verstandige koude ingang ergens anders – een kraag in de PSU-bay, zo ver van de honingraat als het staal toelaat.

Verkeerde afslag: het dekrooster zit over de GPU’s

We liepen rond het chassis overtuigd dat het geperforeerde deksel aan de stroomkant zat. Dat is niet zo. Het rooster zit over de open-air kaarten. Laat het open onder een plafondtoevoer en je bouwt een schoorsteen: AC bovenaan, recht naar achteren, GPU’s koken nog steeds in gerecirculeerde ganglucht. Plak of paneel dat rooster voordat je de kanaal afbouwt.

Vergelijking van open dekrooster kortsluiting versus verzegeld rooster met PSU-kraag
Verkeerde afslag: een open dekrooster over de GPU’s verandert toevoer in een schoorsteen. Verzegel het rooster en zet de kraag op de PSU-bay.

De Gree boven het rek

Een ongebruikte Gree kanaaltype binnenkarton leeft in de plafondholte boven het rek – afmetingen van de doos ongeveer 150,5 × 55,5 × 26,0 cm. Het hangt aan een multi-split buiteneenheid, dus de capaciteit wordt gedeeld met andere koppen. Die ene zin is het grootste deel van de politieke economie van dit ontwerp: je bezit de buitendrukker niet alleen.

  • Toeleveringsflenzen → geïsoleerde pijp in het rek.
  • Retour: niet bovenop de toevoer. Een plafondnet naast het rek is acceptabel; beter voor de kamer is een rechthoekige retour aan de tegenovergestelde kant zodat de warme pluim het plafond moet volgen in plaats van de spoel te kortsluiten.
  • Gooi geen chassisuitlaat in de Gree-voorziening.
  • Gebruik geen oud rack-dakventielgat als schoorsteen naar de spoelvoorziening.
  • Thermostaatvalstrik: kanaalkoppen voelen vaak retourlucht. Een warme rackpluim bij de retour doet de Gree denken dat de kamer een oven is. Het koelt te veel af en verbruikt de multi-split terwijl de slaapkamers aan de andere kant zacht worden. Gebruik de bedrade wandcontroller (kamer sensor) op middelhoogte aan de koele kant van de kamer – niet op het plafondpad naast het rack.

    Hoe koude lucht de staal binnenkomt

    Knip een kraag in het PSU-compartiment van de bovenste 6U – zijkant of deksel, zo ver mogelijk van het voorste honingraat als je kunt. Dat is de AC-inlaat. Isoleer de slang. Behandel rauw gesneden metaal (randen, roest, condensatie). Condensatie is niet theoretisch zodra je onder het dauwpunt bent op Thaise nachten in het natte seizoen.

    Gree-kanaal-CFM is geen PC-ventilatorcurve. Een kanaalkop beweegt vaak in de orde van 600–1200 CFM. Zes 120 mm ventilatoren door een chassis kunnen iets verbruiken als 200–350 CFM als je geluk hebt en verzegeld. Leid 100% van de toevoer naar de doos en de PSU-bay wordt positief: koude lucht blaast terug uit het voorste honingraat terwijl de GPU’s nog steeds verhongeren. Je koelde geen computer. Je bouwde een luide diffuser met vier dure weerstanden achteraan.

    De T-verbinding (niet onderhandelbaar)

    Gree-voorziening T-verbinding met klep naar rack en open loop naar kamer
    T-verbinding: rackpoot is gemeten met een klep; kamerpoot is overgebleven CFM voor de verre retour – geen optionele afval.

    De rackpoot heeft een klep nodig. Begin handmatig. Een aangedreven klep kan wachten tot een tweede vierkant doosje de belasting onvoorspelbaar maakt – dan besturen vanuit GPU-temperatuur, niet vanuit de leugenachtige retour-sensor van de Gree.

    Binnen elke 6U na de kraag is live:

    • De koude kolom leeft alleen in de PSU-bays.
    • Scheidingsventilatoren blazen PSU-bay → GPU-bay zodat overgebleven toevoerlucht de 3090-inlaten raakt.
    • Voorste ventilatoren blijven uitlaat en lopen langzamer dan de scheider zodat ze niet het gevecht winnen en AC naar buiten blazen door het honingraat.
    • De achterkant van de GPU blijft uitlaat.

    Doeltemperatuur onderin de behuizing: midden 70-er tot begin 80-er jaren °C kern, VRAM-verbinding onder ~95°C. Gebruik de vermogenslimiet voor 3090’s tot ~250–300 W als hitte of geluid de baas is. Pads kunnen nog steeds nodig zijn, ongeacht hoe mooi uw ventilatorwand eruitziet – openlucht 3090’s zijn niet onsterfelijk.

    Zijaanzicht van koude kolom in PSU-bay en hete uitlaat aan beide uiteinden
    Zijaanzicht: koude kraag alleen in de PSU-bay; divider PWM voedt de GPU-bay; hete uitlaat aan de voorkant en achterkant. Het dekselrooster boven de GPU’s blijft verzegeld.

    Meer 6U’s stapelen: daisy-chain alleen koud

    Het tweede chassis krijgt niet op dag één zijn eigen heldhaftige bevoorrading. Maak een gat in de vloer van de PSU-bay van de bovenste doos die in lijn is met een gat in het deksel/onderkant van de PSU-bay van de doos eronder. Afdichten van het gewricht. AC in de bovenste doos loopt omlaag als een koude kolom.

    • Elk chassis stoot nog steeds zijn eigen warmte uit aan de voorkant en achterkant in de rackgang.
    • Nooit GPU-uitlaat naar de volgende inlaat leiden.
    • De bovenste doos krijgt de koudste lucht – plaats de meest veeleisende GPU’s bovenaan, of geef de onderste dozen meer divider PWM.
    • Elke extra quad is ongeveer 1,5–2 kW extra warmte op een gedeelde multi-split buitenunit. Ventilatoren verzinnen geen compressor tonnen.
    Twee gestapelde 6U chassis met afgedichte koude doorvoer alleen in PSU-bays
    Stack: daisy-chain alleen koud door afgedichte gaten in PSU-bays. Elk chassis houdt zijn eigen voor/achter hete uitlaat – leid nooit GPU-uitlaat naar de volgende inlaat.

    Rackplaatsing

    • Parkeer de 6U hoog genoeg zodat u de kraag kunt bedienen en nog steeds labels kunt lezen.
    • Lege ongebruikte U zodat pluimen niet in een rooster terechtkomen.
    • Kleppen of terugslagkleppen alleen op uitlaatopeningen (voorpaneel, misschien achterpaneel) – nooit op de koude inlaat.
    • Een korte afscherming zodat de vooruitlaat niet omhoog kan komen in een inlaat van het deksel is minder belangrijk zodra de GPU-rooster verzegeld is en de toevoer een goede kraag is, maar het is nog steeds goedkope verzekering.

    Wat ik eerst zou kopen vs later

    Nu: zeven 120 mm ventilatoren, één PWM-hub/adapter voor de verdeler zes, afdichtingsmaterialen, geïsoleerde kanaal, een handmatige klep op het T-rackbeen, plaatsing van de wandcontroller doordacht voor de eerste treinbaan.

    Later: aangedreven klep op GPU-temp, tweede manchet wanneer het volgende chassis echt van metaal is, misschien een goede terugkeer op de achterwand als het plafondrooster naast het rack nog steeds kort cydelt.

    Ik zou geen twaalfde behuizingventilator kopen om een ontbrekende T-verbinding te “repareren”.

    Inbedrijfstellingschecklist

    1. GPU-dekrooster verzegeld.
    2. Voorzijde honingraat: heet uit, niet koud AC-fluitend uit.
    3. Achterkant GPU-compartiment: heet uit.
    4. Manchet: koud in.
    5. Verdeler PWM start ~40–50%. Verhoog totdat de GPU-temperaturen vlakker worden. Terug als een PSU heter wordt dan je prettig vindt.
    6. Wandstat bedient de Gree — niet de plafondretour naast de rackpluim.
    7. Na 20–30 minuten van echte trein: lees cores en VRAM, niet alleen “de kamer voelt prima”.
    8. Handtest: houd een tissue aan de voorkant honingraat en aan de manchet. Als het tissue de verkeerde kant op flappert, repareer dan de klep voordat je CFM viert.

    Hoe “werken” aanvoelt

    Werken is saai. De gang is warm aan de achterkant van de GPU-compartiment en aan de voorkant honingraat. De PSU-compartiment ruikt naar koud plastic, niet naar ozon. De Gree slaat niet elke keer vol aan als een codeeragent een lange sessie begint. Divider PWM is een knop die je twee keer per seizoen aanraakt, geen religie.

    Niet werken is ook duidelijk: koude lucht stroomt naar voren terwijl de 3090’s in de midden-90’s zitten, of een multi-split buitenunit vergrendeld op de rackzone terwijl de rest van het huis ruzie maakt met de wandafstandsbediening.

    Waarom dit infrastructuur is, geen RGB

    Bij 3DN praten we over compute, multi-GPU werk, en de stille kosten van het draaien van agenten en lokale modellen naast de rest van de familiestapel — beheerde hosting, digitale soevereiniteitvoorkeuren, zelfs de fintech-ruggengraat achter merken zoals DutchBud bank en virtuele credits (dibs) op zusterwebsites. Geen van die marketing overleeft een rack dat zichzelf kookt. Warmte maakt deel uit van de materiaallijst.

    Dus nee: het antwoord was niet “voeg gewoon meer ventilatoren toe”. Ventilatoren veranderen de 6U in een kanaalsegment. De Gree is een gedeelde koude bron die de doos zal overweldigen tenzij je T en klep het. De divider PWM balanceert de twee kamers. Stapelen werkt alleen als de doorvoer aan de koude kant blijft en elk chassis nog steeds zijn eigen hete uitlaat bezit.

    Ik heb nog steeds meer ventilatoren nodig dan de lege staal meegeleverd. Ik heb ook een klep, een verzegelde rooster en de nederigheid nodig om overgebleven CFM voor de kamer te laten.

    Geef een reactie

    Je e-mailadres wordt niet gepubliceerd. Vereiste velden zijn gemarkeerd met *