Nedsenkingskjøling vs. Direkte-til-brikkekjøling: hva det betyr for rørspesifikasjonene dine

Introduksjon: Beslutningen som skjer for sent

De fleste datasenteringeniører velger kjøleteknologi - nedsenking eller direkte-til-brikke - basert på racktetthetsmål og kapitalbudsjett. Rørspesifikasjonen kommer senere, ofte behandlet som en utførelsesdetalj i stedet for en designdriver. Den sekvenseringen er en feil.

Væskesystemet du bygger rundt den valgte kjølearkitekturen er ikke utskiftbart. En rørspesifikasjon skrevet for direkte-til-brikke (D2C) kald-platekjøling vil svikte - bokstavelig og operativt - hvis den ettermonteres til enfasenedsenking, og omvendt. Med GPU-racktettheter som nå rutinemessig overstiger 50 kW og AI-arbeidsbelastninger som presser mot 100 kW per rack, er det ikke lenger valgfritt å få rørspesifikasjonene rett i den skjematiske designfasen. En enkelt lekkasje i et D2C-system kan ta ned et helt rack på $400 000 i GPU-maskinvare på sekunder.

Denne veiledningen er skrevet for mekaniske og rørleggeringeniører som allerede har tatt (eller tar) beslutningen om kjølearkitektur og som trenger å oversette dette valget til en forsvarlig, ASHRAE-kompatibel rørspesifikasjon.

 

 

Direkte til chip væskekjøling datasenter GPU rack CDU

 

1. To arkitekturer, to helt forskjellige væskesløyfelogikker

Før du berører en rørplan, må du forstå at nedsenkingskjøling og D2C fungerer på fundamentalt forskjellige hydrauliske prinsipper.

Direkte-til-brikke (D2C)sirkulerer væske - vanligvis avionisert vann eller en vann-glykolblanding - gjennom kalde plater montert direkte på CPU-er, GPU-er og ASIC-er. Varme absorberes ved flisoverflaten og føres til en Coolant Distribution Unit (CDU), som utveksler den med anleggets vannsystem. Resultatet er et tett, trykksatt nettverk av rør med liten-diameter, manifolder, hurtigkoblinger- og kalde plater, som alle må fungere i hydraulisk balanse samtidig.

Enkel-nedsenkingskjølingsenker hele serverkort i en dielektrisk væske - vanligvis et syntetisk hydrokarbon eller konstruert væske - inne i en tank. Varme overføres fra alle komponenter til væsken, som deretter pumpes gjennom en ekstern varmeveksler. Det eksterne rørnettverket er minimalt: i hovedsak to tilkoblinger per tank (tilførsel og retur) som går til en CDU eller anleggskjølesløyfe.

Den arkitektoniske forskjellen er sterk: D2C fordeler den hydrauliske utfordringen over dusinvis av tilkoblingspunkter per stativ; nedsenking konsoliderer den til en enkel ekstern-sløyfe med lavt trykk. Alt nedstrøms i rørspesifikasjonen din kommer fra denne distinksjonen.

 

2. Valg av rørmateriale: Der ASHRAE setter grensen

ASHRAE TC 9.9 og TC 9.6 er eksplisitt om materialkompatibilitet. For D2C vann-baserte kjølesløyfer, forbyr veiledningen sink, aluminium og messing som inneholder mer enn 15 % sink - som alle akselererer galvanisk korrosjon i nærvær av behandlet vann. Rent praktisk utelukker dette standard gulmessingbeslag og galvanisert stålrør som fortsatt er vanlige i HVAC-vannsystemer.

For Technology Cooling System (TCS)-sløyfen - den sekundære sløyfen som serverer kaldplater direkte -304 eller 316 rustfritt ståler standardspesifikasjonen. TCS-sløyfen kjører vanligvis avionisert eller høyt behandlet vann, som faktisk er mer aggressivt mot korrosjon enn kommunalt vann fordi det nesten ikke har bufferkapasitet. En isolasjonsventil ved hvert stativ, vurdert for systemets driftstrykk og produsert av 316 rustfritt, er nødvendig både for rutinemessig vedlikehold og nødlekkasjeisolering.

For nedsenkingskjøling skifter materialutfordringen helt. Den dielektriske væsken er kjemisk inert mot de fleste metaller, men den angriper aggressivt elastomerer - standard EPDM og Buna-N-pakninger som brukes i HVAC-applikasjoner vil svelle og brytes ned i løpet av måneder etter kontakt med hydrokarbon-baserte dielektriske væsker. Selve rørmaterialet (rustfritt, karbonstål) er generelt kompatibelt, men hver pakning, O-}ring og fleksible koblinger i den eksterne sløyfen må spesifiseres som PTFE eller et fluorpolymermateriale klassifisert for den spesifikke væsken som brukes.

 

3. Rørdimensjonering, strømningshastighet og trykkfall

ASHRAE TC 9.6 setter en maksimal væskehastighet på2,1 m/s for rørdiametre større enn 3 tommerfor å hindre erosjon ved beslag og bend. Under 3 tommer er den praktiske grensen nærmere 1,5–1,8 m/s før støy og erosjonsrisiko øker uakseptabelt. Disse grensene gjelder for både kjølearkitekturer, men skaper svært forskjellige størrelsesresultater.

I D2C-systemer er strømningshastigheten diktert av den termiske belastningen til hver kald plate. Etter hvert som chip TDP (Thermal Design Power) øker - opererer moderne H100 GPUer ved 700W TDP, med neste{5}}generasjons akseleratorer anslått til 1000W+ -, øker strømningsbehovet per kald plate proporsjonalt. Et 50 kW-stativ med D2C-kjøling kan kreve 8–12 liter kjølevæske per minutt ved stativmanifolden, fordelt på 8 til 16 individuelle kaldplater. Dette driver behovet for nøye hydraulisk balansering: Kalde plater parallelt må dele flyten likt, ellers vil de varmeste brikkene - vanligvis de som er i enden av manifoldgrenen - bli sultne på kjølekapasitet.

I nedsenkingssystemer bærer den eksterne rørsløyfen hele tankens varmebelastning, men med mye lavere hastighet og trykk fordi drivmekanismen inne i tanken er konveksjon og lav-hastighetspumping, ikke tvunget høy-strøm. En senketank på 250 kW krever vanligvis bare 20–30 liter per minutt gjennom den eksterne varmevekslersløyfen, ved systemtrykk som sjelden overstiger 2–3 bar.

Avgjørelsen om ruteføring over gulv i forhold til gulv påvirker også dimensjonering. ASHRAE-veiledning bemerker at rørstrekninger under gulv må ta hensyn til isolasjonstykkelse og rørkryssklaring - og legge til 50 mm til rørdiameteren når man tar hensyn til isolasjonsomslag, er en vanlig planleggingsfeil som skaper koordineringskonflikter med hevet-gulvfliser.

 

4. Isolasjonsventiler, siler og lekkasjekontroll: spesifikasjonsdetaljene som beskytter oppetid

Det er her rørspesifikasjoner direkte bestemmer operasjonell motstandskraft, og hvor de fleste spesifikasjonsdokumenter er underskrevet.

For D2C-systemer, må hvert stativ ha en isolasjonsventil på både tilførsels- og returbein, slik at et enkelt stativ kan isoleres og tømmes for vedlikehold uten å stenge ned tilstøtende stativer. Den foretrukne ventiltypen for denne applikasjonen er en3-delt gjenget kuleventili 304 eller 316 rustfritt stål. Husdesignet i tre-er er avgjørende her: i motsetning til én-del eller to-ventiler, kan den demonteres på plass - uten å kutte røret eller fjerne ventilhuset fra ledningen - for å erstatte tetninger eller rengjøre setet. I et live datasentermiljø der minimering av nedetid i rack er avgjørende, er denne-servicevennligheten en meningsfull driftsfordel, ikke en spesifikasjonsluksus.

Oppstrøms for hver stativmanifold kreves det en Y-sil i rustfritt stål for å beskytte mikro-kaldplatekanaler mot partikkelforurensning. Kalde plategeometrier for høyytelses GPUer bruker kanalbredder så smale som 0,5–1,0 mm; en 200 mikron partikkel kan delvis blokkere en kanal og skape et lokalisert hot spot som termisk overvåking kanskje ikke fanger opp før struping av brikkene begynner. Spesifiser siler med en maskestørrelse på 50 mikron eller finere på TCS-løkken, i henhold til ASHRAE TC 9.9-retningslinjene for vannkvalitet.

På returbenet forhindrer en tilbakeslagsventil i rustfritt stål omvendt strømning gjennom CDU-varmeveksleren når et stativ er isolert eller en pumpe utløser - en tilbakestrømningshendelse som kan introdusere varm væske i tilførselshodet og øke kjølevæsketemperaturen over hele raden før kontrollene reagerer.

For server-til-manifold-tilkoblinger, spesifiser tørre-hurtige frakoblinger-med et maksimalt tillatt søl på 1 kubikkcentimeter per frakoblingssyklus, i tråd med OCP-tilkoblingsstandarder (Open Compute Project). Fleksible slangesegmenter ved disse koblingene må festes med ekstra klemmer med 150 mm intervaller for å forhindre nedsynkning-indusert trykkfall og belastning på monteringsgjengene.

For nedsenkingssystemer, isolasjonsspesifikasjonen er enklere, men ikke triviell. Hver tank trenger tilførsels- og returisolasjonsventiler dimensjonert for full tankstrøm, pluss en prøveport for overvåking av væskekvalitet. Spesifiser de eksterne sløyfeforbindelsene i et materiale som er kompatibelt med den spesifikke dielektriske væsken - bekreft kompatibiliteten med væskeleverandøren skriftlig før du fullfører spesifikasjonen, da proprietære væskeformuleringer varierer.

Lekkasjedeteksjonskabel skal føres langs hele lengden av alle D2C-tilførselsrør, plassert på det laveste tilgjengelige punktet på hvert rørbrett eller kabelbrett. For nedsenkingssystemer er det tilstrekkelig med punkt-sensorlekkasjedetektorer ved hver tankbase og ved CDU, gitt at eksterne rørforbindelser er få og-synlige.

 

 

Leadtek 3-delt gjenget kuleventil

 

5. En praktisk spesifikasjonssjekkliste før du sender ut for konstruksjon

Før rørspesifikasjonen din forlater ingeniørteamet, kontroller følgende mot den valgte kjølearkitekturen:

Materialoverholdelse: Alle fuktede metaller bekreftet fri for sink og aluminiumslegeringer (D2C); alle elastomerer bekreftet kompatible med dielektrisk væskekjemi (nedsenking)

Hastighetssjekk: Maksimalt 2,1 m/s ved rør større enn eller lik 3" diameter, per ASHRAE TC 9.6

Isolasjonsventiler: En 3-delt gjenget kuleventil per stativ, forsyning og retur, med-linjeservice (D2C)

Sil vurdering: Mindre enn eller lik 50 mikron mesh på TCS-forsyning, oppstrøms for hver stativmanifold (D2C)

Kontroller ventilplassering: CDU-retur, hver rack-returgren (D2C)

Rask-frakoblingsspesifikasjon: Tørr-pause, mindre enn eller lik 1cc søl, OCP-kompatibel (D2C)

Lekkasjedeteksjon: Kontinuerlig kabel på alle forsyningsløp (D2C); punktsensorer ved tankbase og CDU (nedsenking)

Avstand under gulv: Rør OD pluss isolasjon pluss 50 mm crossover klaring bekreftet i gulvfri modell

Vannbehandlingsplan: Nettsteds-spesifikt kjemiprogram engasjert før systemfylling, med pågående overvåkingsprotokoll spesifisert

 

Konklusjon: Spesifiser rørsystemet for å matche kjølearkitekturen, ikke omvendt

Avgjørelsen om kjøleteknologi og rørspesifikasjonen er ikke sekvensielle trinn - de er en enkelt integrert teknisk beslutning. Valget mellom nedsenking og D2C-kjøling setter den hydrauliske logikken, materialbegrensningene, isolasjonsstrategien og lekkasjerisikoprofilen for hele væskesystemet. Å prøve å tilpasse en generisk HVAC-vannrørspesifikasjon til begge arkitekturene vil produsere et system som underpresterer operativt og skaper unødvendig vedlikeholdseksponering.

Engasjer rørspesifikasjonene dine ved skjematisk design, sammen med utvalget av kjølearkitektur. Bruk ASHRAE TC 9.6 og TC 9.9 som standard rammeverk for samsvar, og kontroller hvert materialvalg mot den faktiske væskekjemien i systemet ditt - ikke en generisk "vann"-antagelse. De 30 minuttene som brukes på å få isolasjonsventiltype og silnetting rett på spesifikasjonsstadiet vil spare betraktelig mer enn 30 minutter i fremtidig nedetid.

 

FAQ

Spørsmål: Kan jeg bruke standard HVAC-karbonstålrør for en direkte-til-kjølesløyfe?

Karbonstål brukes i -anleggssløyfer for kjølt vann (FWS), men det er ikke egnet for TCS-sløyfen (Technology Cooling System) som direkte betjener kaldplater. TCS-sløyfen kjører høyt renset vann med lavt ioneinnhold, som er mer etsende for karbonstål enn behandlet HVAC-vann. Spesifiser 304 eller 316 rustfritt stål for alle TCS løkkerør og fittings.

Spørsmål: Hvorfor spesifiserer CDU-produsenten en annen rørtilkoblingsstørrelse enn min kaldplateleverandør?

CDUer og kalde plater er ofte hentet fra forskjellige produsenter og designet for forskjellige interne strømningsmotstandsantakelser. Misforholdet mellom tilkoblingsstørrelsen er et hydraulisk balanseringsproblem: hvis CDU forventer 10 l/min ved 2 bar og de kalde platene til sammen krever 14 l/min for å opprettholde temperaturer på brikkekrysset, er ingen av leverandørens spesifikasjoner feil - har systemdesignet ikke avstemt dem. En hydraulisk modell av den fulle TCS-sløyfen, fra CDU-uttak til hver kaldplate og tilbake, bør fullføres før du fullfører tilkoblingsdimensjonering.

Spørsmål: Hvor ofte bør Y-siler rengjøres på en D2C-kjølesløyfe?

I løpet av de første 90 dagene av drift, inspiser silkurver månedlig - nye rørsystemer slipper partikler ettersom rørbelegg herder og fittings setter seg. Etter innbruddsperioden- er kvartalsvis inspeksjon vanligvis tilstrekkelig for lukkede-sløyfesystemer med pågående vannkvalitetsovervåking. Hvis CDU-en din har en differensialtrykksensor over silen, sett en alarm på 0,3 bar delta-P som den rene-kurvens grunnlinje.

Spørsmål: Er nedsenkingskjølerør enklere å spesifisere enn D2C?

Det eksterne rørnettverket for nedsenkingskjøling er betydelig enklere - færre tilkoblingspunkter, lavere trykk og ingen stativ-manifoldfordeling. Materialspesifikasjonen er imidlertid mer kompleks fordi dielektrisk væskekompatibilitet må verifiseres for hver elastomer, pakning og fleksible koblinger i systemet. Feilmodusen for å få materialkompatibilitet feil i et nedsenkingssystem er sakte og vanskelig å oppdage: forseglingsdegradering over 12–18 måneder, etterfulgt av gradvis væsketap og kontaminering, snarere enn den umiddelbare og synlige lekkasjehendelsen som D2C-systemer produserer.

Spørsmål: Hva er minimumsgulvhøyden som kreves for D2C kjølerør som går under et hevet gulv?

ASHRAE-veiledning setter ikke et universelt minimum, da det avhenger av rørdiameter, isolasjonsspesifikasjoner og om rør krysser hverandre. En praktisk planleggingsregel er å tillate den største rørdiameteren i løpet, pluss 75 mm isolasjon på alle sider, pluss 50 mm klaring over for kryssrør, pluss 25 mm under for støtter. For en 4-tommers strømforsyning med 25 mm isolasjon, gir dette et minimumsgulvtomrom på omtrent 300 mm - større enn 250 mm tomrom som er vanlig i eldre datasentre med høye etasjer, som er en ettermonteringsbegrensning som er verdt å identifisere tidlig.