• 18.04.2024, 13:21
  • Registrieren
  • Anmelden
  • Sie sind nicht angemeldet.

 

Lieber Besucher, herzlich willkommen bei: Aqua Computer Forum. Falls dies Ihr erster Besuch auf dieser Seite ist, lesen Sie sich bitte die Hilfe durch. Dort wird Ihnen die Bedienung dieser Seite näher erläutert. Darüber hinaus sollten Sie sich registrieren, um alle Funktionen dieser Seite nutzen zu können. Benutzen Sie das Registrierungsformular, um sich zu registrieren oder informieren Sie sich ausführlich über den Registrierungsvorgang. Falls Sie sich bereits zu einem früheren Zeitpunkt registriert haben, können Sie sich hier anmelden.

_heinz

Junior Member

D5400XS Wasserkühlung ? aber wie ?

Donnerstag, 30. August 2012, 02:11

Hallo,
seit Juni 2008 betreibe ich meinen 8 core-Xeon, Board Intel D5400XS. Die Maschine läuft im Dauerbetrieb(6 Monate über den Winter) unter Vollast (alle 8 Prozessore 100% Auslastung, 1 GTX570 und 2 GTX470 mit über 90% GPU-load. Gemessene Leistung 860W im Dauerbetrieb, Spitzen 900W. Seidem habe ich zwei 1000W Netzteile verheizt und über den Sommer(Mai bis Oktober) muss ich die Maschine jedes Jahr ausgeschaltet lassen. Wenn die Aussen- Temperatur >25 grad C übersteigt gibt es thermische Probleme wie folgt:
1.) FBDIMM Temperaturen über 100 grd C.
http://www.britta-d.de/images/primegrid/…overheating.jpg
http://www.britta-d.de/images/primegrid/…dimm-118grd.jpg
2.) GPU Temperaturen über 90 grd C
http://www.britta-d.de/images/gtx470/GPU2_470_101_grd.jpg
Da der nicht ganzjährige Betrieb für mich eine große Einschränkung bedeutet, suche ich nach besseren Kühlungsmöglichkeiten und dachte an eine Wasserkühlung.
Ich habe natürlich in euren Foren gelesen.
Über gute Vorschläge von Euch würde ich mich freuen.
Nun die Fakten:
Boardlayout:http://www.britta-d.de/images/d5400xs_layout.jpg
Blick auf das Board ohne Grafik Karten
http://www.britta-d.de/bilder/server/page31.htm
Es sind jetzt 4 FBDIMM's a 4GB gesteckt.
Es sollen alle vier X16 Slots belegt werden.
slot 0 und 1 mit 2-slot Karten GTX690
Slot 2 und 3 mit 1-slot-Karten AMD 7990 auf die wir noch immer warten.
Die CPU's 2 x Intel E5405 (80W) und MCH sowie der große schwarze Kühler der Northbridge (evtl. Sonderanfertigung erforderlich) sollten ebenfalls mit Wasser gekühlt werden.
Kühlung der FBDIMMS mit Wasser. (zu beachten in der Mitte sind die FBDIMMS dicker als links und rechts davon).
Gehaüse A+
Es hat viel Platz oben und zwei große 28cm Lüfter die stufenlos geregelt werden können.
http://www.britta-d.de/bilder/server/page37.htm
Dimensionierung der Wasserkühler:
ich dachte an eine passiven Wasserkühler( Auto- kühler der rechts am Gehause hängt(von vorn gesehen) , oder an einen Zentralheizungskörper 1,20m * 90cm (~2400W Heizleistung)
Da ich meistens unmittelbar neben der Maschine sitze und jeder Lüfter Lärm macht möchte ich gerne eine passive Kühlung.
Leider habe ich keine Möglichkeit den Server in einem anderen Raum oder im Freien aufzustellen, oder Rohre nach draussen zu verlegen.
Kann ich mit Wasser die Maschine ausreichend kühlen ? Oder muss ich doch eine Subzero Kühlung verwenden.
Aus meiner Sicht haben die 2 CPU bisher keine grossen Probleme gemacht.
Problematisch sind die FB-DIMMS und die Graphicadapter.
Reicht eine Neudimensionierung des Netzteiles auf 1300W oder müssen es 1500W sein ?
Wie könnte eine Wasserkühlung für diese Konfiguration aussehen ? Wie viele Pumpen ? Wieviele Kreisläufe ?
Meine Vorstellung:
Kreislauf1: CPU1, CPU2, MCH, Northbridge
Kreislauf2: PCIE Slot 0 GTX690, PCIE Slot1 GTX690
Kreislauf3: PCIE Slot 2 AMD 7990. PCIE Slot3 AMD 7990
Jeder Kreislauf mit separater Pumpe.
Gibt es Möglichketen die erforderliche Kühlleistung zu berechnen ?
Ich hoffe dass die Eckdaten vollständig sind.
Gruss
_heinz

Donnerstag, 30. August 2012, 09:13

Ganz ehrlich?

ich würde das lieber mit einem Kreislauf aufziehen.
AC baut gerade den Giant als Radiator, vielleicht guckst du dir den mal an ;)
Die Northbridge würde ich einfach weiterhin mit Lüft kühlen, genauso wie die RAMs.

Mit dem Wasserkreislauf kannste dann die CPUs und die GPUs kühlen. Die Wärme kann der Giant dann halt extern abgeben.
Soweit ich mich erinnere, kann man in den Giant ein Aquaero 5 und eine D5 Pumpe reinbauen.
Somit hast du dann direkt eine Pumpenüberwachung, Lüfterregelung und Notabschaltung realisiert :)
Lüfter im Gehäuse kannste dann ja auf 5V betreiben um Northbridge und RAMs zu kühlen.
Da die Hitze von CPUs und GPUs ja extern abgeführt wird, haste hier keine größeren Hitzequellen mehr.


Wenn du nicht auf den Giant warten willst, würde ich vielleicht mal über das Aquaduct 720 nachdenken.
Da ist dann halt schon alles verbaut, wie z.B. Aquaero, Pumpe, Lüfter usw.
Allerdings würde ich dann darüber nachdenken eine zweite Pumpe in das Gehäuse zu integrieren.
Denke mal nicht das die Eheim 600 4 Grakakühler und 2 CPU Kühler packt.


Die AMD 7990 Wasserkühlen wird allerdings sehr lustig.
Da musste dann halt mal gucken wie hoch die Kühler von AC sind und wieviel Platz du zwischen den Slots hast.


Edith meint:
Wieso ich eigentlich nur einen Kreislauf aufziehen würde.
Ganz einfach, ob CPUs und GPUs jetzt bei 40° oder 50° laufen, das ist egal.
Ein zweiter Kreislauf kann zwar die Temperatur senken, dafür brauchst du etliche Komponenten neu.
Pumpe, Radi, Schläuche, Überwachung usw.
Alles Sachen die kaputt gehen können und nicht gerade günstig sind.

Und wieso die Northbridge und die RAMs nicht mitkühlen?!
Wenn du die Northbridge oder die RAMs mit in den Kreislauf hängst, wirst du diese eher heizen als kühlen.
Daher lieber mit Luft weiter kühlen.

p.s. Darf man fragen was du mit dem Monster machst, damit es so hoch ausgelastet ist?

Dieser Beitrag wurde bereits 2 mal editiert, zuletzt von »Ani« (30. August 2012, 09:45)

_heinz

Junior Member

Donnerstag, 30. August 2012, 14:45

p.s. Darf man fragen was du mit dem Monster machst, damit es so hoch ausgelastet ist?
Ja, darf man. Ich rechne für die Wissenschaft mit BOINC( http://boinc.berkeley.edu/ ), vorwiegend die Projekte PrimeGrid, DistrRTgen, Collatz, Seti, Milkyway.
http://boincstats.com/signature/-1/user/425/sig.png
Mit den Projekten kriegst du jeden Rechner auf 100% und zur Langzeit-Erprobung von hardware sind sie bestens geeignet. So findet man Schwachhstellen relativ schnell.
Ist halt ein Hobby von mir.
Vielen Dank für die Hinweise,Tips und Vorschläge
.
Hier noch ein paar Fotos:
v8-Xeon mit 2 GTX470 http://www.britta-d.de/images/v8xeon/gtx470_2_cards.jpg
Man sieht die Northbridge ist zu Hälfte abgedeckt. Leider sind die slots der Karten zu niedrig so dass die Karten direct auf der Northbridge aufsetzen.
v8-Xeon mit 3 GTX570/470 http://www.britta-d.de/images/v8xeon/gtx…570_3_cards.jpg
Ist halt wenig Luft zwischen den Karten, Die Northbridge is fast komplett zu. Deswegen wollte ich wassergekühlte Karten weil die schmaler sind, so dass gut Luft durchkommt.
Der EVO Kühler für die FBDIMMS ist mehr ein Spielzeug als dass er wirklich ordentlich kühlt.
Die Papiertüte soll bewirken dass er kältere Luft von draussen bekommt. Zwischen den FBDIMMS liegt ein Temperatursensor und der zeigt meistens 65 Grad Celsius.
Inzwischen hat sich der EVO Kühler verabschieded...festgelaufen...
Staub ist ebenfalls ein grosses Problem: http://www.britta-d.de/images/v8xeon/v8-xeon_dustbunnies.jpg
Wie man hier sieht hab ich keinen Kühler mehr direct auf den FBDIMMS. Im letzten Halbjahr hab ich keine reinen CPU Projekte mehr gerechnet ( 8cpu's im leerlauf).
Es passt einfach kein Kühler auf die FBDIMMS, Sie sind entweder zu breit oder zu hoch und stossen an die Klammer des linken CPU-Kühlers, die den Lüfter hält.
Oder der Slot0 kann nicht belegt werden. http://www.britta-d.de/bilder/server/page33.htm
OCZ Kühler, einfach zu breit...Graka hier noch Sapphire HD3870 passiv gekühlt. (jetzt schon Museumsstück)
Sieht wohl so auss dass ich selbst etwas bauen muss (4cm breit, nur 5mm hoch und so lang wie die FBDIMMS)
Ich muss alle 3 Monate reinigen. Hab leider Auslegware im Arbeitszimmer... und im Winter meistens das Fenster offen, damit ich auf 18 grd Zimmertemperatur komme. Dann laufen die Grakas auf 80 grd und die FBDIMMS auf ~75 bis 85 grd.
_heinz

Donnerstag, 30. August 2012, 18:45

Au weia wasn dreck. Steht der Rechner in einer Fabrik in der Produktion? :P



Für Dein Monster aber sehr wenig RAC.

Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von »Athlonheizer« (30. August 2012, 18:49)

Wenn ich die Folgen geahnt hätte wäre ich Uhrmacher geworden.

_heinz

Junior Member

Donnerstag, 30. August 2012, 23:50

Au weia wasn dreck. Steht der Rechner in einer Fabrik in der Produktion? :P

Für Dein Monster aber sehr wenig RAC.
klar, is ja auch seit 23.05. nicht mehr gelaufen, PSU verheizt...der RAC ist von meinem Laptop i3 GT540M und P4 2.6GHz ATI 4670 AGP, und ATOM mit ION. Rechne nur noch mit Grakas.
Hier kann man mehr lesen(will keine Werbung machen):
http://lunatics.kwsn.net/2-windows/optim…1.html#msg48491
Keine Fabrik. Rechner steht bei mir aufm Schreibtisch(muss ja noch schrauben), sonst isser unterm Tisch.
Im September wird Netzteil geordert...wahrscheinlich 1300W, muss nochmal nachrechnen..obs langt.
_heinz

Dieser Beitrag wurde bereits 2 mal editiert, zuletzt von »_heinz« (31. August 2012, 00:05)

a

Junior Member

Sonntag, 2. September 2012, 21:59

Passt das Topic nicht besser in den Bereich Wasserkühlung? Wenn es verschoben wird hat der TE dort sicher bessere Chancen auf Hilfe.


@_heinz: Wirklich schön, dass du soviel Zeit und Geld quasi gemeinnützig investierst ;)


Gruß
a(chim)

exi

Junior Member

Freitag, 14. September 2012, 16:05

Hmm... also was ich bei mir bemerkt habe ist, dass die RAM Temperaturen sinken wenn man die umliegenden Komponenten kühler hält. Habe die Northbridge mit eingebunden und seitdem Kühlere RAMs, ich denke das sind auch Konvektionseffekte.
Bei 90% Last ein NT verheizt klingt nach Biligware aber.... bei so vielen Komponenten die Strom ziehen würde ich das System nicht so auf Kante nähen, evtl wurden die Netzteile durch Strombedarfsspitzen gekillt - oder einfach durch die zu Hohe Temperatur.
Laut ATX Spec darf die ins Netzteil eingehende Luft max 50°C unter Vollast sein.

Mehrere Kreisläufe wegen Temperaturen sind unnötig, die Komponenten Vertragen alle >65°C Kühlertemperatur. Für Chips wie North/SouthBridge/MCH gibt es generische kühler mit breiten Befestigungsösen, was da passt hängt dann ja auch von den CPU Kühlern ab.
Zur Not kann man den Original Kühler abfräsen (Die Finnen absägen) und einen Wasserkühler mit Wärmeleitkleber aufkleben. Ich musste nicht kleben, die Löcher haben gepasst: http://xipic.net/waku/IMG_8271.JPG ;)
Für die Southbridge könnte sowas wie das Aquadrive Micro interessant sein da es sehr flach ist und die Zuleitungen weit entfernt hat. Ich denke da gibt es sonst Ärger mit den Grafikkarten.

Wegen der RAMs.. gibt ja flexible Wasserkühler, sonst einen Lufttunnel bauen, bei HP/DELL wird sowas immer mit Plexi gemacht, ich nehme für solche Zwecke auch einfach gerne Pappe. Damit die Luft eines 120mm oder 140mm Lüfter der langsam dreht über die DIMMs schieben, das sollte reichen.

Ich würde aber definitiv 2 Pumpen seriell schalten, ohne Bewegung würde das System sehr schnell Wasserdampf erzeugen. Sonst kann ich leider nicht viel Beitragen, meine Kühlung führt grad mal 200W ab ;)

rommolus

unregistriert

Samstag, 15. September 2012, 13:36

Moin



So sieht das aus wenn das Intel D5400XS zum Teil mit Wasser gekühlt wird:

Die Ram´s können gut mit einem Ventilator Ramkühler auf ein erträgliches Maß
gekühlt werden. Ansonsten habe ich 2 Pumpen in Reihe, 4 Festplattenkühlgehäuse,
2 CPU (Intel Xeon 5482) Kühler, Nvidia GTX590 mit Wasserkühlung, 2 aktive
Kühler, einen passiven Kühler.

Im Sommer kann es vorkommen das ich einen Zimmerventilator vor den außen
angebrachten Passivkühler stellen muss. Mein Netzteil hat 1500Watt und mich
noch nie im Stich gelassen.

Einen Satz Ram´s haben den Hitze Tot erlitten, ein Mainboard habe ich beim
übertackten geschlachtet (bei der Gelegenheit bitte mal lesen:
http://powerforen.de/forum/showthread.ph…ewpost&t=245413 ), und jede
Menge Festplatten abgeschossen.

Beide Pumpen sind wegen Wassermangels einmal ausgefallen und mussten instand
gesetzt werden. Ansonsten ist alles gut und schön. :)



Gruß