Server: 12 Kerne # 24GB Ram und max. 16x Platten auf 3HE
Willkommen in der Mk-Community › Foren › Hardware › PC / Server – Systeme › Server: 12 Kerne # 24GB Ram und max. 16x Platten auf 3HE
- Dieses Thema hat 28 Antworten sowie 6 Teilnehmer und wurde zuletzt vor vor 13 Jahren, 11 Monaten von
industrie_freak aktualisiert.
-
AutorBeiträge
-
-
30. Januar 2011 um 23:01 Uhr #498540
industrie_freak
TeilnehmerIch stelle ich meinen Daten und Anwendungsserver vor:Basisdaten:AMCC 3HE, 3x650W, 16-Fach LFF Backplane SATA mit InfinibandSupermicro H8DM3-2 + IPMI Karte2x Hexacore LV 2419EE Opteron (80W ACP für 12 Kerne) 24GB Ram (4x4GB, 4x2GB)LSI onboard SAS mit 2x147GB 10K SFF Raid 1LSI 8888ELP SAS mit 8x2000GB, Raid 6HP P800 BBWC SAS (16Port, 512MB) (noch)keine Platten1x Dual FC-Karte HP, 2x2Gbit1x Quad Gbit Karte Intel (EXPI9404PT), mit 2x onboard = 6xGbit TrunkOS: Win 2008 R2 Ent.Gesamtkosten ohne Software (und ohne die Festplatten) etwa 2400EUR**bereits umgebaut auf neue Lüfter, 500Watt FSP 80+ PSUDa ich z.zt noch auf 2 Festplattenkabel warte, ist der Server nicht in Betrieb. Da noch mehr HW im Rack ist folgen in den nächsten 3 Wochen noch umbauten im Rack und am ServerErste Ergebnisse mit einem billigen Strommessgerät waren leicht verwirrend (sehr große Sprünge) – deswegen leihe ich mir Ende Feb. was gescheites aus (Hameg)Bilder kurz vor der Inbetriebnahme:
Vorhaben:3x 80mm Delta tauschen gg. etwa 12% schwächere Lüfter (dafür leiser)3x 40mm Sunon tasschen, Stärke bleibt gleich, leiser2x 60x60mm Doppel Sunon, 8% schwächer, leiseraußerdem entfernen der Lüftergitter (oder was auch immer diese breiten Stege darstellen sollen) an den Hotpluglüftern.Umbau der CPU Lüfter auf 80mm und Anpassen eines Strömungstunnels, zur besseren Kanalisierung der Luftströme im GehäuseGGf. (steht noch nicht 100% fest) Umrüstung auf Wakü für CPUs, Controller, das red. Netzteil. Bau einer Kühlereinheit zur Ontop Montage auf dem Rack. GGF. Anbindung an die Notklimatisierung (Klimagerät) für sehr heiße Sommertage—-Andere Projekte:(Werde ich die nächsten Wochen ausführlich ablichten und beschreiben)Firewall:MSI Fuzzy Sockel 479 (M) Mini-ITX Mainboard, 2x PCIe Gbit LAN, 1xPCIe x16, 1x PCIIntel Core Duo ULV CPU U2500, 2×1.2Ghz ~10W TDPIEI Dual LAN Gbit Karte (Intel Chipsätze) über Riser1x2GB DDR2 LP-Dimm in BGA Bestückung1x90W Mini ITX Bicker PSUin einem OEM Gehäuse (2HE, 3x80mm, 1x Radial 65mm)ESXI:Supermicro 2HE, Dual So771, red. 650W PSUIntel 5400P Chipsatz2x Intel Xeon LV Xeon, L5420, 8×2.5Ghz8x4GB FB-DimmsICP 5085BL LP-Controller, SAS mit BBU2x73GB + 2x147GB SAS 15K, einmal Raid 0 einmal Raid 11x Intel LP Gbit PCIe x4 + 2x Gbit onboardVTL-Server:IEI Nano SBC, EPIC Nano-9453, Sockel 479 (945HME)Intel U2500 ULV CPU (2×1.2Ghz)1x2GB LV SO-Dimmgeplant 1xPC/104+ Erweiterung mit 1x MiniPCI, 2x SATA (Raid)geplant 4x500GB RE4 oder 4x500GB Seagate Constellation SFFggf. 2x PC/104+ mit 2x SATA für BD-Brenner oder Tape-LW (LTO-4)TK/FAX:umgebauter Thinclient mit Via C7 nano BGA Board512MB DDR2 SO-Dimm2GB Industrie Flash (DOM) mit Asteriskgeplant: Einbau in ein 1HE Gehäuse inkl. Netzteil (5V, 4A)—————————————————Im OG bzw. im DGHaustechnikserverIndustrie Mini-ITX Mainboard mit Intel Z530 AtomCPU2x MiniPCIe, SATA Raid, CF, 2x SD I/O, passiv gekühlt1x 2048MB DDR2 SO-DIMM Modulgeplant 1x 32GB SSD (Kingston), aktuell noch 1x 40GB 1.8″ SATAabsprecktes WinXP Pro + IP-Symconmit Busanbindung zu FS20/Homematic/Zigbee/KNX/DMX
-
31. Januar 2011 um 12:01 Uhr #878665
littledevil
TeilnehmerFettes Teil :respekt:
Falls Deine KErne nicht voll ausgelastet sind, laß sich einfach mal BOINCen :d:
industrie_freak;444505 said:
2x Hexacore LV 2419EE Opteron (80W ACP für 12 Kerne)Für 12 Kerne Top! Wieviel kommt dann effektiv fürs System heraus?
-
31. Januar 2011 um 12:01 Uhr #878668
industrie_freak
Teilnehmerlittledevil;444544 said:
Fettes Teil :respekt:
Für 12 Kerne Top! Wieviel kommt dann effektiv fürs System heraus?Wieviel Kerne ich nutzen werde? Oder Wieviel die Kiste an Saft aus den Dosen zieht (sind ja 2+1 Netzteile)?
Es sollen 3 Server auf der Kiste laufen unter 2008 als Basis, 2x davon in einer VM.
Die richtige VM Kiste ist ja eine andere deswegen sinds weniger VMs geworden als ursprünglich geplant.Aktuell spiele ich mit dem gedanken das Netzteil komplett gegen ein neues zu tauschen – ich hab jetzt mal ein 600Watt 80plus silver bestellt ich denke der Stromverbrauch dürfte sich schon unterscheiden, selbst wenn es blos 50Watt sind, kommt im Jahr der Anschaffungspreis des neuen Netzteils zusammen.
-
31. Januar 2011 um 13:01 Uhr #878671
littledevil
Teilnehmerindustrie_freak;444547 said:
Wieviel Kerne ich nutzen werde? Oder Wieviel die Kiste an Saft aus den Dosen zieht (sind ja 2+1 Netzteile)?Beides 😀
Warum so ein riesiges 600W NT? zieht die Kiste so viel? ODe rhaben die 10 Platten einen so hohen anlaufstrom / fahren alle gleichzeitig hoch?
Ein Enermax PRO87+ 500W mit 80 PLUS Gold dürfte doch auch genügen!?
-
31. Januar 2011 um 13:01 Uhr #878673
industrie_freak
Teilnehmerlittledevil;444550 said:
industrie_freak;444547 said:
Wieviel Kerne ich nutzen werde? Oder Wieviel die Kiste an Saft aus den Dosen zieht (sind ja 2+1 Netzteile)?Beides :DWarum so ein riesiges 600W NT? zieht die Kiste so viel? ODe rhaben die 10 Platten einen so hohen anlaufstrom / fahren alle gleichzeitig hoch?Ein Enermax PRO87+ 500W mit 80 PLUS Gold dürfte doch auch genügen!?
In das Case passt kein normales PS/2 Netzteil – das hättest eigentlich sehen müssen (Oder zumindest rechnen können, da ein normales _Netzteil idr. Hochkant höher ist als 132mm (3x44mm). Ich habe also nur die Wahl ein 2HE oder 3HE Netzteil zu nehmen, wenn ich nicht ein externes basteln will..
Und da ist die Auswahl sehr begrenzt – da ich eine gewisse Ampzahl auf der 12V Schiene brauche, und da kommt leider nur das eine Netzteil in Frage – alles anderen haben noch mehr Wattage (800 bzw. 1100)Ich hatte die Kiste seinerzeit mal mit einem 480Watt zum testen, das ging solange gut, wie ich auf die maximale Plattenanzahl verzichtet habe (Anlauflast ist ein großes Thema)Ich muss mal heute abend probieren, ob das eine 400Watt EPS Netzteil, dass ich noch da habe, dass annährend die Leistung hat auf der 12V Schiene geht, dann könnte ich auch ein kleineres nehmen..
-
31. Januar 2011 um 14:01 Uhr #878681
industrie_freak
TeilnehmerObi Wan;444557 said:
ansonsten hätte ich noch ein nagelneues 470 Watt Netzteil über:Wenn ich das vorhandene neue Netzteil schon tausche, dann gegen eins was auch die 80Plus Zertifizierung erfüllt und leiser ist.
Ich habe schon meine Wahl getroffen, da 1. 80 plus und 2. ein 803r vorne und ein 80mm Lüfter hinten in dem Teil ihren Dienst verrichten – einen davon kann man sogar tauschen oder abnehmen (nur aufgesteckt) -
31. Januar 2011 um 14:01 Uhr #878688
industrie_freak
TeilnehmerAudiodude;444563 said:
Hallo industrie_freak,kann man zur Reduzierung des Anlaufstroms die Platten nicht nacheinander (staggered) anlaufen lassen? Ist doch ein Server, der sollte sowas doch beherrschen!
Greetz Audiodude
Als ich den Test damals gemacht habe, war noch ein anderer Raidcontroller (Perc) im System, mit dem neuen habe ich noch keine Tests gemacht.
-
31. Januar 2011 um 14:01 Uhr #878678
Obi Wan
Administratoransonsten hätte ich noch ein nagelneues 470 Watt Netzteil über:http://www.meisterkuehler.de/forum/biete/26826-verkaufe-v-etasis-efap-462-netzteil-460-watt-neu-ungenutzt-rechnung-1-11-09-a.html
-
31. Januar 2011 um 14:01 Uhr #878689
industrie_freak
Teilnehmerlittledevil;444562 said:
Um welches 80plus Silver handelt es sich?Ist ein Supermicro Ersatzteil (eigentlich für Gehäuse von denen gedacht…)
Heute abend teste ich nochmal ob nicht auch weniger Leistung genügt.
Dann wäre die Asuwahl größer und ich könnte auf was anderes umspringen:A. https://webshop.schneider-consulting.it/index.php?a=4744&
B. http://business.lieske-elektronik.de/artikel_Joyance-JOY-V2H-5400V-Joy-PC-Netzteil-2-3U-400W-ATX-EPS-Zippy__471073.htm?pid=11
C.http://www.surestar.de/html/de/2/artId/__2506/gid/__2009020390203290/article.htmlDas (A) FSP Netzteil gefällt mir immer noch am besten – und wäre eine gute Alternative zu dem noch recht teurer SM (das etwa doppelt so teuer ist wie das FSP)
-
31. Januar 2011 um 14:01 Uhr #878683
littledevil
Teilnehmerok, das ist ein Argument 😀 hatte bisher nur 4HE im einsatz…
Da paßt dann ein normales ATX…Um welches 80plus Silver handelt es sich?
-
31. Januar 2011 um 14:01 Uhr #878684
Audiodude
TeilnehmerHallo industrie_freak,
kann man zur Reduzierung des Anlaufstroms die Platten nicht nacheinander (staggered) anlaufen lassen? Ist doch ein Server, der sollte sowas doch beherrschen!
Greetz Audiodude
-
31. Januar 2011 um 19:01 Uhr #878747
industrie_freak
TeilnehmerSO, ich hab jetzt nochmal alles getestet, ohne Optimierungen zieht das Teil mit dem n+1 Zippy Netzteil so wie oben jedoch mit 12x 3.5″ + 4x 2.5″, 307Watt (aus allen 3 Steckdosen zu selben Zeit) – wobei die 4x 2.5″ Platten noch in einem externen BackplaneGehäuse mit sep. Netzteil hängen..Da reicht denke ich das 500Watt FSP absolut aus – das gefällt auch meinem Geldbeutel.
-
31. Januar 2011 um 20:01 Uhr #878762
Obi Wan
Administratorwow, nur 300 Watt für die Hardware finde ich okay
-
31. Januar 2011 um 20:01 Uhr #878758
littledevil
Teilnehmerindustrie_freak;444629 said:
307Watt (aus allen 3 Steckdosen zu selben Zeit)307 alles zusammen oder jeweils?
-
31. Januar 2011 um 20:01 Uhr #878763
industrie_freak
Teilnehmerlittledevil;444641 said:
industrie_freak;444629 said:
307Watt (aus allen 3 Steckdosen zu selben Zeit)307 alles zusammen oder jeweils?
für alles zusammen
-
31. Januar 2011 um 21:01 Uhr #878771
littledevil
TeilnehmerBin mal gespannt, was die kiste mit nem neuen NT braucht.
<250W sollten eigntlich drinn sein -
1. Februar 2011 um 12:02 Uhr #878808
industrie_freak
TeilnehmerHisN;444691 said:
Ich frag mich bei solchen genialen Server-Gehäusen immer wo man die „bezahlbar“ herbekommt. Kann sich doch kein Normalsterblicher ein 1000 Euro-Gehäuse mit passendem MB (geht ja auch nicht jedes) und entsprechenden Backplanes leisten *seufz*Musst ja nicht gleich mit sowas großem anfangen. Der Vorgänger von dem war ein Server mit 8x BP, der Vorgänger von dem war einer mit einer 4-Fach und davor wiedderum ein NAS Eigenabu mit Intel Atom 230 und 2 Platten. Int Teilen steht der Kram immer noch bei mir, da nicht jedes System komplett einen abnehmer gefunden hat, oder ich die Teile anderweitig in anderen Systemen zum Einsatz gebracht hab.Ich habe für viele Freunde und Bekannte Server zusammengestellt – wenn man es richtig macht, geht das auch für kleines Geld.PS:bei Ebay stehen z.zt 3HEs von Chenbro drin.. samt 12-Fach Backplane und Netzteil für 200EURDas ist dann zwar kein 3Ware (AMCC) aber immer noch gute Qualität.
-
1. Februar 2011 um 12:02 Uhr #878807
HisN
TeilnehmerIch frag mich bei solchen genialen Server-Gehäusen immer wo man die „bezahlbar“ herbekommt. Kann sich doch kein Normalsterblicher ein 1000 Euro-Gehäuse mit passendem MB (geht ja auch nicht jedes) und entsprechenden Backplanes leisten *seufz*
-
1. Februar 2011 um 18:02 Uhr #878849
Obi Wan
AdministratorIch finde die Chenbro 19″ Gehäuse schon sehr gut, wenn sie auch teuer sind …
-
2. Februar 2011 um 5:02 Uhr #878903
drdope
TeilnehmerObi Wan;444743 said:
Ich finde die Chenbro 19″ Gehäuse schon sehr gut, wenn sie auch teuer sind …Sind die wirklich teuer?Imho sind die Chembros noch rel. preiswert im eigentlichen Sinne des Wortes.Bei Einsatzszenarios wo jede Minute Downtime und Technikerzeit richtig Geld kosten, machen sich solche Gehäuse schnell bezahlt (Hot-Swap-HDDs -lüfter, -NTs, schraubenloses, öffnen des Gehäuses etc….@home kommen solche Szenarien halt nicht zum tragen, da schaut es dann teuer aus, aber dafür sind die Dinger halt auch nicht gedacht.Wenn man sich so was im Rahmen seines Hobbys gönnt, bezahlt man halt sehr viel „Nice-to-have“-Kram, der aber eigentlich nicht notwendig ist (aber was ist schon wirklich notwendig, siehe Maslowsche Bedürfnispyramide)btw fettes „Serverchen“, da traure ich fast wieder meinen alten Rack@home Zeiten nach…:)
-
2. Februar 2011 um 7:02 Uhr #878905
littledevil
Teilnehmer@drdope Bei vielen steht die Pyramide auf der Spitze :fresse:Wenn man bedenkt, wieviel allein Rahmen für 12 Platten kosten (auch ohne Hot-Swap), dann sind 200 EUR sehr günstig bzw. das Gehäuse gibt es gratis dazu…Über neupreise reden wir besser nicht :DDie 19 Zoll geschichten finde ich etwas unhantlich – da weiß ich agr nciht wo ich die unetr bringe. Früher hatte ich in meinem Büro einen fetten 19 Zoll schrank bzw. im Flur – beim letzten umzug hab ich den dann verkauft. Der Transport hätte einiges gekostet da sau schwer und sperrigP.S. am Chenbro RM312 stären mich die 4x 80er – 92er würden auch passen, bzw. fast 3x 120erMit externer Wakü wäre das RM11704B noch interessant
-
2. Februar 2011 um 9:02 Uhr #878916
industrie_freak
TeilnehmerMir sind jetzt in den letzten Jahre schon viele 19″ Gehäuse/Servergehäuse in die Hände gefallen, bzw. ich hatte viele in den Händen. Das AMCC ist schon sehr weit oben anzusiedeln – im Vergleich zum Chenrbo sehe ich eindeutig die Verarbeitung des AMCCs bei Weitem besser ausgeführt als beim Chenbro. Mit einem Neupreis von ich glaub 1500EUR ist das AMCC im direkten Vergleich etwa gleich teuer zu den vergleichbaren Serien anderer Hersteller.
Servergehäuse (richtige Servergehäuse) sind alle wenn sie neu sind teuer (wenn man als Endkunde bzw. Normaluser an die Sachen herangeht)Ich bin eigentlich bis auf ein paar Sachen mit dem AMCC zufrieden
1. die 40er Lüfter sind schwachfug (da hätte wirklich auch ein vernüftiger 92er gepasst
2. die 80er Lüfter hätte man auch durch 92er ersetzen können
3. die Lüftergitter – oder was auch immer diese fetten Metallresete darstellen sollen – hätte man auch so wie bei den Hecklüftern ausführen können – nämlich mit richtigen Gittern
4. Ein mitgelieferter Luftkanal wäre praktisch gewesen (so wie Supermicro, Intel macht)
5. Ein bisschen mehr Platz an der Kabeldurchfühtung, MB=>BackplaneAnsonsten bin ich zufrieden mit dem Teil.
-
3. Februar 2011 um 11:02 Uhr #879043
industrie_freak
Teilnehmerso… ich hab jetzt mal ein 400Watt 80+ zum testen geordert, ggf. reicht das sogar aus. Ist nächste Woche hier.
-
24. Februar 2011 um 18:02 Uhr #881290
industrie_freak
TeilnehmerJetzt hatte ich Zeit das ganze zu testen inkl. SAS Platten am Netzteil sind es jetzt noch 214Watt.Somit reicht auch in Zukunft ein 400Watt Netzteil absolut aus…
-
25. Februar 2011 um 16:02 Uhr #881359
littledevil
Teilnehmer214W Peak Vollast?
-
4. März 2011 um 21:03 Uhr #882124
industrie_freak
Teilnehmerlittledevil;447401 said:
214W Peak Vollast?unter den gleichen Bedingungen wie bei den Vorherigen Messungen.
Jetzt mit dem neuen und endgültigen FSP Netzteil sank die gemessene Leistung nochmal um rund 30Watt.
Sobald das System komplett läuft mach ich mal eine Lanzeit Messung mit Vollauslastung durch einen Benchmark über 24h. -
5. März 2011 um 12:03 Uhr #882152
littledevil
TeilnehmerNa das hat ja richtig was gebracht :d:
-
5. März 2011 um 15:03 Uhr #882192
industrie_freak
TeilnehmerJop. Jetzt folgt noch der Rackumbau, und der Umbau der Server.Bei dem oben, entferne ich den Mittelteil mit den Lüftern (die zum Teil ineffektiv waren und igentlich nur lärm machten)Der Mittelteil wird umgebaut und die 3×80 und die 3x40er fliegen zugunsten von 2×80 und 2x120mm raus. Die supermicro Kühler finden ebenfalls ihren weg nach draußen um Platz für 2 Waküs zu machen, derzeit bin ich noch am Überlegen ob es sich lohnt für den Raidcontroller nen Chipsatzkühler zu holen (wird so immerhin auch schon rd. 54 Grd heiß)Die IMPI Karte ist wohl defekt, jedenfalls hängt sich erst die Karte und dann der Server auf, geht also mal in die Garantieabwicklung zu SM…
-
10. März 2011 um 21:03 Uhr #882924
industrie_freak
TeilnehmerSo, es gibt ein Update:
1. Testlauf mit Wakü erfolgreich (Dual Radi, eheim 600, 2x zern)
2. IMPI-Karte nicht defekt, hängt wohl mit Boardrev. CPU-Rev und Firmware der Karte zusammen, nach Kontakt mit SM und neuer Firmware bisher 48h ohne Probleme3. Es gibt inkompalibitäten mit dem Ram – bestimmte Kostellationen versursachen Abstürze, ich taste mich grad ran – welcher Rambaustein Probleme vursacht.
4. Ich habe mir u.a für den Umbau aller Systeme auf „Leise“ und die Verteiler Lüfter und Zubehör besorgt:
5. Der TV-Server ist nun komplett inkl. 65W Passiv PSU
1x 500GB AV-25 24/7 Platte
2x2GB DDR3
2x92mm Silent Front
=> Falls einer ne Idee hat wo ich ne Leerblende fürs ATX Netzteil herbekomme, bin ich dafür offen, noch mehr Basteleien mit Lochblech möchte ich umgehen (mir fehlt einfach die Zeit)
Ich konnte nur Quellen finden, wo es nicht mehr lieferbar ist.6. Ich habe mir eine passende Blende für den SAS Controller (es lebe ein def. SCRU42L) passend mit Schüsselfeilen zurechtgefeilt
7. Meine Zentrale Wakü auf dem Dach des Racks nimmt in der Planung langsam Formen an…
-
-
AutorBeiträge
- Du musst angemeldet sein, um auf dieses Thema antworten zu können.