Anforderungen an die Stromversorgung des Rechenzentrums. A = W / V ... Ich muss etwas Dummes tun

12

Okay, unser Rechenzentrum berechnet uns keine Gebühren basierend auf unserer "Nutzung", nur auf der Anzahl der Ampere, die wir an unser Rack geliefert haben. Ich plane, im kommenden Jahr ein neues Rack für eine Servererweiterung einzubauen, die auf diesem Artikel basiert . Jeder Server verfügt über eine Menge Laufwerke und verbraucht wiederum eine Menge Strom.

Dieses Rack wird enthalten.

1 Cisco Router.

1 Glasfaserschalter

1 1U-Speichercontroller, Standard-Dell 850-Server.

11 3U-Speicherserver mit jeweils zwei 750-Watt-Netzteilen.

Also ... ich versuche zu berechnen, wie viele Verstärker ich theoretisch brauchen sollte. Ich habe noch keinen Beispielserver, um zu sehen, wie viel ein Server mit 3U - 45 Laufwerken benötigt. Ich nehme an, es werden zwei Netzteile benötigt, also können wir mit 1000 Watt ziehen. Viel für die Festplatten, viel für das Bordmaterial. 11 x 1000 Watt sind offensichtlich 11000 Watt Leistung.

A = W / V. W = 11000. V = 120 V. A = 91.

Hier ist mein Gehirn irgendwie ausgefallen. 91 Ampere Leistung sind Wahnsinn. (das meiste, das ich zu einem Gestell atm geleitet habe, ist 40, und sein Sitzen nur mit 60% Kapazität.

Und das bei nur 1000 Watt pro Server - wenn das Netzteil bei 1500 Watt für das System den vollen Strom zieht, ist das ungefähr 140 Ampere.

.... das klingt richtig oder bin ich nur verrückt? Sicher habe ich etwas falsch gemacht, 140 Ampere Kraft sind Wahnsinn.

**** Edit: Box ist eigentlich 4U, also werden hier andere Zahlen angezeigt, aber nicht viel.

grufftech
quelle
+1 für den Hinweis auf einen wirklich coolen Artikel.
Phoebus
Wurden Gehäuse für 3U 45-Laufwerke gefunden? Die Equalogic-Gehäuse basieren auf einem xyratex 4U 48-Laufwerkschassis IIRC. Alle anderen mir bekannten Lösungen für vertikale Laufwerke sind 4U oder 5U, nicht 3U.
Wazoox
Ja - 3U-Boxen gibt es nicht - ich habe beim Schreiben dieses Artikels nicht darauf geachtet, meine Frage war im Sinne der Leistungsberechnung bei maximaler Belastung immer noch relevant.
grufftech 20.01.10

Antworten:

10

Ihre Zahlen klingen im Allgemeinen so, als wären sie auf dem richtigen Weg. Eine Box mit zwei Festplatten und zwei Prozessoren wie ein HP DL380 benötigt im Durchschnitt etwa 350 bis 450 Watt ein Kilowatt pro Chassis. Dies führt zu zwei Problemen: Sie benötigen 4 x 32A-PDUs, um zwei Netzteile zu unterstützen, und Sie haben eine angemessene Wärmemenge von der Rückseite, wenn das Rack gereinigt werden muss. Ich vermute auch, dass Ihre Hosting-Firma darüber meckert und darauf besteht, dass Sie Ihr Kit stattdessen auf zwei oder mehr Racks aufteilen.

Das heißt, ich kann mir keine andere Möglichkeit vorstellen, diese Menge an Festplatten in diese Dichte zu bringen. Welche Marke / welches Modell haben die 3U-Boxen übrigens?

Bearbeiten - hast du die Gewichtsberechnung schon gemacht? Sie sollten das auch von ihnen ausführen, dieser Trottel wird ziemlich schwer sein.

Chopper3
quelle
Gute Punkte - ich weiß es wirklich zu schätzen.
Grufftech
Mistyped - seine 4U.
Grufftech
5

Nun, die Absicht von Dual-Netzteilen ist es, Redundanz und nicht zusätzlichen Strom zu liefern, so dass Ihre 750-Watt-Einheiten für mich untermaßig aussehen. Die Serverkonfigurationen, die Sie beschreiben, sind extrem dicht - 350-350 für den Basisserver + 45 * 10-15 Watt für die Laufwerke, und Sie sehen ein Kilowatt pro Server, und Sie sollten 1,2 kW-Netzteile einsetzen, die das mit ein bisschen laufen lassen der Kopffreiheit.

Sie müssen auch für die Laufwerke unbedingt eine Art Phased Spin-up durchführen. Der Startstromverbrauch der Laufwerke ist etwa 50% höher als der Spitzenstromverbrauch unter Betriebslast.

Was die Gesamtleistung angeht, sind diese Zahlen nicht so verrückt - das passiert, wenn man dicht wird. Ein Rack mit 4 vollständig bestückten Dell M1000E-Blade-Gehäusen verbraucht ungefähr 16 (+ -5) kW, was 130 A bei einer 120-V-Versorgung entspricht. Die Netzteile für diese Geräte liefern 2360 Watt bei 12 V, sodass die maximale Wechselstromaufnahme bei 2500 Watt liegt und Sie mindestens 3 benötigen, um das Gehäuse mit Strom zu versorgen. In der empfohlenen Konfiguration sind 6 Netzteile für Wechselstromkreise und mehrere Netzteilfehler vorgesehen.

Das zweite, was Sie besonders beachten möchten, wenn Sie dicht werden, ist die Kühlung des Designs. Bei diesen Dichten sind Sie verrückt, wenn Sie kein Hot / Cold-Gang-Layout bevorzugen, und das Rack-Kit muss dafür entwickelt werden. 20 Kilowatt sind eine Menge Wärme in einem 42-HE-Rack, und Sie möchten sicher sein, dass Sie sie mit einem gewissen Grad an Redundanz effizient abpumpen können. Wenn Sie dieses Rack nicht in die Arktis stellen, sollten Sie sicherstellen, dass Sie redundante [idealerweise Hot-Swap-fähige] Lüfter haben, die selbst bei Ausfall eines Lüfters (vorausgesetzt, Sie kühlen 1 kW pro Server und können überleben) etwa 150 Kubikfuß pro Minute rangieren können mit einem 20 Grad heißen :: kalten Differential

Letztendlich werden dies wirklich schwere Systeme sein. Ihre Servereinheit wird etwas im Bereich von 160 Pfund wiegen. Mit 11 davon und allem, was Sie planen, und dem Rack selbst wird das Ganze buchstäblich eine Tonne wiegen.

Das Backblaze-Konzept profitiert davon, dass es eine Komponente in einem integrierten Lösungsstapel ist, mit der jeder Server als Hot-Swap-fähige Einheit behandelt werden kann, wobei zusätzlich zur grundlegenden RAID \ PSU \ Fan-Redundanz in den Speichereinheiten selbst Redundanz im Stapel eingebaut wird. Auf diese Weise können sie relativ billige Komponenten verwenden und müssen sich nicht um das Austauschen ausgefallener einzelner Komponenten im laufenden Betrieb kümmern. Dies ist in der Regel ein weiteres Merkmal sehr dichter Systeme, und Sie möchten sicher sein, dass Sie mit diesem Ansatz leben können.

Helvick
quelle
3

Zahlen klingen für mich vernünftig. Wir haben mehrere Racks, die 150 Ampere mit 208 Volt betreiben. Eine Bestie eines Racks verbraucht derzeit mehr als 200 Ampere bei 208 Volt. Wie andere bereits erwähnt haben, prüfen Sie das Gewicht des Racks. Es wird schwer. Einige unserer Lagerregale wiegen über 1000 kg. Allerdings schwanken die Verstärker je nach Auslastung Ihres Servers. Dies kann von ungefähr 1 Ampere bis möglicherweise 8 - 10 Ampere mit einem Einschaltstrom von 40 Ampere über ein paar Millisekunden reichen. Ein paar Millisekunden reichen jedoch aus, um einige unangenehme Dinge zu erledigen, wenn Ihre Services für das Rack zu klein sind. Auch als ob Sie mehr darüber nachdenken müssten, brauchen Sie eine Power-Sequenzierung auf dem Rack, damit das verdammte Ding nicht versucht, alles auf einmal zu starten und wirklich Amps zu saugen.

Liam
quelle
+1 Wahnsinn, sehr beeindruckt.
Grufftech
2

Ich sehe, dass Ihr Speichercontroller ein Dell ist. Wenn Ihre Speicherserver ebenfalls Dells sind, ist der Dell Data Center Capacity Planner möglicherweise hilfreich. Es gibt Hinweise zum Stromverbrauch sowie zum Gewicht!

hmallett
quelle
Dell-basierten Server ausschließlich, weil sie uns die besten Angebote atm geben. könnte eine benutzerdefinierte Box für alles sein, was mich interessiert.
grufftech 20.01.10
0

Die Berechnungen stimmen, basierend auf der maximalen Nennleistung der Netzteile.

Sie werden wahrscheinlich feststellen, dass jeder Server während seiner durchschnittlichen Nutzung tatsächlich zwischen 0,5 A und 3 A zieht. Der Einschaltstrom kann bis zu 40 A pro Server betragen, ist jedoch nur für eine sehr kurze Zeit, wie z. B. 20 ms, verfügbar.

Ich vermute, Sie würden näher an 20-35A nach dem Rack suchen. Aber ich könnte mich irren.

In einem weiteren Punkt finde ich es interessant, jemanden zu sehen, der die Backblaze-Methode von diesem Papier verwendet. Es würde mich interessieren, wie es ausgeht!

Tom O'Connor
quelle
0

Klingt vernünftig. Zum Vergleich: In den meisten Racks verwende ich zwei 38-KVA-PDUs (eine mit Diesel- und eine mit USV-Unterstützung) (dreifacher 400-V-Phaseneingang, jede Phase 32 A). Denken Sie daran, dass es sich bei der Nennleistung der Netzteile um Nennleistungen handelt und dass das System nur mit einem Netzteil mit Saft betrieben werden kann.

pfo
quelle
1
Dieses System ist nicht für den Betrieb mit nur einem Netzteil ausgelegt. Tatsächlich werden beide Netzteile verwendet, um verschiedene Bereiche des Systems mit Strom zu versorgen. (Wir sprechen über 46 Festplatten in einem Gehäuse)
grufftech
PFO, Ihre Zahlen scheinen für die USA richtig zu sein. (Die Firma, für die ich arbeite, stellt Software für die Analyse elektrischer Lasten her, und das sind sehr bekannte Zahlen.) Ihr Problem wird sich auf die Kühlung und die Versorgung mit Twin 32A-3-Phase beziehen. :)
Tim Williscroft
@GruffTech: Also sind die Regale überhaupt nicht redundant ?!
pfo
Wenn das Backblaze-Design die Regale als auszutauschende Einheit behandelt, wird dies im Artikel erwähnt, sodass es sich nicht um eine Allzweck-Speicherlösung handelt, sondern um einen Teil eines größeren Stapels mit Redundanz, der durch Streifen über mehrere Regale bereitgestellt wird.
Helvick
0

Im Folgenden finden Sie einige Optionen, mit denen Sie Ihre Anforderungen besser einschätzen können.

Im günstigen Fall können Sie an jedes Gerät einen Kill-A-Watt anschließen und einige Messungen in der realen Welt durchführen. (Achten Sie darauf, dies nicht in einem LAB zu tun, da ein geladener Server eine viel höhere Strombelastung aufweist als ein inaktiver Server.)

Ein Server erhöht seine Last häufig beim ersten Start. Merk dir das. (Wenn es einen Stromausfall gibt und alles auf einmal aufleuchtet, kann es zu einem Spannungsspitzen kommen.)

Alternativ können Sie eine PDU wie einen APC 7901 (oder ein ähnliches Gerät) mit einer LED-Anzeige des aktuellen AMP-Verbrauchs erwerben. (Der 7901 ist nur ein 20-Ampere-Modell)

Unsere Cisco Top-of-Rack-Switches und Glasfaser-Switches gehen selten über 80 W hinaus. * YMMV

Ihr DC bietet möglicherweise nur Optionen für 20 und 30 Ampere an.

Ihr Gleichstrom versorgt Sie optional auch mit 208V.

Ein Witz: Ich denke, jeder, der für gelieferte oder verbrauchte Energie belastet wird, sollte einige Raumheizgeräte anschließen, um sicherzustellen, dass Sie alles verwenden, wofür Sie bezahlen. :)

Ich hoffe das hilft.

Joel K
quelle
Ich wette, die Autoren des Blogs können Ihnen den tatsächlichen Stromverbrauch mitteilen ...
Joel K
0

Die Angaben auf dem Typenschild der IT-Ausrüstung sind Sicherheits- / Zulassungsangaben, und Sie werden überbaut sein, wenn Sie sie zum Entwerfen von Dingen verwenden. Fragen Sie Ihren Händler nach dem "ASHRAE Equipment Thermal Report" für das betreffende Gerät. Jeder größere Anbieter wird es haben.

Dieser Bericht gibt Ihnen einige Zahlen, die realistischer sind.

duffbeer703
quelle