Tolle Fototour durch die Moskauer Wolke 1wolke

Dies ist eine Fototour durch das Moskauer DataSpace-Rechenzentrum, in dem unsere Geräte untergebracht sind. Wir zeigen die Sicherheitssysteme des Rechenzentrums, der Server-Racks und der Hardware selbst.

Achtung - es gibt viele Fotos unter dem Schnitt.



Seit 2012 bieten wir in 1loud Mietdienste für virtuelle Infrastrukturen an. Unser Projekt begann in St. Petersburg zu arbeiten, aber im Laufe der Zeit haben wir unsere Geografie erweitert. Heute befindet sich unsere Hardware in vier Rechenzentren: Xelent , Dataspace , Ahost und beCloud . Der erste ist in St. Petersburg, der zweite in Moskau, der dritte in Alma-Ata (Kasachstan), der vierte in Minsk (Weißrussland).

In all diesen Rechenzentren sind ungefähr die gleichen Geräte installiert. Und dann werden wir erzählen, wie es sich im Moskauer Rechenzentrum befindet.

Rechenzentrumsicherheit


Beginnen wir die Show mit dem Außenumfang des DataSpace-Rechenzentrums. Das Gebäude ist von einem fünf Meter langen, feinmaschigen Zaun mit rotierenden Stacheln und Minenschutz umgeben. Passagen zum Territorium sind durch Drehkreuze voller Höhe verschlossen. Neben ihnen befinden sich Sicherheitsposten.



Um "über den Zaun" zu gelangen, müssen Sie einen kontaktlosen Schlüssel vorlegen und am Checkpoint einen Ausweis ausstellen. Wenn ein Mitarbeiter seinen Ausweis (Reisepass) vergessen hat, muss er mit ihm nach Hause gehen.



Die nächste „Grenze“ ist die gepanzerte Schleusenkabine im Empfangsbereich. In den Kabinen befinden sich Zugangskartenleser und Handabdruckscanner.

Zwischen den Kabinen sehen Sie zwei Tier III-Schilder. Dataspace ist das erste Rechenzentrum in Russland, das drei Stufen der Tier III-Zertifizierung durch das Uptime Institute durchlaufen hat .



Auf dem Foto oben - der Retina-Scanner. Sie werden am Eingang aller Räume mit kritischer Ausstattung der technischen Infrastruktur des Bearbeitungszentrums installiert. Neben Scannern wird der Zugriff weiterhin über elektronische Schlüssel gesteuert.

Außerdem wird im gesamten Rechenzentrum eine Videoüberwachung durchgeführt. In dem gesamten Komplex wurden mehr als hundert Videokameras installiert, deren Aufzeichnungen mindestens fünf Jahre lang gespeichert wurden.



Das Rechenzentrum bietet die Möglichkeit, einen dedizierten geschützten Bereich (Zelle) zu organisieren.

Unsere Geräte befinden sich in normalen DataSpace-Racks. Wir vermieten Racks als Ganzes. Wir haben eine große Menge an Ausrüstung, daher sollten nur unsere Spezialisten Zugang dazu haben.

Strom und Kühlung


Eine der auffälligsten Nuancen in der Halle ist die Erdung. Die Sammelschiene ist aus Kupfer und mit einer externen Erdungsschleife verbunden .



Gemäß den Anforderungen des Rechenzentrums werden alle Geräte, für deren normalen Betrieb eine separate Erdungsleitung erforderlich ist, gemäß GOST 12.1.030-81 (System für Arbeitssicherheitsstandards) geerdet.



Die Arbeiten zum Anschluss der Geräte an das Stromversorgungsnetz und an die schützenden Erdungsbusse werden ausschließlich von Mitarbeitern des Rechenzentrums durchgeführt. Alle Drähte sind markiert.



Die zufällige Verteilung der Kabel führt zu einem Luftstromverlust, der zu einer Überhitzung der Geräte führen und diese beschädigen kann. Um eine Überhitzung (und die Einhaltung der Unternehmensstandards für die Qualität der durchgeführten Arbeiten) in DataSpace zu vermeiden, werden die Kabel in speziellen Fächern verlegt. Als Bonus trägt ein effektives Kabelmanagement dazu bei, den Energieverbrauch von Klimaanlagen zu senken.



Standardmäßig erhält jedes Rack zwei unabhängige geschützte Stromstrahlen. Stromkabel werden unter einem Doppelboden verlegt, dessen Höhe 60 cm beträgt. Der Doppelboden kann transformiert und die Anordnung der Platten geändert werden. Dies ermöglicht es bei Bedarf, Racks mit Geräten neu anzuordnen.



In den Computerräumen des Rechenzentrums sind kalte Korridore organisiert. Davon erhält das Gerät Luft zur Kühlung und bläst sie in Richtung des heißen Korridors. Der kalte Gang ist vom heißen getrennt, um ein Vermischen der Luft zu vermeiden und die Kosten für die Klimaanlage zu senken.
Der Energieeffizienzparameter des DataSpace-Rechenzentrums (dieser Parameter wird als PUE bezeichnet) beträgt übrigens 1,5. Dies entspricht dem Verhältnis der vom Rechenzentrum verbrauchten Gesamtleistung zur vom Eisen in den Racks verbrauchten Leistung. Zum Vergleich: Der durchschnittliche PUE in Europa beträgt 1,8.
Neben dem Kabelmanagement und den kalten Korridoren trägt die Freecooling-Technologie dazu bei, diesen DataSpace-Energieeffizienzindikator zu erreichen. Das Rechenzentrum schaltet im Winter die Kältemaschinen ab und kühlt die Maschinenräume aufgrund der kalten Luft von der Straße. Dies kann den Energieverbrauch erheblich senken und die Stromrechnungen senken.

Gestelle und Ausrüstung


Das Rechenzentrum verfügt über zwölf Serverräume mit einer Fläche von 250 Quadratmetern. Meter jeweils. Sie sind alle gleich und befinden sich im zweiten, dritten und vierten Stock. Jede Halle hat ungefähr 88 Gestelle.

Jeder Rechenzentrums-Client verfügt über eigene Schlüssel für Gerätegestelle. DataSpace-Mitarbeiter haben ein Duplikat. Wenn Sie also einen einfachen Vorgang mit Hardware ausführen müssen: Ersetzen Sie die Festplatte, wechseln Sie die Verbindung, konfigurieren Sie die Geräte neu. Es ist nicht erforderlich, Ihren Spezialisten zu entsenden. Sie können Ingenieure vor Ort danach fragen - dies ist eine normale Praxis, die im Rahmen der Kundenunterstützung für Rechenzentren bereitgestellt wird.



Auf dem Foto unten befindet sich ein Aufzugstisch, auf dem Server, Switches und andere Geräte bewegt werden. Ohne solche "Karren" kann das Gewicht eines einzelnen Chassis mit Scheiben mehrere zehn Kilogramm betragen. Wenn ein großer Eisenvorrat eingetroffen ist, können die Mitarbeiter des Rechenzentrums diese Wagen (und andere Arbeitsgeräte) zur Verwendung bereitstellen.



Als nächstes zeigen wir das Eisen selbst . Beginnen wir mit dem NetApp E2860-Speichersystem. Die maximale Anzahl unterstützter Festplatten beträgt 60 Stück. Bisher sind 30 Steckplätze belegt - es gibt 8 Terabyte-Laufwerke. Wir haben auch ein früheres Speichermodell - NetApp E2760.



Dies sind eher langsame Systeme, da sie als Kühlhaus verwendet werden - Backups sind vorhanden.



Auf der Rückseite der NetApp E2860 befinden sich die Controller und Netzteile.



Ein weiteres installiertes Speichersystem ist NetApp FAS2554 mit einem DS4246-Erweiterungsfach. Es befinden sich 24 SATA-Festplatten darin. Jeder von ihnen hat eine Kapazität von 4 TB. Dieser Speicher ist auch für Sicherungen und "langsame" Datenspeicher reserviert.



Cisco UCS FI 6296 - Switches des Cisco UCS-Komplexes. Dies sind die zentralen Geräte, die für die Verbindung aller Rack-Server mit 10-GbE- und Fibre-Channel-Netzwerken verantwortlich sind. Das System verfügt über 48 feste Ports und Steckplätze für drei Erweiterungsmodule, von denen jedes weitere 16 Ethernet-Ports hinzufügt. Gleichzeitig sind die Ports multifunktional - sie unterstützen die FCoE-Technologie (Fibre Channel over Ethernet).



Die Cisco UCS 5108-Serverkörbe mit den Blade-Servern B200 M3, B200 M4 und B480 M5 stellen eine Verbindung zum Cisco UCS FI 6296 her. Insbesondere verfügt der B200 M3 über zwei Intel Xeon E5-2690 v2-Prozessoren mit 10 Kernen und der B200 M4 über zwei Intel Xeon E5-2698 v4-Prozessoren mit 20 Kernen.



Dies zeigt die NetApp E2860, die oben im Rack installiert ist, und die beiden Cisco UCS 5108-Körbe unten.



Speicher NetApp AFF300, speziell für die Arbeit mit SSD-Laufwerken optimiert. Darüber befindet sich ein DS224C-Regal mit vierundzwanzig SSDs mit 7,6 TB.
Insgesamt kann das NetApp AFF300-System auf schnellen Solid-State-Laufwerken bis zu 30 PB Festplattenspeicher bereitstellen.
Das System wird von zwei Intel Broadwell-DE-Prozessoren mit 16 Kernen gesteuert. Ihre Frequenz beträgt 1,70 GHz. Jeder Controller verfügt über vier 32-GB-RDIMM-ECC-RAM-Module (dies sind insgesamt 128 GB). 120 GB sind für den Cache reserviert, und die restlichen acht sind für nichtflüchtigen NVRAM-Speicher bestimmt.



Auf dem Foto oben - NetApp FAS8040-Speicher mit Erweiterungsregalen DS2246. Dies sind Hybridregale mit 1,2-TB-SAS-Laufwerken. Die Arrays der FAS8000-Serie verfügen außerdem über Multiprozessor-CPUs von Intel und NVRAM. Sie garantieren eine Systemverfügbarkeit von mindestens 99,999%.

Dieses Speichersystem verwendet SSDs, die als Flash-Pool fungieren.



So sehen die Erweiterungsregale NetApp FAS8040 und DS2246 mit Patchkabeln auf der Rückseite aus.



Und schließlich befinden sich in unseren Racks Cluster-Switches NetApp CN1610. Sie werden verwendet, um die Controller FAS8040, FAS8080, AFF300 in einem einzigen Speichercluster (Clustered ONTAP) zu kombinieren.



Damit ist unsere 1cloud Cloud-Fototour abgeschlossen.

Wenn Sie Fragen zur Struktur und Architektur der Cloud haben, können Sie uns per E-Mail schreiben: support@1cloud.ru . Unsere Experten helfen und beraten Sie.



Einige Beiträge aus unserem Unternehmensblog:

Source: https://habr.com/ru/post/de430974/


All Articles