
Am wichtigsten ist, dass hier nach dem Fitnessstudio heiße Feuchttücher serviert werden, wie in japanischen Restaurants. Das hat nichts mit dem technischen Teil zu tun, ist aber menschlich nett.
Und dies ist eine signierte Gitarre von Paul McCartney, und ja, sie hängt am Eingang zum Fitnessstudio:

Dieses Rechenzentrum hat eine bestimmte Stimmung.
Es sieht alles aus wie ein riesiger Hangar im Industriegebiet in der Nähe der U-Bahnstation Otradnoye. Die Höhe des Hangars beträgt 14 Meter, im Inneren befindet sich ein Rechenzentrum mit einer Höhe von 9 Metern. Der verbleibende Raum spielt die Rolle eines Wärmeisolators, der die lokalen Eigenschaften der Kühlung beeinflusst. Das Gebäude wurde so gewählt, dass es nicht auf die Straße ging (laut Zertifizierungsprotokollen ist es unmöglich, ein hohes Niveau zu erreichen, wenn man mit dem LKW ins Fitnessstudio kommt, die Wand rammt, anscheinend gab es Fälle), hatte zwei verschiedene Ankunftswege und war relativ nahe an der U-Bahn. Die MCC-Station wurde in der Nähe eröffnet, aber die Straße führt durch so lustige Orte ...
Kanarienvogel. Wir mögen hier immer noch alles, daher ist die Geschichte insgesamt positiv. Aber ich schwöre, wenn etwas schief geht, werden wir die Ersten sein, die davon erzählen. Nun, oder entfernen Sie diesen Absatz einfach aus dem Beitrag, wenn wir durch die NDA verbunden sind.
Welche Art von Rechenzentrum IXcellerate
Wir haben eine Technoserv-Cloud. Dies ist eine natürliche Cloud für russische Kunden, in der es Segmente gibt, die von PCI DSS zertifiziert sind und für "schwere" PD- und Regierungsinformationssysteme klassifiziert sind. Es gibt auch gewerbliche Kunden in der Cloud, die in Russland S3- und AWS-API benötigen. Bis zu diesem Jahr haben wir einen Service aus dem DataPRO-Rechenzentrum bereitgestellt, über den es bereits eine
Kurzgeschichte gab .
Unabhängig davon, wie steil das Rechenzentrum ist, benötigen Sie natürlich immer ein zweites, falls ein Meteorit das erste trifft. Geoverteilte Website - der Schlüssel zu Gesundheit und langem Leben.
Wir haben den zweiten Standort genauso sorgfältig ausgewählt wie den ersten. Wir brauchten eine T3-Benutzeroberfläche (genauer gesagt Vorschriften), die Fähigkeit, mit PCI DSS (dh unserem eigenen Zertifikat für den physischen Schutz des Rechenzentrums) zu arbeiten, und eine Vielzahl anderer Funktionen. Als Ergebnis erreichten wir das IXcellerate-Rechenzentrum - das, in dem Orange-Stände in einer der Hallen eingemauert sind und * eine sehr große Spielefirma * betrachten. Es gibt große Banken und staatliche Unternehmen, Reuters und Nestle. Kommersant schrieb, dass Apple und Booking for Persdans in Russland diesen Ort ebenfalls gewählt haben. Wenn etwas fällt, haben sie im Allgemeinen nur einen Deckel. Das heißt, die Motivation, alles richtig zu machen, ist gut genug.
Das zweite Merkmal ist, dass der Anführer kein Anfänger ist. Weit entfernt von einem Anfänger. Guy Wilner ist ein Unternehmer aus England. Er hat zum ersten und nicht zum zehnten Mal Rechenzentren gebaut. Vor dem Projekt besaß er ein eigenes Netzwerk von 14 Rechenzentren in Westeuropa und verkaufte es dann an Equinix (den Rechenzentrumsbetreiber Nr. 1 der Welt). Danach beschloss er, das Abenteuer zu wiederholen und ein riesiges Rechenzentrum in Brasilien, Russland oder der Türkei zu eröffnen. Seine Frau und seine Kinder ließen ihn nicht nach Brasilien (weil er zu Hause gebraucht wurde), und in Russland traf er Cliff Gauntlett. Dies ist eine legendäre Person in Runet auf dem Gebiet der Telekommunikation: Er war einst der Vizepräsident der berühmten Golden Telecom und ROL - vielleicht haben Sie angefangen, über ihre Internetzugangskarten online zu gehen. Also wollte er auch ein riesiges Rechenzentrum bauen. Und es sogar geschafft, ihn zu Lebzeiten zu fangen.
Warum erzähle ich das alles? Das Rechenzentrum wurde von einem britischen Unternehmer mit guten europäischen Verbindungen gebaut, sodass europäische Kunden sofort ins Haus kamen. Dies bedeutet eine sehr klare Berichterstattung über alle Transaktionen, die eine gewisse Sicherheit dafür gibt, dass die Prozesse und Vorschriften im Rechenzentrum vollständig implementiert sind.
Das Rechenzentrum wurde in Teilen gebaut und startete den Maschinenraum hinter dem Maschinenraum. Die erste Phase bestand aus 220 Racks (sie wurden 2012 gebaut und Mitte 2013 in Betrieb genommen). Der zweite Maschinenraum - 515 Racks (1040 Quadratmeter, unsere ersten Server sind da) und die dritte Phase (wo unser Kern ist) - 1100 Rack-Sitze (das sind 2500 Quadrate).
Drei Maschinen sind unabhängig voneinander, es handelt sich jedoch nicht um drei verschiedene Rechenzentren, da ein Teil der Knoten gegenseitig reserviert wird. Die ersten beiden sind von IBM L3 zertifiziert, die dritte ist Uptime TIER III zertifiziert. Kurz gesagt, sie sind fast gleich und der Unterschied auf Projektebene besteht beispielsweise darin, dass Sie für die Benutzeroberfläche dedizierte Parkplätze für Ingenieure, physische Barrieren für Autos und einen Feuerwiderstand von 45 Minuten (Fenster in der Benutzeroberfläche) gegenüber einer Stunde (IBM) benötigen. verschiedene Türgrößen und so weiter.

Der Masterplan wurde von Arup erstellt. Die Anlage verfügt über ein Arup-Zertifikat für die beste Lösung im Bereich Kühlung und Stromversorgung. Dies liegt daran, dass das Rechenzentrum kommerziell ist: Je niedriger der PUE, desto billiger ist der Betrieb. Daher wurde alles in Teilen eingeführt (das heißt, keine Ausrüstung war im Leerlauf, der Ingenieur wurde gekauft, als sie skaliert wurde), während es für jedes Kilowatt einen Kampf gab. Jetzt liegt der PUE je nach Jahreszeit zwischen 1,15 und 1,4. Das Rechenzentrum beherbergt eine ganze Reihe chinesischer Kunden, für die diese Zahlen aufgrund ihres ökologischen Ansatzes und des Stromverbrauchs nur Platz sind. Sie haben einen regulären PUE, der bis zu zwei erreichen kann.
Zum Zeitpunkt der Inbetriebnahme betrug das Kundengleichgewicht etwa 50/50 im In- und Ausland. Zu dieser Zeit haben sich alle bekanntermaßen unter das Gesetz zum Schutz personenbezogener Daten gestellt, und infolgedessen gab es eine erhöhte Nachfrage nach Rechenzentren auf dem russischen Cloud-Infrastrukturmarkt (genau das tun wir) (hier mussten Cloud-Anbieter angesiedelt sein).
Hier gehen jetzt immer mehr Unternehmen aus dem Ausland hin, denn hier gibt es einen bedeutenden Kunden - den ausländischen Anbieter Orange, der für viele sowohl ein Lebenszeichen als auch ein Unternehmensstandard ist. Der dritte Maschinenraum wurde von der Goldman Sachs Group finanziert, was das Projekt in den Augen ausländischer Führungskräfte zuverlässiger macht. Rechenzentren ändern sich nicht jedes Jahr, daher ist es wichtig, dass sie 10 Jahre vorausdenken.
Angesichts der Fülle externer Kontakte kommuniziert der First-Line-Support schriftlich auf Russisch, Englisch und Chinesisch. Alle Inschriften sind auf Chinesisch vervielfältigt:

Dank Guy besteht das Rechenzentrum aus zwei Rechenzentrumsallianzen - europäischen und asiatischen. Es ist wie bei Airline-Allianzen, wenn Sie ein Transfer-Ticket zwischen Allianz-Mitgliedern kaufen können und Ihr Gepäck ohne Ihre Teilnahme transferiert wird. Viele Menschen benötigen geoverteilte Praktika, und deshalb werden solche Allianzen geschlossen. Der Kunde eines der Rechenzentren der Allianz arbeitet tatsächlich mit dem gesamten Netzwerk in einem Fenster. Dies ist ein einzigartiges Phänomen in unserem Markt.
Physischer Schutz

Für PCI-DSS-Objekte ist der Gebäudeschutz sehr wichtig. Der erste Umfang ist ein Außenzaun, der mit Sensoren, Kameras und Stacheldraht ausgestattet ist. Am Eingang zum Kontrollpunkt. Dann müssen Sie in das Gebäude selbst gelangen (mit einem Pass oder einer Kamera geöffnet), dann müssen Sie die Sicherheitskontrolle durchlaufen (Abzeichen, Durchsuchungen, Beschlagnahme von Kefirflaschen) und dann ins Fitnessstudio gehen (biometrische Scanner Ihrer Handfläche, Fingerabdrücke oder Codes). In der Halle befinden sich die Gestelle selbst meistens in den Zäunen (wer auch immer sie setzt, normalerweise auch Fingerabdrücke oder Schlüssel, als gäbe es einen Mantrap für die Bank: Dies ist ein Vorraum, in den Sie mit einem Pass oder einem Finger eintreten können, und die zweite Tür - nur mit Erlaubnis des Sicherheitsbeamten von der Kamera). Überall Videoüberwachung.


Der subjektive physische Umfang in DataPro ist etwas stärker, wenn Sie ohne Zaun stehen. Hier mit dem Zaun ist alles viel interessanter, weil zum Beispiel die Japaner neben uns stehen. Sie haben einen eigenen Zellstandard und eine Stabdicke von 6 mm. Sie sagen, es gibt diejenigen, die 8 mm haben, aber ich habe nicht gemessen. Viele in den Zäunen haben Infrarot-Bewegungs- oder Kreuzungssensoren, und es gibt ein paar Zellen vom Boden bis zur Decke.

Es gibt viele Zäune. Mehr als anderswo in kommerziellen Rechenzentren in Russland. Zumindest von dem, was ich weiß.
Rückblick

Seltsamkeiten beginnen unmittelbar nach dem Betreten. Die Toilette für Administratoren ähnelt eher einer Bibliothek:

Sie können sich ein bisschen umschauen und einen Plattenspieler mit echtem Vinyl sehen. Es gibt Vinyl Led Zeppelin und Deep Purple. Deepi keine Ausrüstung.

Dies liegt daran, dass ein Investor Rock noch mehr liebt als Rechenzentren. Dieselben Kameraden machen das Rockin'Russia Festival. Cliff (der vor der Inbetriebnahme der Regisseur war) schrieb zwei Songs für Scorpions (z. B. One und One Is Three).
Es gibt ein Schuhgeschäft und einen Räuber:


In der Nähe befindet sich eine Maschine, die Servietten trocknet und erhitzt:

Und Essen mit Wasser (kostenlos):

Entladebereich
Hier ist die Vorbereitung der Ausrüstung für das Schleudern ins Fitnessstudio. Hier vielleicht der am interessantesten ausgestattete Entladebereich unter den russischen Rechenzentren. Erstens ist sie groß. Zweitens gibt es eine Tennistisch. Drittens gibt es eine spezielle Luftreinigung. Dies ist die Akklimatisierungskammer für den ersten Maschinenraum (wir haben die Hauptausrüstung durch eine andere, ähnliche geladen):

Achten Sie auf die Höhe des Tores.
Die Ausrüstung wird hierher gebracht, sie wird mit einem Karcher-Staubsauger (dem üblichen Modell der stärksten) durchlaufen, dann setzt sich das Eisen in den Kisten ab, dann wird es aus den Kisten befreit (Pappe ist im Inneren verboten - und im Allgemeinen ist jeglicher Kraftstoff verboten).
Sehr bequeme Betonung mit der Möglichkeit der Befestigung einer Tür:

Anbieter
Im Allgemeinen werden vom Rechenzentrum drei Dinge benötigt: richtige Kühlung, richtige Kommunikation und richtige Ernährung. Über Kühlung füge ich hinzu, dass sie einen Zoo von gewöhnlichen Klimaanlagen, Kühler-Gebläsekonvektor und Freikühlung in verschiedenen Räumen haben. Bei der Verbindung ist es jedoch sehr wichtig, dass eine direkte Verbindung zum M-9 besteht und Peer-to-Peer-Knoten vorhanden sind. Das heißt, wenn der Datenverkehr von einem Rechenzentrums-Server zu einem anderen Rechenzentrums-Server (möglicherweise einem anderen Unternehmen) über die "neun" oder ähnliche europäische Knoten läuft, wird er vom Peer-to-Peer-Knoten direkt über das lokale Netzwerk ausgeführt. Na dann Peering-Anbieter. Angesichts der Tatsache, dass es hier eine sehr große Spielefirma gibt, denke ich, wer sie überhaupt brauchte, damit die Benutzer nicht zurückblieben.
Auf der Website zum Zeitpunkt der Veröffentlichung der Post-43-Anbieter. Vor einem Jahr war es in Bezug auf die Konnektivität das zweite in Russland. Möglicherweise hat IXcellerate bereits das erste erreicht, aber es wurden noch keine Untersuchungen durchgeführt.
Auf dem Dach gibt es eine Plattform für Satellitenausrüstung, man kann beliebige Antennen aufstellen, aber bisher gibt es nichts. Sie sagen, dass einer der Kunden vorhatte, dort einen Satellitenteleport zu platzieren, dies aber am Ende nicht tat.
Mashzal


Lass uns einfach gehen und ich werde dir zeigen, was es möglich war zu schießen.
Viele Zellen:

Kühlungsoptimierung - Zäune und Paneele mit abnehmbaren Lamellen:


Wärmesensoren:

PDUs werden für sie gemäß ihrem Projekt in einem Werk in der Nähe von Moskau hergestellt. Sie sagen, dies sei eine Importsubstitution, die es könnte. Übrigens sind sie gesperrt:

Hier ist die große Halle:






Hinter solchen Türen von technischen Räumen und geheimen Ebenen:

Es kommt vor, dass sich hinter ihnen geschlossene Räume mit 25 bis 35 Regalen befinden, um die Privatsphäre zu schützen. Es kann sich jedoch als wiederaufladbar herausstellen. Im ersten Raum gibt es normale Batterien, im dritten bereits Lithium-Ionen-Batterien. Letztere sind durch separate Telemetrie jeder Batterie mit einer Lebensdauer von bis zu 12 Jahren gut (Blei haben maximal 7, aber eher 5), sie sind widerstandsfähiger gegen Temperaturänderungen und Erwärmung und zwei Grad bringen das Jahr nicht außer Betrieb. In Zukunft sind sie seit mehr als 5 Jahren billiger als Blei. Jede Batterie hat ein eigenes Gehäuse:

Hier sind die optischen Fächer. Schauen Sie, was für ein Problem für Menschen: Mit diesen Steckern kann sich das Kabel nicht an den Kanten des Halters abschneiden:

Dies ist ein Gravitsap. Ich schlage vor zu raten, was es ist:

In einigen Zellen lagern Kunden Hocker, Trittleiter und Terminals. Es gibt ein paar Schränke mit Ersatzteilen. Es gibt nur eine Anforderung - die von nicht brennbarem Material. In einem Paar Gestelle befinden sich Koffer (die auf eine Rutsche gestellt werden und speziell für die Aufbewahrung von Gegenständen in einem Gestell ausgelegt sind). Und hier ist ein charakteristisches Detail: Metallrohre für geringen Strom.

Unser Eisen:

Ernährung
Zwei unabhängige 13-MW-Stadtstrahlen kommen in das Gebiet.
Jetzt ist die Leistung 2N. Nächstes Jahr soll 3N sein - ein Energiezentrum für drei Gasturbinen bauen.
Hier sind die Dieselmotoren:

Betonblöcke, damit das Auto nicht einmal versehentlich in einen Dieselmotor einfährt:

Nahezu kühlend:



Und am Ende warten wir auf den Rasen für Musikfestivals und Fußball. Dort können Sie sich entspannen:


TTX-Rechenzentrum
- Zertifikate: PCI DSS, ISO 27000 (27001), ISO 9000 (9001), ISO 14001: 2004.
- Das Gebäude erstreckt sich über eine Fläche von 6.000 Quadratmetern, 1835 Stände, Leistung - 13,7 MW.
- Energie - 2N, USV + DGU, Kühler - Kühler mit freier Kühlung, Reserve - N + 1.
Das ist alles für jetzt. Das Rechenzentrum beschäftigt 50 Mitarbeiter, einschließlich nicht technischer Mitarbeiter. Wir haben sehr lange einen zweiten Platz belegt und schienen den richtigen gewählt zu haben (zumindest steht unsere Ausrüstung seit mehr als einem Jahr hier). Aber ich stelle noch einmal fest: Wenn sich etwas ändert, werde ich in Kontakt bleiben.