Hallo Habr! Ich bin Taras Chirkov, Direktor des Linxdatacenter Data Center in St. Petersburg. Und heute werde ich in unserem Blog darüber sprechen, wie wichtig es ist, die Sauberkeit des Raums im normalen Betrieb eines modernen Rechenzentrums aufrechtzuerhalten und wie man ihn richtig misst, erreicht und auf dem richtigen Niveau hält.
Reinheitsauslöser
Einmal kam ein Kunde eines Rechenzentrums in St. Petersburg wegen einer Staubschicht im unteren Teil des Gerätegestells auf uns zu. Dies war der Ausgangspunkt der Untersuchung, deren erste Hypothesen Folgendes nahelegten:
- Staub gelangt von den Schuhsohlen der Mitarbeiter und Kunden des Rechenzentrums in die Serverräume.
- durch das Lüftungssystem eingegeben,
- beide.
Blaue Überschuhe - zum Mülleimer der Geschichte
Begonnen mit Schuhen. Zu dieser Zeit wurde das Problem der Sauberkeit auf traditionelle Weise gelöst: ein Behälter mit Überschuhen am Eingang. Die Effektivität des Ansatzes erreichte nicht das gewünschte Niveau: Es war für Gäste schwierig, ihre Nutzung durch die Gäste des Rechenzentrums zu kontrollieren, und das Format selbst war unpraktisch. Sie gaben schnell zugunsten fortschrittlicherer Technologien in Form eines Schuhwagens auf. Das erste Modell, das wir für ein solches Gerät installiert haben, ist ausgefallen: Die Maschine hat die Schuhüberzüge zu oft zerrissen, als sie versucht haben, sie auf Schuhe zu legen. Die Verwendung war ärgerlicher als die Erleichterung des Lebens.
Die Erfahrung der Kollegen in Warschau und Moskau zu lösen, löste das Problem nicht, und infolgedessen wurde die Wahl zugunsten der Technologie zum Verschmelzen von Wärmefilmen auf Schuhen getroffen. Mit Hilfe eines Wärmefilms können Sie Schuhe mit jeder Sohle bis zu einer dünnen weiblichen Ferse mit „Überschuhen“ versehen. Ja, der Film gleitet auch manchmal, aber viel seltener als die klassischen blauen Überschuhe, und die Technologie selbst ist für den Besucher um ein Vielfaches bequemer und moderner. Ein weiteres wichtiges Plus (für mich): Der Film deckt im Gegensatz zu herkömmlichen Überschuhen leicht die größten Schuhgrößen ab, die beim Versuch, sie auf die 45. Größe zu bringen, zerrissen sind. Zur Modernisierung des Verfahrens wurden Wahlurnen mit automatisierter Öffnung des Deckels durch einen Bewegungssensor installiert.
Dieser Prozess sieht folgendermaßen aus:
Die Gäste schätzten die Innovation sofort.Staub im Wind
Nachdem wir den offensichtlichsten Kanal für eine mögliche Verschmutzung des Weltraums in Ordnung gebracht hatten, nahmen wir die feinere Materie auf - die Luft. Es ist wahrscheinlich, dass ein erheblicher Teil des Staubes aufgrund unzureichender Filterung durch Belüftung in die Serverräume gelangt oder von der Straße hereingebracht wird. Oder geht es nur um schlechte Reinigungsqualität? Die Untersuchung wurde fortgesetzt.
Wir beschlossen, den Gehalt an Partikeln in der Luft im Rechenzentrum zu messen, und luden ein Labor ein, das sich auf die Luftqualitätskontrolle in Reinräumen für spezielle Zwecke spezialisiert hat, um diese Arbeiten durchzuführen.
Das Laborpersonal maß die Anzahl der Kontrollpunkte (20), erstellte einen Probenahmeplan, um die Dynamik zu verfolgen und das genaueste Bild zu erstellen. Die Kosten für den vollständigen Messprozess durch das Labor beliefen sich auf etwa 1 Million Rubel, was uns völlig unzweckmäßig erschien, aber eine Reihe von Ideen für eine unabhängige Implementierung lieferte. Auf dem Weg dorthin wurde klar, dass das Labor gut ist, aber Analysen müssen dynamisch durchgeführt werden, und der ständige Zugriff auf ihre Dienste ist äußerst unpraktisch.
Nachdem wir uns die geplanten Maßnahmen des Labors angesehen hatten, beschlossen wir, uns zweckmäßigere Geräte für die unabhängige Arbeit anzuschauen. Infolgedessen ist es uns gelungen, das für diese Aufgabe erforderliche Instrument zu finden - einen Luftqualitätsanalysator. Hier ist einer:
Das Gerät zeigt den Gehalt an Partikeln mit unterschiedlichen Durchmessern (in Mikrometern).Überarbeitung von Standards
Dieses Gerät analysiert die Anzahl der Partikel, die Temperatur und die Luftfeuchtigkeit und zeigt die Ergebnisse in Maßeinheiten mit ISO-Standards für diesen Parameter an. Das Display zeigt die Partikelmengen mit unterschiedlichen Durchmessern in der Luftprobe an.
Gleichzeitig sündigten sie auf Filtern: Zu dieser Zeit wurden G4-Filtermodelle in Serverräumen verwendet. Dieses Modell bietet eine grobe Luftreinigung, daher wurde die Wahrscheinlichkeit des Durchgangs von Partikeln, die zu einer Kontamination führen, angenommen. Wir haben uns entschieden, F5-Feinfilter, die in Klima- und Lüftungssystemen verwendet werden, als Filter der zweiten Stufe (Nachbehandlung) zum Testen zu kaufen.
Die Untersuchung wurde durchgeführt - Sie können mit den Kontrollmessungen fortfahren. Sie beschlossen, die Anforderungen der Norm ISO 14644-1 für die Anzahl der Schwebeteilchen als Richtlinie zu verwenden.
Klassifizierung von Reinräumen nach Anzahl der Schwebeteilchen.Es scheint - messen und vergleichen Sie anhand der Tabelle. Aber nicht alles ist so einfach: In der Praxis stellte sich heraus, dass es ziemlich schwierig war, Luftreinheitsstandards für Serverräume des Rechenzentrums zu finden. Dies wird nirgendwo explizit von einer Organisation oder einem Industrieinstitut angegeben. Und nur im internen Forum Uptime Inside Track (Zugang dazu haben Personen, die im Rahmen der Programme des Uptime Institute geschult wurden) gab es eine separate Diskussion zu diesem Thema. Basierend auf den Ergebnissen seiner Studie neigten sie dazu, sich auf die ISO 8-Norm zu konzentrieren - die vorletzte in der Klassifizierung.
Die ersten Messungen haben gezeigt, dass wir uns selbst unterschätzt haben - die Ergebnisse der internen Luftinspektionen ergaben die Einhaltung der Anforderungen von ISO 5 in Innenräumen, die die von den Teilnehmern von Uptime Inside Track geforderten Standards deutlich übertrafen. Zur gleichen Zeit - mit großem Spielraum. Wir haben ein Rechenzentrum und natürlich kein biologisches Labor, aber damit die Partikelkonzentration in der Luft ISO 8 entspricht, sollte dies Gegenstand der Klasse „Mindestzementwerk“ sein. Und wie Sie denselben Standard auf ein Rechenzentrum anwenden können, ist nicht ganz klar. Gleichzeitig haben wir das Ergebnis bei ISO 5 erhalten und Messungen beim Filtern der Luft mit G4-Filtern durchgeführt. Das heißt, Staub kann nicht durch die Luft in die Gestelle gelangen, die F5-Filter erwiesen sich als übermäßig und wurden nicht einmal verwendet.
Ein negatives Ergebnis ist auch ein Ergebnis: Wir haben weiterhin nach den Ursachen der Verschmutzung in andere Richtungen gesucht und die Luftqualitätskontrolle in vierteljährliche Inspektionen einbezogen und diese mit Inspektionen von BMS-Sensoren durch verifizierte Geräte kombiniert (ISO 9000-Anforderungen und Kundenaudits).
Nachfolgend finden Sie ein Beispiel für einen Bericht, der auf der Grundlage der während der Messung erhaltenen Daten ausgefüllt wird. Zur Erhöhung der Genauigkeit werden Messungen mit zwei Instrumenten durchgeführt - Testo 610 und BMS-Sensor. Die Tabellenüberschrift gibt die Grenzwerte für die Geräte an. Die Abweichung dieser Parameter wird automatisch hervorgehoben, um die Identifizierung von Problembereichen oder Zeiträumen zu erleichtern.
Bei uns ist alles klar: Der Unterschied in der Instrumentenleistung ist minimal und die Partikelkonzentration liegt weit unter dem Grenzwert.Durch die Hintertür
Da es neben dem Haupteingang für Kunden, in dem wir eine Schuhmaschine installiert hatten, noch andere Eingänge zu den Reinräumen gab, bestand weiterhin die Notwendigkeit, Schmutz vom Eintritt in das Rechenzentrum auszuschließen.
Es ist unpraktisch, Schuhüberzüge während des Entladevorgangs zu tragen / zu entfernen, daher haben wir eine Maschine zum Reinigen von Sohlen gefunden. Praktisch, funktional, aber der menschliche Faktor wirkt sich in Form eines optionalen Ansatzes für dieses Gerät aus. In der Tat das gleiche wie bei Überschuhen am Haupteingang.
Um das Problem zu lösen, suchten sie nach Reinigungsmöglichkeiten, die nicht vermieden werden können: klebrige Teppiche mit trennbaren Schichten handhabten dies am besten. Während der Autorisierung an der Haustür muss der Besucher auf einem solchen Teppich stehen und überschüssigen Staub von den Sohlen seiner Schuhe entfernen.
Putzfrauen reißen jeden Tag die oberste Schicht eines solchen Teppichs ab, es sind 60 Schichten darin - genug für ungefähr 2 Monate.Nachdem ich unter anderem das Rechenzentrum von Ericsson in Stockholm besucht hatte, machte ich darauf aufmerksam, wie diese Probleme dort gelöst werden: Neben Abreißschichten verwendet Schweden wiederverwendbare antibakterielle Dycem-Teppiche. Ich mochte die Idee wegen des Prinzips der Wiederverwendbarkeit und der Fähigkeit, einen großen Abdeckungsbereich bereitzustellen.
Magischer antibakterieller Teppich. Schade, kein Flugzeug, aber es könnte - zu einem solchen Preis!Wir haben in Russland kaum Unternehmensvertreter gefunden und die Kosten der Lösung für unser Rechenzentrum geschätzt. Als Ergebnis haben wir eine Zahl erhalten, die fast 100-mal teurer ist als Lösungen mit mehrschichtigen Teppichen - ungefähr die gleichen 1 Million Rubel wie im Projekt mit Messungen der Luftreinheit. Darüber hinaus wurde deutlich, dass spezielle Reinigungsprodukte verwendet werden müssen, die natürlich nur von diesem Hersteller erhältlich sind. Die Lösung fiel auch von selbst weg und entschied sich für eine mehrschichtige Version.
Handarbeit
Ich möchte insbesondere darauf hinweisen, dass all diese Maßnahmen die Nutzung der Reinigungsarbeit nicht zunichte gemacht haben. In Vorbereitung auf die Zertifizierung des Rechenzentrums Linxdatacenter gemäß dem Management & Operations-Standard des Uptime Institute war es erforderlich, die Maßnahmen der Mitarbeiter des Reinigungsdienstes im Rechenzentrum klar zu regeln. Es wurden detaillierte Anweisungen erstellt, in denen festgelegt wurde, wo, was und wie sie durchgeführt werden mussten.
Ein paar Auszüge aus der Anleitung:
Wie Sie sehen können, wird alles registriert, buchstäblich jeder Aspekt der Arbeit in einem bestimmten Raum, Reinigungsmittel, Materialien usw., die für die Verwendung akzeptabel sind. Kein Detail bleibt ohne Aufmerksamkeit, auch das kleinste. Briefing - unter der Unterschrift jedes Mitarbeiters des Dienstes. In Serverräumen, elektrischen Räumen usw. Sie werden nur in Anwesenheit autorisierter Mitarbeiter des Rechenzentrums gereinigt, z. B. eines diensthabenden Ingenieurs.
Aber das ist noch nicht alles
Ebenfalls in der Liste der Maßnahmen zur Gewährleistung der Sauberkeit im Rechenzentrum enthalten: Runden mit einer Sichtprüfung der Räumlichkeiten, einschließlich wöchentlicher Inspektionen der Gestelle, um darin verbleibende Kabelreste zu erkennen, Rückstände von Geräten und Komponenten zu verpacken. Für jede solche Episode wird ein Vorfall ausgelöst. Der Kunde erhält eine Benachrichtigung über die Notwendigkeit, Verstöße so schnell wie möglich zu beseitigen.
Außerdem haben wir zum Auspacken und Aufstellen von Geräten einen separaten Raum eingerichtet - dies ist auch Teil der Reinigungsrichtlinie des Unternehmens.
Eine weitere Maßnahme, die wir aus der Praxis von Ericsson gelernt haben, ist die Aufrechterhaltung einer konstanten Luftversorgung in Serverräumen: In den Räumen herrscht mehr Druck als außerhalb, sodass im Inneren keine Traktion auftritt. Diese Lösung wird in einem separaten Artikel ausführlicher beschrieben.
Schließlich haben wir uns die Hilfsroboter für Zimmer besorgt, die von der Liste der für den Besuch zur Verfügung stehenden Reinigungskräfte ausgeschlossen sind.
Das Gitter oben bietet dem Roboter nicht nur +10 Schutz, sondern verhindert auch, dass er unter den vertikalen Kabelrinnen der Racks hängen bleibt.Ein unerwarteter Fund als Abschluss
Die Sauberkeit im Rechenzentrum ist wichtig für den Betrieb von Server- und Netzwerkgeräten, die Luft durch sich selbst ziehen. Das Überschreiten der zulässigen Staubkonzentrationen führt zur Ansammlung von Staub auf den Bauteilen und zu einem Anstieg der Gesamttemperatur auf 1 Grad Celsius. Staub verringert die Kühleffizienz, was sich in Bezug auf das Jahr in spürbaren indirekten Kosten niederschlagen und die Fehlertoleranz der gesamten Anlage beeinträchtigen kann.
Wir können sagen, dass dies eine spekulative Annahme ist, aber die Experten des Uptime Institute, die das Linxdatacenter-Rechenzentrum gemäß dem Management & Operations Quality Standard zertifiziert haben, achten ernsthaft auf die Sauberkeit. Umso erfreulicher war es, die schmeichelhaftesten Bewertungen in diesem Bereich zu erhalten: Unser Rechenzentrum in St. Petersburg übertrifft die Zertifizierungsanforderungen erheblich. Der Experte des Instituts nannte uns "das sauberste Rechenzentrum, das er je gesehen hat". Darüber hinaus wird unser Rechenzentrum von Uptime als Beispiel für die Lösung des Problems sauberer Serverräume verwendet. Außerdem bestehen wir problemlos jedes Kundenaudit für diesen Parameter - die schwerwiegendsten Anforderungen der launischsten Kunden werden mit einem Übermaß erfüllt.
Kommen wir zurück zum Anfang der Geschichte. Woher kam die Verschmutzung in der Beschwerde vom Anfang des Artikels? Der Teil des Kundenschalters, der den Start des gesamten Projekts „Clean Data Center“ verursachte, war ab dem Zeitpunkt des Imports und der Installation im Rechenzentrum kontaminiert. Der Client hat das Rack zum Zeitpunkt des Eintritts in den Serverraum nicht gereinigt. Bei der Überprüfung der gleichzeitig installierten benachbarten Racks stellte sich heraus, dass die Situation mit Staub dieselbe war. Diese Situation war der Grund für das Hinzufügen eines Reinigungskontrollpunkts zur Client-Checkliste für die Installation des Racks. Die Wahrscheinlichkeit solcher Dinge darf auch niemals vergessen werden = vorgewarnt, daher bewaffnet. In unserem Rechenzentrum dreht sich alles um „Reinheit und Diktatur“. Im nächsten Artikel werde ich über Drucksensoren sprechen, aber jetzt stellen Sie Fragen in den Kommentaren.