Je dédie ce post aux personnes qui ont menti dans les certificats, à cause desquelles nous avons presque installé des cierges magiques dans nos salles.
Les histoires ont plus de quatre ans, mais je publie maintenant, car la NDA est terminée. Ensuite, nous avons réalisé que nous avions chargé le centre de données (que nous louons) presque complètement et que son efficacité énergétique ne s'était pas beaucoup améliorée. L'hypothèse précédente était que plus nous le remplissons, mieux c'est, car l'ingénieur est distribué à tout le monde. Mais il s'est avéré que nous nous trompions à cet égard, et avec une bonne charge, il y a eu des pertes quelque part. Nous avons travaillé dans de nombreux domaines, mais notre courageuse équipe a commencé à se rafraîchir.
La vie réelle du centre de données est un peu différente du projet. Vissage constant du service après-vente pour augmenter l'efficacité et optimiser les réglages pour de nouvelles tâches. Ici, prenez une position médiane mythique. En pratique, elle n'existe pas, la répartition des charges est inégale, quelque part dense, quelque part vide. J'ai donc dû reconfigurer quelque chose pour une meilleure efficacité énergétique.
Notre compresseur de centre de données est nécessaire pour une variété de clients. Par conséquent, au milieu des grilles habituelles de deux à quatre kilowatts, il peut y avoir tout à fait 23 kilowatts ou plus. En conséquence, les climatiseurs ont été installés pour les refroidir et, à travers des baies moins puissantes, l'air est simplement passé.
La deuxième hypothèse était que les couloirs chauds et froids ne se mélangent pas. Après les mesures, je peux dire que c'est une illusion, et la véritable aérodynamique diffère du modèle à peu près tout.
Sondage
Nous avons d'abord commencé à regarder les courants d'air dans les couloirs. Pourquoi êtes-vous entré là-dedans? Puisqu'ils ont compris que le centre de données est conçu pour cinq à six kW par rack, ils savaient en fait qu'ils allaient de 0 à 25 kW. Il est presque impossible de régler tout cela avec des tuiles: les toutes premières mesures ont montré qu'elles passent presque également. Et les carreaux à 25 kW n'existent pas du tout, ils doivent être non seulement vides, mais sous vide liquide.
Nous avons acheté un anémomètre et commencé à mesurer les flux entre les racks et au-dessus des racks. En général, il est nécessaire de travailler avec lui conformément à GOST et à un ensemble de normes difficiles à atteindre sans arrêter la salle. Nous ne nous intéressions pas à la précision, mais à l'image fondamentale. Autrement dit, ils mesuraient approximativement.
En mesurant 100 pour cent de l'air qui sort des carreaux, 60 pour cent pénètrent dans les grilles, le reste s'envole. Cela est dû au fait qu'il existe de lourds racks de 15 à 25 kW, le long desquels le refroidissement est construit.
Nous ne pouvons pas prendre et éteindre les climatiseurs, car il fera très chaud sur les grilles chaudes dans la zone des serveurs supérieurs. En ce moment, nous comprenons qu'il est nécessaire d'isoler quelque chose de quelque chose, afin que l'air ne saute pas de rangée en rangée et que l'échange de chaleur dans le bloc se produise.
Parallèlement, nous nous demandons si cela est financièrement opportun.
Nous sommes surpris de constater que nous avons généralement la consommation électrique du centre de données, mais nous ne pouvons tout simplement pas calculer les ventilo-convecteurs pour une pièce particulière. Autrement dit, nous pouvons analytiquement, mais en fait - non. Et nous ne sommes pas en mesure d'évaluer les économies. La tâche devient plus intéressante et plus intéressante. Si nous économisons 10% de la puissance des climatiseurs - combien d'argent peut-on mettre de côté pour l'isolation? Comment compter?
Nous sommes allés voir les ingénieurs en automatisation qui ont terminé le système de surveillance. Merci aux gars: ils avaient tous les capteurs, il suffisait d'ajouter le code. Ils ont commencé à afficher séparément les refroidisseurs, les onduleurs et l'éclairage. Avec le nouveau Pribluda, il est devenu possible de voir comment la situation évolue sur les éléments du système.
Expériences avec des rideaux
En parallèle, nous commençons des expériences avec des rideaux (clôtures). Nous décidons de les fixer aux broches des chemins de câbles (il n'y a rien d'autre de toute façon), car ils doivent être légers. Avec des auvents ou des peignes décidés rapidement.
L'embuscade est qu'avant cela, nous travaillions avec un tas de fournisseurs. Chacun a des solutions pour ses propres centres de données d'entreprises, mais pour le centre de données commercial, il n'y a pas de solutions prêtes à l'emploi. Nos clients vont et viennent constamment. Nous sommes l'un des rares centres de données «lourds» sans limite de largeur de rack avec la capacité d'accepter ces serveurs de battage jusqu'à 25 kW. Aucune planification des infrastructures à l'avance. Autrement dit, si nous prenons des systèmes modulaires pour la mise en cache des fournisseurs - il y aura toujours des trous pendant deux mois. Autrement dit, un mashroom ne sera en principe jamais économe en énergie.
Nous avons décidé de le faire nous-mêmes, car nous avons nos propres ingénieurs.
La première chose qu'ils ont prise, ce sont des bandes de réfrigérateurs industriels. Ce sont des morilles en polyéthylène si souples que vous pouvez vous attaquer. Vous les avez probablement vus quelque part à l'entrée du rayon viande de la plus grande épicerie. Ils ont commencé à chercher des matériaux non toxiques et non combustibles. Trouvé, acheté en deux rangées. Voilée, a commencé à regarder ce qui se passe.
Ils ont compris que ce ne serait pas très. Mais cela s'est avéré très directement très peu général. Ils commencent, comme les pâtes, à flotter sur les ruisseaux. Bandes magnétiques trouvées comme des aimants de réfrigérateur. Ils les ont collés à ces bandes, collés les uns aux autres, le mur s'est avéré modérément monolithique.
Ils ont commencé à comprendre ce qui allait se passer dans la salle.
Nous sommes allés voir les constructeurs pour montrer leur projet. Ils ont l'air, ils disent: vos rideaux sont quelque chose de très lourd. 700 kilogrammes dans toute la salle. Allez, disent-ils, braves gens, en enfer. Plus précisément, à l'équipe SCS. Laissez-les considérer le nombre de nouilles qu'ils ont dans les plateaux, car 120 kg par mètre carré est le maximum.
SCS dit: Rappelez-vous, un gros client est venu chez nous? Il a des dizaines de milliers de ports dans une salle. Sur les bords, le mashzola est toujours normal, mais il ne sortira pas plus près de la croix: les plateaux tomberont.
Plus de constructeurs ont demandé un certificat pour le matériau. Je note qu'avant cela, nous avons travaillé sur la libération conditionnelle du fournisseur, car ce n'était qu'un essai. Nous nous sommes tournés vers ce fournisseur, nous disons: OK, prêt à passer en version bêta, prenons tous les morceaux de papier. Ils envoient quelque chose d'un modèle pas très établi.
Nous disons: écoutez, où avez-vous obtenu ce morceau de papier? Ils: nous l'ont envoyé par notre fabricant chinois en réponse aux demandes. Sur un morceau de papier, cette chose ne brûle pas du tout.
À ce moment, nous avons réalisé qu'il était temps de s'arrêter et de vérifier les faits. Nous allons chez les filles de la sécurité incendie du centre de données, elles nous appellent un laboratoire qui vérifie la combustibilité. C'est de l'argent et des termes assez terrestres (bien que nous ayons tout maudit jusqu'à ce que nous ayons fait la bonne quantité de morceaux de papier). Là, les scientifiques disent: apportez le matériel, nous ferons des tests.
En conclusion, il a été écrit qu'il restait environ 50 grammes de cendres d'un kilogramme d'une substance. Le reste brûle vivement, s'égoutte et supporte très bien la combustion dans une flaque d'eau.
Nous comprenons - c'est bien qu'ils n'aient pas acheté. Ils ont commencé à chercher d'autres documents.
Polycarbonate trouvé. Cela s'est avéré plus difficile. Feuille transparente - deux mm, portes - à partir de quatre millimètres. En fait, c'est du plexiglas. Avec le fabricant, nous entamons une conversation sur la sécurité incendie: délivrer un certificat. Ils envoient. Signé par le même institut. Nous appelons là, nous disons: eh bien, pourquoi, les gars, avez-vous vérifié cela?
Ils disent: oui, ils l'ont fait. Au début, ils l'ont brûlé à la maison, puis ils ne l'ont apporté que pour des tests. Il reste environ 930 grammes de cendres d'un kilogramme de matériau (si brûlé avec un brûleur). Il fond et coule, mais la flaque ne brûle pas.
Vérifiez immédiatement nos aimants (ils sont sur une doublure en polymère). Étonnamment, ils brûlent mal.
Assemblage
De là, nous commençons à collecter. Le polycarbonate est beau car il est plus léger que le polyéthylène, qui se plie bien pire. Certes, ils apportent des feuilles de 2,5 par 3 mètres, et le fournisseur ne se soucie pas de ce qu'il faut faire à ce sujet. Et nous avons besoin de 2,8 de large 20-25 centimètres. Des portes ont été envoyées aux bureaux qui ont coupé la feuille comme il se doit. Et les lamelles ont été coupées par elles-mêmes. Le processus de découpe lui-même coûte deux fois plus qu'une feuille.
Voici ce qui s'est passé:
Conclusion - le système de mise en cache est rentable en moins d'un an. Nous l'avons économisé en continu de 200 à 250 kW sur la puissance du ventilo-convecteur. Combien plus sur les refroidisseurs, combien exactement - nous ne savons pas. Les serveurs sucent à vitesse constante, les ventilateurs soufflent. Et le refroidisseur est allumé et éteint avec un peigne: il est difficile d'en extraire des données. Il est impossible d'arrêter le mashroom pour les tests.
Nous sommes heureux qu'à une époque, il y avait une règle pour mettre des racks 5x5 dans les modules afin que leur consommation moyenne soit de six kW maximum. Autrement dit, le chaud n'est pas concentré par l'île, mais distribué dans toute la salle. Mais il y a une situation où 10 pièces de racks de 15 kilowatts sont à proximité, mais en face il y a un rack de cent heures. Il a froid. Équilibré.
Là où il n'y a pas de support, vous avez besoin d'une clôture au sol.
Et nous avons également certains clients isolés avec des grilles. Ils avaient également plusieurs fonctionnalités.
Ils coupent en lamelles, car la largeur des racks n'est pas fixe, et la fréquence du peigne des fixations est déterminée: trois ou quatre cm soit à droite soit à gauche seront toujours. Si vous avez un bloc de 600 sous le compteur, alors avec une probabilité de 85%, il n'augmentera pas. Et les lamelles courtes et longues coexistent et se collent. Parfois, nous coupons la lamelle avec la lettre G le long des contours des racks.
Capteurs
Avant de réduire la puissance des ventilo-convecteurs, il a fallu mettre en place une surveillance très précise de la température en différents points du hall pour ne pas surprendre. Il y avait donc des capteurs sans fil. Filaire - sur chaque rangée, vous devez accrocher votre propre truc pour traverser ces capteurs et parfois des rallonges dessus. Il se transforme en guirlande. Dommage. Et lorsque ces fils entrent dans les cellules des clients, les agents de sécurité sont immédiatement excités et demandent d'expliquer avec un certificat ce qui est retiré par ces fils. Les nerfs de la sécurité doivent être protégés. Pour une raison quelconque, ils ne touchent pas aux capteurs sans fil.
Et plus de racks vont et viennent. Le capteur sur l'aimant est plus facile à remonter, car à chaque fois il doit être suspendu plus haut ou plus bas. Si les serveurs se trouvent dans le tiers inférieur du rack - vous devez le suspendre, et non selon les standards à un mètre et demi du sol sur la porte du rack dans le couloir froid. Il est inutile de mesurer là-bas, il faut mesurer ce qu'il y a dans le fer.
Un capteur sur trois racks - le plus souvent, vous ne pouvez pas accrocher. La température n'est pas différente. Ils avaient peur qu'il y ait une aspiration d'air à travers les racks eux-mêmes - cela ne s'est pas produit. Mais nous donnons toujours un peu plus d'air froid que les valeurs calculées. Nous avons fait des fenêtres dans les lamelles 3, 7 et 12, au-dessus du comptoir nous faisons un trou. On y met un anémomètre lors du bypass: on regarde que le débit va là où c'est nécessaire.
Ensuite, ils ont accroché des cordes lumineuses: une ancienne pratique pour les tireurs d'élite. Cela semble étrange, mais vous permet de détecter un problème possible plus rapidement.
Drôle
Pendant que nous faisions tout cela en silence, un vendeur est venu produire un ingénieur pour les centres de données. Il dit: venons nous parler de l'efficacité énergétique. Ils arrivent, commencent à parler du hall non optimal, des courants d'air. Nous hochons la tête avec compréhension. Parce que nous avons trois ans comme établi.
Ils accrochent trois capteurs sur chaque rack. Les images de surveillance sont meurtries, belles. Plus de la moitié de cette solution en prix est un logiciel. Au niveau de l'alerte dans Zabbix, mais propriétaire et très cher. L'embuscade est qu'ils ont des capteurs, des logiciels, puis ils recherchent un entrepreneur sur place: il n'y a pas de vendeurs de cages.
Il s'avère que leurs mains sont cinq à sept fois plus chères que nous.
Les références