Imaginez un homme qui sort du centre du bureau en hurlant la nuit et commence à briser le trottoir. Eugene a secoué la pierre avec ses pieds, l'a arrachée et l'a ramenée dans le bâtiment sur ses mains.
Par cela, notre cher collègue a résolu un problème informatique. Le fait est que nous avons équipé le nœud serveur du bâtiment (un petit centre de données avec 20 racks) de serveurs. Pendant le travail, le plancher surélevé a commencé à se plier - lentement donc, avec un coup et généralement comme dans les films d'horreur. En effet, les unités UPS ont été placées à proximité, 20 kilogrammes par unité. Sans vérifier les tolérances.
Pour éviter l'effet domino, Eugene a décidé de retirer les batteries. Ça n'a pas vraiment aidé. Mais à l'aide d'une bordure de trottoir, il a été possible de ralentir légèrement le processus. Une heure plus tard, une équipe de sous-traitants qui ont construit ce centre de données est arrivée, avec une trentaine de vérins du magasin de voitures pour les réparations. Trois semaines ont été refaites, alors seulement nous avons pu continuer.
En communication avec des collègues étrangers, nous décrivons cela comme étonnamment étonnant. Avec les leurs, il existe un terme plus précis - «clown».
Climatiseurs
Avant de commencer à travailler comme PM clé dans de grands projets d'intégration, j'ai travaillé dans l'externalisation. Nos équipes à moitié avec les ingénieurs ont veillé sur la réalité et le bon sens. Je veux dire, nous étions le plus souvent la deuxième ou la troisième ligne de support informatique où il n'y a pas nos spécialistes informatiques.
Seule une application vraiment intéressante peut accéder à la troisième ligne.
Un exemple. La climatisation tombe en panne sur le nœud du serveur d'une grande entreprise. La température dans la pièce commence à monter. Les gens en sueur courent dans des vestes et sont très nerveux. Il y a environ trois heures avant l'arrêt thermique. L'équipement ne peut pas être éteint - les instructions viennent d'en haut. Cela semble être considéré comme quelque chose d'important pour l'État.
Nous nous précipitons vers le magasin, revenons avec un tas de "pingouins" (climatiseurs au sol), à ce moment deux autres prennent le moulin et font une nouvelle porte hors du mur. Nous venons courir avec des kondeas, baissons nos manches - nous commençons à conduire le froid. Cette fois, c'est passé.
Un cas plus fréquent, qui est probablement familier à tout le monde dans l'externalisation, ressemble à ceci: ils ont installé conditionnellement un conder il y a 6 ans. Il s'est cassé. Vous venez chez le vendeur, dit le vendeur: chers collègues, nous sommes sincèrement désolés pour vous, mais un tel climatiseur n'existe pas dans la nature. Nous n'avons pas de service, de pièces détachées et en général nous voulons le voir. Nous ne trouvons pas le téléphone du maître auprès du vendeur. Il dit: ok, prenons la pièce de rechange, nous devons changer l'assemblage. Pas de pièces détachées - voir figure 1. Oui, nous sommes très loin de Moscou. En conséquence, trois personnes en vestes ont vraiment démonté le climatiseur avec leurs mains. Le lendemain, nous avons trouvé un bureau qui répare les moteurs, a changé le bobinage pendant deux jours, puis les a montés ensemble. Au premier démarrage, ils l'ont à nouveau brûlé, car ce n'était pas du tout notre sujet - ils n'ont pas enregistré l'intégralité du codage couleur, mais un seul côté. Et sur la partie d'accouplement, c'est une couleur différente. J'ai toujours honte. Court-circuité. Répété la même opération. La salle des serveurs a été ouverte pendant six jours, un gardien se tenait à l'entrée et était de service pour que personne ne rampe. Mais ils l'ont réparé, sinon tout y serait arrivé. Après de tels cas, vous vous sentez étrange - il semble qu'il ait sauvé le client, et il est heureux, mais en quelque sorte ce n'est pas comme ça.
Un an plus tard, l'histoire s'est répétée presque en tête-à-tête: nous sommes arrivés à l'objet pour regarder le logiciel, et là le climatiseur est arrivé. Mais nous avons déjà tout fait sans court-circuit.
Déménageurs
La livraison de matériel à une grande institution samedi matin a envoyé des déménageurs. Appeler:
- Bonjour! Qui m'as-tu envoyé?
- Je veux dire? Le fer a raison?
- Le fer est vrai.
"Quel est le problème?"
- Et qui amènera?
- Il y a donc des chargeurs? ..
- Nous avons vérifié leurs documents. Tout, vous n'avez plus ces déménageurs. Trouvé où les migrants illégaux à envoyer.
Le chef de la société de logistique a été très offensé par la suite et a déclaré que nous étions des idiots ici parce que nous avions mal formulé le mandat.
Les communications
Après une histoire, j'ai toujours l'habitude de lire les marques de pipe. Le fait est qu'ils avaient un tuyau noir discret qui traversait le couloir. Eh bien va et vient, au diable avec elle. Et puis ça a éclaté. Il s'est avéré que ce n'est pas seulement une communication, mais une communication très importante - un tuyau de ventilateur. Pire encore, le contenu de ses ventilateurs s'est infiltré sur les machines IBM de la série Z (IBM eServer zSeries). Je veux vraiment noter qu'ils ne sont pas destinés à de telles conditions de fonctionnement. Mais les ingénieurs d'IBM ont tout de même appelé. Comment tout cela a été nettoyé et comment ces machines fonctionnent toujours est un ensemble de contes qui circulent toujours sur le marché. Il est dommage que les collègues ne puissent pas inclure cela dans la publicité.
Le deuxième cas connu se trouvait déjà dans une autre entreprise. Là, les Chinois construisaient quelque chose d'un étage plus haut dans un grand bâtiment. Au rez-de-chaussée se trouvent des bureaux, des gens vivent au-dessus. Et puis l'entrepreneur chinois a accidentellement fendu le bain. Et jeté à la poubelle tout le bureau en dessous. Naturellement, la salle de bain était exactement au-dessus du nœud du serveur.
La faune
Certains collègues ont dit qu'ils avaient beaucoup d'équipement et partout il y a un câble très savoureux ... Pour les rats. Nous devons constamment regarder ce qui a été rongé. Une fois que nous avons démantelé les communications avant de recevoir le site. Dans les centres de données modernes, les rats n'ont nulle part où vivre, mais dans les vieux bâtiments, non, non, oui. Et assez sain.
Ils ont eu beaucoup de problèmes avec les oiseaux sur des objets éloignés - tout ce qui brille attire leur attention. Ils picorent souvent différentes parties de l'équipement radio. J'ai entendu qu'à Moscou, le monorail a connu des difficultés similaires: élevé, brillant, il le recouvre d'une couche uniforme d'engrais.
Stockage
Livré 2 systèmes de stockage. En prix, c'était 190 millions de roubles pour deux racks. Ils ont été amenés de l'autre côté de la rue. Déchargé sur palettes. Pour faire entrer la salle des serveurs, il fallait ouvrir la porte de la rue. Les gardes de sécurité ont bien sûr tout verrouillé et ne l'ont pas laissé entrer. Ils ont donné la clé pendant longtemps. Et dehors, c'est l'hiver. Par la fenêtre, nous voyons une belle image: les gars en salopette orange montent sur le toit et commencent à en vider la croûte. Directement sur palettes. Cela a en quelque sorte convaincu les gardes de sécurité à la fois.
Départs
J'avais un collègue qui est venu le matin au bureau en short. À cette époque, dans le nord, nous avions besoin de quelque chose à remplacer. Par miracle, ils l'ont persuadé de voler un jour jusqu'au soir: le matin pour le réparer, puis de retour - et par un dîner tardif déjà chez lui à Moscou. Là, il a volé normalement, et là un blizzard a frappé. Pendant deux semaines, il s'est assis sans linge, sans brosse à dents, sans une somme d'argent normale. Ils ont agrandi l'hôtel, jeté de l'argent sur une carte pour se nourrir. Je pense que chacun de nous était tellement coincé, mais par inexpérience, il a eu moins de chance. Nous avons des valises pré-assemblées pour les voyages.
Dans une ville du sud, nous n'avons pas été autorisés sur l'objet samedi. Nous nous sommes mis d'accord sur les temps d'arrêt, avons attendu la fin de la semaine, avons dû venir reflasher quelque chose. Et nous n'étions tout simplement pas autorisés à entrer dans le bâtiment. Il s'est avéré qu'il y avait des réparateurs qui réparaient ce bâtiment. Le week-end, ils sont restés à l'intérieur. Une semaine avant le temps d'arrêt, l'un d'eux s'est saoulé et a coupé deux de ses copains en train de boire avec une hache. La direction a pris une décision de gestion: pour éviter une répétition de la tragédie, il est interdit d'être dans l'immeuble un jour de congé.
Nichoir
Revenons à l'histoire du plancher surélevé et de la bordure: quelques années plus tard, nous avons rencontré la solution allemande pour les centres de données isolés dans les vieux bâtiments. Ils font une fondation, puis un support métallique à l'étage souhaité (nous en avions un troisième) et sur celui-ci ils montent une plate-forme avec un centre de données dans un conteneur. Il s'avère la fondation au sol avec sa fondation. Même si le bâtiment s'effondre, le nichoir restera. Pourquoi je me souviens: je connais un bâtiment que certaines personnes ont acheté au début, puis j'ai réalisé que je devais attacher toutes les colonnes avec du renforcement et ajouter de nouveaux supports pour que le centre de données puisse être installé.
Surveillance de la température
Voici une histoire où tout est parfait. Donc le bâtiment. Il n'y avait pas de surveillance centralisée par température. Après des problèmes avec les climatiseurs ont commencé à regarder. Mais comment! Il y a eu un changement de service. Ces femmes - la tâche était de voir le problème et de faire rapport. Ils ont marché avec une liste de contrôle et vérifié tout l'équipement. Nous avons observé les fuites de liquides, enregistré les lectures des thermomètres. Une fois par heure, les salles des serveurs étaient contournées. La direction attendait la mise en œuvre du suivi. Et nous avions un ingénieur souvent resté la nuit. Homme très athlétique. Alors, il est allé à la croix pour faire des exercices, il était spacieux là-bas, mais chaud. Et maintenant 4 heures du matin. Une femme âgée à moitié âgée avec un bloc-notes dans les mains ouvre la portière du cross-car et un homme à moitié nu saute vers elle en criant: "Kia!"
Retour à l'atmosphère particulière de l'informatique russe
Les disquettes ont été inventées en 1967. Au 71e, le premier lot commercial est sorti. 8 pouces. Dans le 76e est apparu 5,25 pouces. Au 81e, nous étions habitués à 3,5 dans une enveloppe rigide. En 2011, Sony (le plus grand fabricant) a complètement cessé de produire des disquettes. En 2014, Toshiba a repensé une usine de disquettes en une ferme maraîchère. En 2016, le Pentagone a annoncé l'arrêt de l'utilisation des disquettes de huit pouces. Maintenant, l'année est 2018, et à notre porte en hiver, un client est apparu qui a demandé s'il y aurait un lecteur 5.25 lors du passage au
cloud dans ce même cloud. On pouvait rire, mais avant cela, il nous avait posé des questions en détail sur la compatibilité de notre stockage d'objets avec l'API Amazon S3 et posé les bonnes questions sur l'infrastructure. Par conséquent, nous avons demandé très soigneusement ce qui a causé une telle question.
Ils utilisaient de très vieux logiciels. Il avait besoin d'une clé sur une disquette. Même avant l'avènement de Facebook, ils ont fait plusieurs clés sur ces disquettes, acheté des disques et essayé de redémarrer le serveur le moins possible. En cas de panne de ce système, ils disposaient d'une disquette ISO, mais le système crachait sur les tentatives de montage. Nous avons décidé que le problème se trouvait dans les informations précieuses enregistrées dans la zone de réserve (c'est ainsi que la protection était parfois effectuée au cours de ces années), mais nous avons trouvé les bons pilotes et présenté l'ISO à la machine virtuelle. Ça a commencé. Maintenant, le disque ne se cassera jamais et le logiciel continuera de fonctionner, enveloppé dans deux hyperviseurs.