Imagine a un hombre que sale corriendo del centro de la oficina gritando por la noche y comenzando a romper la acera. Eugene sacudió la piedra con los pies, la arrancó y la llevó de vuelta al edificio con las manos.
Con esto, nuestro querido colega resolvió un problema de TI. El hecho es que equipamos el nodo del servidor en el edificio (un pequeño centro de datos con 20 bastidores) con servidores. Durante el trabajo, el piso elevado comenzó a doblarse, lentamente, con una explosión y generalmente como en las películas de terror. Esto se debe a que las unidades UPS se colocaron cerca, 20 kilogramos por unidad. Sin verificar tolerancias.
Para evitar el efecto dominó, Eugene decidió sacar los paquetes de baterías. Realmente no ayudó. Pero con la ayuda de un bordillo, fue posible ralentizar ligeramente el proceso. Una hora después, llegó un equipo de contratistas que construyeron este centro de datos, con aproximadamente 30 tomas del taller de automóviles para reparaciones. Se rehicieron tres semanas, solo entonces pudimos continuar.
En comunicación con colegas extranjeros, describimos esto como sorprendentemente sorprendente. Con los suyos hay un término más preciso: "payaso".
Aires acondicionados
Antes de comenzar a trabajar como PM clave en grandes proyectos de integración, trabajé en outsourcing. Nuestros equipos a la mitad con los ingenieros vigilaron la realidad y el sentido común. Quiero decir, a menudo éramos la segunda o tercera línea de soporte de TI donde no hay nuestros especialistas de TI.
Solo una aplicación realmente interesante puede llegar a la tercera línea.
Un ejemplo El aire acondicionado se rompe en el nodo del servidor de una gran empresa. La temperatura en la habitación comienza a subir. Personas sudorosas corriendo en chaquetas y muy nerviosas. Hay aproximadamente tres horas antes del apagado térmico. El equipo no se puede apagar; las instrucciones son de arriba. Parece ser considerado algo importante para el estado.
Nos apresuramos a la tienda, regresamos con un grupo de "pingüinos" (aires acondicionados de piso), en este momento dos más toman el molinillo y hacen una nueva puerta de la pared. Venimos corriendo con kondeas, nos bajamos las mangas, comenzamos a conducir el frío. Esa vez pasó.
Un caso más frecuente, que probablemente sea familiar para todos en el outsourcing, se ve así: instalaron condicionalmente un conder hace 6 años. El se ha roto. Usted viene al vendedor, el vendedor dice: queridos colegas, lo sentimos sinceramente por ustedes, pero ese aire acondicionado no existe en la naturaleza. No tenemos servicio, repuestos, y en general queremos verlo. Encontramos el teléfono del maestro en ellos no del vendedor. Él dice: ok, consigamos la pieza de repuesto, necesitamos cambiar el ensamblaje. Sin piezas de repuesto: consulte la figura 1. Sí, estamos muy lejos de Moscú. Como resultado, tres personas con chaquetas realmente desmantelaron el aire acondicionado con sus manos. Al día siguiente, encontramos una oficina que repara motores, cambió el devanado durante dos días y luego los montó juntos. Al principio, lo volvieron a grabar, porque no era nuestro tema en absoluto: no registraron toda la codificación de color, sino solo un lado. Y en la parte de apareamiento es un color diferente. Todavía estoy avergonzado En corto. Repitió la misma operación. La sala de servidores se abrió durante seis días, un guardia estaba parado en la entrada y estaba de guardia para que nadie entrara. Pero lo arreglaron, de lo contrario todo habría llegado allí. Después de tales casos, te sientes extraño: parece que salvó al cliente y está feliz, pero de alguna manera no es así.
Un año después, la historia se repitió casi uno a uno: llegamos al objeto para ver el software, y allí apareció el aire acondicionado. Pero ya hicimos todo sin un corto circuito.
Mudanzas
La entrega de equipos a una gran institución el sábado por la mañana envió mudanzas. Llamada:
- hola A quien me enviaste
- Quiero decir? El hierro es correcto?
- El hierro es verdad.
"¿Qué pasa?"
- ¿Y quién traerá?
- Entonces, ¿hay cargadores? ..
- Verificamos sus documentos. Todo, ya no tienes estos motores. Encontrado donde los inmigrantes ilegales para enviar.
El jefe de la empresa de logística se ofendió mucho más tarde y dijo que somos idiotas aquí porque formulamos incorrectamente los términos de referencia.
Comunicaciones
Después de una historia, todavía tengo la costumbre de leer marcas de tuberías. El hecho es que tenían una discreta tubería oscura que pasaba por el pasillo. Bien va y viene, al diablo con ella. Y luego estalló. Resultó que esto no es solo comunicación, sino una comunicación muy importante: un tubo de ventilador. Peor aún, su contenido de ventilador se filtró en las máquinas de la serie Z de IBM (IBM eServer zSeries). Realmente quiero señalar que no están destinados a tales condiciones de funcionamiento. Pero los ingenieros de IBM todavía llamaron. La forma en que se limpió todo esto y cómo funcionan estas máquinas es todo un grupo de historias que aún circulan por el mercado. Es una pena que los colegas no puedan incluir esto en la publicidad.
El segundo caso conocido ya estaba en otra compañía. Allí, los chinos estaban construyendo algo un piso más arriba en un gran edificio. En las plantas bajas hay oficinas, la gente vive arriba. Y luego el contratista chino dividió accidentalmente el baño. Y vertió en la basura toda la oficina de abajo. Naturalmente, el baño estaba exactamente encima del nodo del servidor.
Fauna
Algunos colegas dijeron que tienen mucho equipo y en todas partes hay un cable muy sabroso ... Para ratas. Debemos vigilar constantemente lo que se royó. Una vez que desmantelamos las comunicaciones antes de recibir el sitio. En los centros de datos modernos, las ratas no tienen dónde vivir, pero en los edificios antiguos no, no, sí. Y bastante saludable.
Tuvieron muchos problemas con las aves en objetos distantes; todo lo que reluce atrae su atención. A menudo picotean diferentes partes del equipo de radio. Escuché que en Moscú el monorraíl experimentó dificultades similares: alto, brillante, lo cubren con una capa uniforme de fertilizante.
Suministro de almacenamiento
Entregado 2 sistemas de almacenamiento. En precios, fue de 190 millones de rublos por dos bastidores. Los trajeron al otro lado de la calle. Descargado en palets. Para ingresar a la sala de servidores, era necesario abrir la puerta desde la calle. Los guardias de seguridad, por supuesto, cerraron todo y no lo dejaron entrar. Le dieron la llave durante mucho tiempo. Y afuera es invierno. Por la ventana vemos una hermosa imagen: los tipos de overol naranja suben al techo y comienzan a tirarle la corteza. Directamente en palets. De alguna manera convenció a los guardias de seguridad de inmediato.
Salidas
Tuve un colega que vino por la mañana en la oficina en pantalones cortos. En este momento, en el norte, necesitábamos algo para ser reemplazado. Por algún milagro, lo persuadieron para que volara durante un día hasta la noche: por la mañana para arreglarlo, luego de regreso, y al final de la cena ya en casa en Moscú. Allí voló normalmente, y allí golpeó una tormenta de nieve. Durante dos semanas estuvo sentado sin ropa de cama, sin cepillo de dientes, sin una cantidad normal de efectivo. Extendieron el hotel, arrojaron dinero en una tarjeta para comida. Creo que cada uno de nosotros estaba tan atrapado, pero por inexperiencia fue menos afortunado. Tenemos maletas premontadas para viajes.
En una ciudad del sur no se nos permitió el objeto el sábado. Acordamos el tiempo de inactividad, esperamos el final de la semana, tuvimos que venir y actualizar algo. Y simplemente no se nos permitió entrar al edificio. Resultó que había reparadores que estaban reparando este edificio. El fin de semana, se quedaron adentro. Una semana antes del tiempo de inactividad, uno de ellos se emborrachó y cortó a dos de sus amigos bebedores con un hacha. La gerencia tomó una decisión de gestión: para evitar la recurrencia de la tragedia, está prohibido estar en el edificio en un día libre.
Pajarera
Volviendo a la historia sobre el piso elevado y la acera: unos años más tarde conocimos la solución alemana para centros de datos aislados en edificios antiguos. Hacen una base, luego un soporte de metal en el piso deseado (teníamos un tercero) y en él montan una plataforma con un centro de datos en un contenedor. Resulta la base al suelo con su base. Incluso si el edificio se derrumba, la casa para pájaros permanecerá. ¿Por qué lo recordaba? Conozco un edificio que algunas personas compraron al principio, y luego me di cuenta de que necesitaba unir todas las columnas con refuerzo y agregar nuevos soportes para poder instalar el centro de datos.
Monitoreo de temperatura
Aquí hay una historia donde todo es perfecto. Entonces el edificio. No hubo monitoreo centralizado por temperatura. Después de problemas con los aires acondicionados comenzaron a mirar. Pero como! Hubo un cambio de turno. Tales mujeres: la tarea era ver el problema e informar. Caminaron con una lista de verificación y revisaron todo el equipo. Observamos las fugas de líquidos, registramos las lecturas de los termómetros. Una vez por hora, se omitieron las salas de servidores. La gerencia estaba esperando la implementación del monitoreo. Y teníamos un ingeniero que a menudo se quedaba de noche. Hombre muy atlético. Entonces, fue a la cruz para hacer ejercicios, era espacioso allí, pero hacía calor. Y ahora a las 4 de la mañana. Una anciana de mediana edad con un bloc de notas en sus manos abre la puerta del coche cruzado, y un hombre semidesnudo salta hacia ella con un grito: "¡Kia!"
Volviendo a la atmósfera especial de la TI rusa
Los disquetes se inventaron en 1967. En el 71, salió el primer lote comercial. 8 pulgadas En el 76 apareció 5.25 pulgadas. En el 81, estábamos acostumbrados a 3.5 en un sobre duro. En 2011, Sony (el mayor fabricante) dejó de producir discos flexibles por completo. En 2014, Toshiba rediseñó una fábrica de disquetes en una granja de vegetales. En 2016, el Pentágono anunció el cese del uso de disquetes de ocho pulgadas. Ahora el año es 2018, y en nuestra puerta en invierno apareció un cliente que preguntó si habría una unidad de 5,25 al pasar a la
nube en esta misma nube. Podríamos reírnos, pero antes de eso, nos había preguntado en detalle sobre la compatibilidad de nuestro almacenamiento de objetos con la API de Amazon S3 y había hecho las preguntas correctas sobre la infraestructura. Por lo tanto, preguntamos con mucho cuidado qué causó tal pregunta.
Usaron software muy antiguo. Necesitaba una llave en un disquete. Incluso antes del advenimiento de Facebook, hicieron varias claves en estos disquetes, compraron unidades e intentaron reiniciar el servidor lo menos posible. En caso de falla de este sistema, tenían un disquete ISO, pero el sistema escupió en intentos de montarlo. Decidimos que el asunto estaba en la valiosa información que se registró en el área de reserva (así es como a veces se hacía la protección en esos años), pero encontramos los controladores correctos y presentamos el ISO a la máquina virtual. Comenzó Ahora el disco nunca se romperá y el software continuará funcionando, envuelto en dos hipervisores.