Dias úteis do data center: insignificantes por 7 anos de operação. E a continuação sobre o rato



Devo dizer imediatamente: aquele rato no servidor trazido, que bebemos chá alguns anos atrás após um choque elétrico, provavelmente escapou. Porque de alguma forma vimos a amiga dela no circuito. E imediatamente decidiu colocar repelentes ultra-sônicos.

Agora há terra danificada em torno do data center: não há pássaros sentados no prédio e, provavelmente, todas as toupeiras e vermes escaparam. Preocupado que o som pudesse causar falha no HDD, mas verificamos que as frequências não eram as mesmas.

A história a seguir é muito mais divertida. De alguma forma, conseguimos um pedaço de ferro por alguns milhões de rublos em uma caixa com sensores de inclinação, vibração e umidade. Tudo é inteiro. Remova cuidadosamente a embalagem e o pedaço de ferro é dobrado. Misticismo

O corpo é reto em um arco. Lindamente.

Detetive


Não daríamos importância a isso, porque o corpo de metal era curvo era quase uma maneira de projetar. Lindamente, sem chips. E se não fosse por outras glândulas semelhantes por perto, nem pensaríamos em descompactar que algo estava errado. Mas nas proximidades eram as mesmas, apenas formas geométricas mais regulares.

Felizmente, a desembalagem desse ferro é filmada em vídeo (eu recomendo que todos tenham esse hábito), então pude provar ao fabricante que ela chegou tanto. O pacote inteiro e o corpo bem dobrado - isso não é um golpe dos motores. Provavelmente, ela foi danificada antes de partir para a Rússia.

O fornecedor diz: "Uh, pessoal, vamos alterá-lo imediatamente para você na garantia". E então uma emboscada épica nos esperava.

O fato é que a alfândega nos permite importar esses equipamentos de acordo com documentos sem o direito de exportar. Ou seja, você pode trazê-lo, mas não pode revendê-lo para alguém fora da Rússia. Quando enviamos de volta uma fonte de alimentação queimada, por exemplo, tudo fica claro. Esta é uma peça de reposição, fonte de alimentação.

E aqui foi necessário enviar tudo de volta:
- Pessoal, olha, estamos enviando o pedaço de ferro de volta ao fabricante.
- Todo o equipamento?
Sim.
- O modelo é tal e tal?
Sim.
- Isso pode funcionar?
- Nós não sabemos, eles não.
"Portanto, é todo um equipamento."
- Bem, isso não funciona.
- Bem, olhe, todo o equipamento desse modelo. Sem o direito de reexportar. Não deixe pra lá.

Em geral, havia muitos agachamentos antes de descobrirmos que não o exportamos, mas devolvemos. Como resultado, eu consegui fazer tudo.

Havia também lojas de sapatos


No início, há muitos anos, tivemos o primeiro sonho automático do administrador. Você coloca as capas dos sapatos em uma mochila, ela as abre, abre e as coloca em uma posição em que você só precisa pisar. Chop-chpok e pronto.

Depois de seis meses, ela mastigou cerca de cem pacotes de capas de sapatos e engasgou. Verificou-se que há tantas peças móveis que é necessário repará-lo uma vez por mês com nossa carga (temos muitos engenheiros de atendimento ao cliente andando pelo local, porque somos um data center comercial) ou precisamos comprar um novo.

O segundo problema é que, em uma das limpezas regulares, de alguma forma encontramos um “pequeno pano azul” pendurado na grade de uma das nossas bancadas de testes. O cientista forense na pessoa de um engenheiro da equipe X identificou um fragmento da capa do sapato. Aconteceu que isso é conveniente na clínica com capas de sapatos: meia hora foi assim - e é isso. E alguns engenheiros podem trabalhar com ferro o dia todo. Baralhando as pernas. Baralhar muito. E as capas dos sapatos são esfregadas nesses pequenos pedaços que voam pelo ginásio.

Quase imediatamente, compramos uma nova loja de sapatos. Pegamos uma bota térmica: essa é a máquina na qual o filme é carregado e encolhe cuidadosamente o filme sobre a bota. Bonito, eficaz, durável. Menos dispersões. Ela ficou conosco por um longo tempo, mas era necessário trocar o filme retrátil uma vez a cada 1-2 horas, porque a sola tinha a propriedade de cair sozinha.

A princípio, pensamos que isso não teve sorte, mas as pessoas de alguma maneira resolveram esse problema. Mas não. Eles perguntaram aos colegas ocidentais - a mesma história. Como resultado, eles começaram a pensar em como fazê-lo normalmente. Voltar da academia para novas capas de sapatos é uma ideia, francamente, mais ou menos. Encontramos limpadores industriais para canteiros de obras e indústrias. É algo como as faixas nas quais uma mudança entra na oficina. As faixas com um monte de roletes limpam tudo e são feitas para que você queira ou não - ele vai pegar e limpar. Eles custam de meio milhão a um milhão de rublos. Nós bisbilhotamos e encontramos o mesmo por 200 mil, mas devemos enfiar nossos pés nele mesmos. É semelhante em tamanho a um polidor de sapatos. Você se aproxima, enfia uma perna lá, ela a mastiga e devolve. Coloque na entrada do data center.

Funciona bem, exceto por duas nuances. A primeira - rapidamente ficou claro que isso era normal para nós engenheiros. Mas, na prática, várias pessoas vêm ao data center para ver o topo das grandes empresas. Com sapatos de couro da bunda do dragão. E mesmo para colocar creme nos sapatos, eles têm um pincel que é mais caro que o meu tênis de treino, eles pegam uma pilha especial lá. Eles se recusaram a enfiar as pernas em nosso dispositivo milagroso. O segundo problema surgiu no inverno: quando os sapatos estão na lama, eles não conseguem tirar tudo de um piso profundo. Então você caminha pelo corredor, deixando vestígios de ectoplasma.

Decidimos simplesmente. Eles colocaram uma sapateira próxima. Mesmo assim, temos que duplicar tudo de acordo com o padrão.

Um novo problema surgiu. Observando o comportamento dos engenheiros dos clientes, vimos a seguinte figura: eles primeiro enfiaram os pés na máquina de limpeza e depois prenderam as capas dos sapatos em uma sapateira. Agora eles penduravam um sinal de que um ou outro é melhor para ser limpo, mas se os princípios da vida proíbem que você limpe sapatos, use capas para sapatos. Parece que o bilhete, que durou alguns dias, mas se estendeu por um longo tempo, foi fechado. Aqui está o dispositivo:



Duas vezes "ku"


De acordo com o PCI DSS, você precisa distinguir visualmente os papéis das pessoas no data center. Não olhando para o passe e lendo alguma coisa lá, mas diretamente visualmente como os militares se distinguem em dragonas, apenas ainda mais brilhantes. Decidimos não nos exibir e usamos o bom e velho método Chatlan - diferenciação de cores das calças. Especificamente, eles começaram a fazer fitas de distintivo de cores diferentes. Verde como seu favorito imediatamente levou nossos administradores.

Parece simples, mas causou três efeitos inesperados:

  1. Foram necessários retratores para retrair automaticamente essas passagens quando usadas (estas são as coisas que ajustam o comprimento da fita). Escrevemos uma declaração de trabalho, que levou em consideração todos os desejos de todos os departamentos. Este foi um erro estratégico. Cor, formato, material, afastador não plástico, linha de pesca de metal para colocar o logotipo para que seja costurado na fita. As peças eram tão caras que mais tarde tive que cortar os requisitos e alterar o formato.
  2. Quando a diferenciação das calças funcionou, tornou-se muito conveniente. Os contratados têm algumas fitas, os administradores externos têm fitas diferentes, nossos administradores têm a terceira. Pode-se ver quem tem qual papel. Em elétrica - apenas cinza, em ar condicionado - azul. E então foram necessárias fitas para os motoristas (esse é um papel separado, eles podem entrar na zona de descarregamento, mas não podem sair, exceto fora). Ao mesmo tempo, os motoristas não precisam de um passe. No começo, demos fitas sem passar. Então os oficiais de segurança decidiram que era muito estranho e degradaram a dignidade humana dos motoristas. Eles têm sua própria lógica militar, então agora os motoristas conseguem um passe certo com a fita, mas esse passe não deixa nada. Do ponto de vista da segurança, verifica-se um marcador que a segurança dessa pessoa verificou.
  3. Um de nossos engenheiros sugeriu fazer blusas verdes em vez de fitas. E enviou uma proposta de racionalização. Eles fizeram isso ao meio: deixaram um crachá com uma fita, além de suéteres verdes uniformes realmente foram costurados. Agora temos o uniforme do administrador. Os guardas de segurança apoiaram a piada e a introduziram nos regulamentos. Agora ela é obrigatória (calça, camisa, blusa, mas a blusa pode ser removida).

Além disso, nossos clientes costumavam reclamar de rotas tortas nos mapas antes de entrar em nosso data center do Compressor. Você obstrui o endereço e a estrada é mostrada incorretamente. Os visitantes acabaram taxiando da maneira errada, porque existe uma ferrovia e há um engarrafamento atrás dela, e você não pode dar a volta. No começo, queríamos pendurar placas na estrada. Existe um serviço desse tipo na cidade - sob os sinais usuais, coloque os amarelos adicionais, eles são considerados publicidade. E o preço deles é como um anúncio: na estrada Entusiastas, um sinal custa um milhão de rublos por ano. Em paralelo, escrevemos para o Yandex, e eles até responderam de repente. E deixou de ser ultrajante. Você pode até especificar diodos de porta: entrada através de alguns, saída através de outros.

Se você nos ler, o Google saberá: você ainda tem um problema e não sabemos quem contar sobre isso para ser ouvido.

Os links foram inseridos nas cartas de convite, não apenas para o endereço, mas para o endereço com a rota estabelecida a partir da localização geográfica do usuário. Como resultado, houve menos supervisão.

Projetores Gobo e outras pequenas coisas


Você sabe o que são projetores gobo? Também não sabíamos. De alguma forma, eles pensaram em marcar fileiras de racks. As estantes, é claro, são marcadas com marcações especiais destacáveis ​​rapidamente, mas podem ser vistas a uma distância de 1-2 metros. O salão em si tem 500 metros quadrados, então não há onde se perder. Portanto, no entanto, se aproximou da marcação das linhas. O brainstorm começou. Como rotular, o que e onde? No chão, na parede, placas no teto, etc. E então nosso colega viu que na Ikea havia adesivos abrasivos no chão antes, e então apareceram setas leves. Bem, decidimos reverter o caminho simples: vá para a "Ikea" e desligue um dos projetores para ver. Não foi possível obtê-lo: enquanto usávamos cadeiras, o vendedor perguntou o que estávamos fazendo. E ele imediatamente ajudou, dizendo que era um gobo. Acontece que este não é o próprio projetor, mas uma placa ou lente para uma imagem colorida. Este filtro é o gobo. Um projetor custa entre 40 mil rublos (existe uma lâmpada poderosa para uso diurno) e temos 14 linhas em cada um dos quatro corredores. Portanto, os adesivos estavam presos.

Também temos esquemas nas paredes desaparecendo ao longo dos anos. Trocamos por laminados, com bolsos especiais "costurados" para revisorro. No nosso caso, revizorro é o engenheiro-chefe, cujas funções incluem verificar a relevância de todos os esquemas localizados no data center. Portanto, todos os esquemas devem ser verificados anualmente e assinados por tal revisorro. E a presença de um pequeno compartimento especial no bolso do circuito facilita esse procedimento e não requer a substituição do circuito a cada três anos. Lucro!

Eles fizeram a limpeza rotativa do piso elevado por fora. Temos limpezas regulares, existem técnicas e tempos de limpeza. Mas das rodas de prateleiras pesadas ainda restam vestígios. Eles fizeram a limpeza. Agora estamos nervosos: a aparência não ficou muito mais precisa, mas o brilho apareceu sob certos ângulos em certas pessoas, bem, que têm suas próprias canetas de feltro a seu gosto. Agora, estamos pensando e procurando um pouco de química que embranque o chão e dê brilho. Para que nem as perguntas selecionadas tenham.

Você já viu racks de console? São mesas de buffet itinerante, mas, em vez de bebidas, existe um terminal para conexão ao rack. Assim, nessas prateleiras em balanço, as rodas caem e se calçam, como os carrinhos do supermercado. Cansado de nós incrivelmente. Como resultado, a única maneira possível de reanimar é comprar uma roda nova. E não era mais possível obter as rodas especificamente para nossos modelos, entrevistamos todos os contratados. Como resultado, eles mesmos projetaram o rack para si mesmos, concentrando-se na conveniência do movimento ao redor do salão e na manutenção. Acabou muito bem.

Havia uma história com meias sintéticas. Existe uma coisa dessas - pulseiras antiestáticas. É quando você vai ao rack, conecta a pulseira ao chão no rack e se comunica com o sistema de equalização em potencial. Portanto, o rack está aterrado, mas pode acontecer que o engenheiro não esteja aterrado. Colegas de locais de trabalho anteriores contaram como viram faíscas na vigilância por vídeo algumas vezes e decidimos obrigar todos a usá-las de acordo com as regras.

Incidentes críticos


Do sério, houve uma situação em que todos os chillers foram cortados de uma só vez. Nossos refrigeradores não são protegidos pela UPS, porque acreditamos em física e, como reserva de temperatura, temos uma piscina com água gelada. Se algo desligar, você não precisa de baterias para alimentar os chillers que resfriam a água, mas apenas a água fria em si, já pronta. Conveniente e simples, mas há uma nuance. Os chillers são equipados com automação de proteção, o que os desabilita com parâmetros perigosos da rede elétrica. Se a entrada estiver desativada, ligamos a DGU e os chillers são alimentados por elas. Tudo ficaria bem se não morássemos na Rússia. Tivemos rebaixamentos de rede muitas vezes, mas estava tudo bem. Mas uma vez que o salto foi nítido, primeiro para baixo, depois para cima e para baixo novamente - em poucos segundos os parâmetros de entrada mudaram cerca de 4 vezes. Os chillers desligam-se naturalmente. Primeiro tentamos ativá-los remotamente, mas eles se protegeram com muita confiabilidade, em uma emergência. Eu tive que mudar as pernas para ir ao telhado e ligá-las manualmente. O que é importante, de acordo com o padrão TierIII, é a razão legítima para interromper o datacenter. Não paramos, porque as pessoas estão no chão com a cabeça, e há uma broca com exercícios. Para isso, a interface do usuário nos enganava apenas regularmente para ter certeza sobre o Operacional TIII. Passamos a recertificação da interface do usuário no TIII Gold - Operational Sustainability. Não há nada mais legal no mercado comercial russo de data centers, exceto que nosso data center possui apenas um data center . Observo que é mais difícil recertificar do que obter um certificado do zero, uma vez que eles verificam o período anterior como se não estivessem em si mesmos, e são necessárias muito mais evidências.

Houve um incidente interessante com as câmeras. Decidimos recontar os pontos cegos, por exemplo, fizemos cruzamentos, construímos diagonais de ângulos de visão no plano e, de repente, encontramos uma zona morta de cerca de 30 centímetros por 15 metros, bem no centro de um dos corredores. Estreito e longo. Na próxima sala não há nenhuma. Aconteceu que a câmera PTZ se moveu lentamente ao longo dos anos, de modo que começou a aparecer cerca de um grau e meio para a esquerda do que o necessário na posição extrema.

Outro grande caso foi publicado em um post sobre a substituição de reparo do DDIBP .

Referências


Source: https://habr.com/ru/post/pt458734/


All Articles