Este é um tour fotográfico do data center de Moscou DataSpace, que abriga nossos equipamentos. Mostramos os sistemas de segurança do data center, racks de servidor e o próprio hardware.
Atenção - há muitas fotos sob o corte.
Fornecemos serviços de aluguel de infraestrutura virtual em 1 de alto volume desde 2012. Nosso projeto começou a funcionar em São Petersburgo, mas com o tempo expandimos nossa geografia. Hoje, nosso hardware está localizado em quatro data centers:
Xelent ,
Dataspace ,
Ahost e
beCloud . O primeiro é em São Petersburgo, o segundo em Moscou, o terceiro em Alma-Ata (Cazaquistão), o quarto em Minsk (Bielorrússia).
Em todos esses data centers, aproximadamente o mesmo equipamento é instalado. E então contaremos como ele está localizado no data center de Moscou.
Segurança do Data Center
Vamos começar o show com o perímetro externo do data center do DataSpace. O edifício é cercado por uma cerca de malha fina de cinco metros com espigões giratórios na parte superior e proteção antimina. As passagens para o território são fechadas por catracas de altura total. Ao lado deles estão postagens de segurança.

Para "ultrapassar a barreira", é necessário apresentar uma chave sem contato e passar a identificação no ponto de verificação. Se um funcionário esqueceu seu ID (passaporte), ele terá que ir para casa com ele.

A próxima “fronteira” é a cabine de trava blindada na área de recepção. Existem leitores de cartão de acesso e scanners de impressão manual nas cabines.
Entre as cabines, você pode ver duas placas de Nível III. O Dataspace é o primeiro data center na Rússia a
passar por três estágios de certificação Tier III do Uptime Institute.

Na foto acima - o scanner de retina. Eles são instalados na entrada de todas as salas com equipamentos críticos da infraestrutura de engenharia do centro de processamento. Além dos scanners, o acesso ainda é controlado por chaves eletrônicas.
Além disso, a vigilância por vídeo é realizada em todo o data center. Em todo o complexo, mais de cem câmeras de vídeo foram instaladas, cujos registros foram armazenados por pelo menos cinco anos.

O data center oferece a oportunidade de organizar um espaço protegido (célula) dedicado.
Nosso equipamento está localizado em racks DataSpace comuns. Alugamos racks como um todo. Como temos uma grande quantidade de equipamentos, apenas nossos especialistas devem ter acesso a eles.
Energia e refrigeração
Uma das nuances mais notáveis no salão é o aterramento. O barramento é de
cobre e está conectado a um loop de aterramento externo .

De acordo com os requisitos do data center, todos os equipamentos que requerem uma linha de aterramento separada para sua operação normal são aterrados, de acordo com
GOST 12.1.030-81 (sistema de normas de segurança do trabalho).

O trabalho de conexão do equipamento à rede de fornecimento de energia e aos barramentos de aterramento de proteção é realizado exclusivamente pelos funcionários do data center. Todos os fios estão marcados.

A distribuição aleatória dos cabos leva à perda de fluxo de ar, o que pode causar superaquecimento e danificá-lo. Para eliminar o superaquecimento (e cumprir os padrões corporativos para a qualidade do trabalho realizado) no DataSpace, os cabos são dispostos em bandejas especiais. Como um bônus, o gerenciamento eficaz de cabos ajuda a reduzir o consumo de energia dos sistemas de ar condicionado.

Como padrão, cada rack recebe dois feixes de energia protegidos independentes. Os cabos de alimentação são colocados sob um piso elevado, cuja altura é de 60 cm, o piso elevado pode ser transformado e a disposição das placas pode ser alterada. Isso possibilita, se necessário, reorganizar os racks com o equipamento.

Nas salas de computadores do data center, corredores frios são organizados. Destes, o equipamento recebe ar para resfriamento e sopra em direção ao corredor quente. O corredor frio é separado do quente para evitar a mistura de ar e, novamente, reduzir os custos de ar condicionado.
A propósito, o parâmetro de eficiência energética do data center DataSpace (esse parâmetro é chamado de PUE) é 1,5. É igual à proporção entre a energia total consumida pelo data center e a energia consumida pelo ferro nos racks. Para comparação, o PUE médio na Europa é de 1,8.
Além do gerenciamento de cabos e corredores frios, a tecnologia Freecooling ajuda a atingir esse indicador de eficiência energética do DataSpace. O data center desliga os chillers no inverno e esfria as casas de máquinas devido ao ar frio da rua. Isso pode reduzir significativamente o consumo de energia e as contas de eletricidade.
Racks e equipamentos
O data center possui doze salas de servidores com uma área de 250 metros quadrados. metros cada. Eles são todos iguais e estão no segundo, terceiro e quarto andares. Cada salão possui aproximadamente 88 racks.
Cada cliente do datacenter possui suas próprias chaves para os racks de equipamentos. Os funcionários do DataSpace têm uma duplicata; portanto, se você precisar fazer uma operação simples com hardware: substitua o disco, troque a conexão, reconfigure o equipamento, não é necessário enviar o seu especialista. Você pode perguntar a engenheiros no local sobre isso - essa é uma prática normal, que é fornecida como parte do suporte ao cliente para data centers.

Na foto abaixo, há uma mesa elevatória na qual os servidores, comutadores e outros equipamentos são movidos. Sem esses "carrinhos", o peso de cada chassi individual com discos pode ser de dezenas de quilos. Se um grande suprimento de ferro chegar, os funcionários do datacenter poderão fornecer esses carrinhos (e outras ferramentas de trabalho) para uso.
A seguir, mostramos o próprio ferro . Vamos começar com o sistema de armazenamento NetApp E2860. O número máximo de discos suportados é de 60 peças. Até agora, 30 slots estão ocupados nele - existem 8 unidades de terabyte. Também temos um modelo anterior de armazenamento - NetApp E2760.

Estes são sistemas bastante lentos, porque são usados como armazenamento a frio - os backups estão lá.

Na parte traseira do NetApp E2860 estão os controladores e fontes de alimentação.

Outro sistema de armazenamento instalado é o NetApp FAS2554 com uma prateleira de expansão DS4246. Existem 24 discos SATA nele. Cada um deles tem capacidade para 4 TB. Esse armazenamento também é reservado para backups e armazenamentos de dados "lentos".

Cisco UCS FI 6296 - comutadores do complexo Cisco UCS. Esses são os dispositivos centrais responsáveis por conectar todos os servidores em rack às redes 10GbE e Fibre Channel. O sistema possui 48 portas e slots fixos para três módulos de expansão, cada um dos quais adiciona outras 16 portas Ethernet. Ao mesmo tempo, as portas são multifuncionais - elas suportam a tecnologia FCoE (Fibre Channel over Ethernet).

As cestas do servidor Cisco UCS 5108 com os servidores blade B200 M3, B200 M4 e B480 M5 se conectam ao Cisco UCS FI 6296. Em particular, o B200 M3 possui dois processadores Intel Xeon E5-2690 v2 de 10 núcleos e o B200 M4 possui dois processadores Intel Xeon E5-2698 v4 de 20 núcleos.

Isso mostra o NetApp E2860 instalado na parte superior do rack e os dois cestos Cisco UCS 5108 na parte inferior.

Armazenamento NetApp AFF300, especialmente otimizado para trabalhar com unidades SSD. Acima, há uma prateleira DS224C com 24 SSDs de 7,6 TB.
No total, o sistema NetApp AFF300 pode servir até 30 PB de espaço em disco em unidades de estado sólido rápidas.
O sistema é controlado por dois processadores Intel Broadwell-DE de 16 núcleos. Sua frequência é de 1,70 GHz. Cada controlador possui quatro módulos de RAM RDIMM ECC de 32 GB (total de 128 GB). 120 GB são alocados para o cache e os oito restantes são para memória NVRAM não volátil.

Na foto acima - armazenamento NetApp FAS8040 com prateleiras de expansão DS2246. Estas são prateleiras híbridas com unidades SAS de 1,2 TB. As matrizes da série FAS8000 também possuem CPUs multiprocessadoras da Intel e NVRAM. Eles garantem um nível de disponibilidade do sistema de pelo menos 99,999%.
Este sistema de armazenamento usa SSDs, que atuam como um pool flash.

É assim que as prateleiras de expansão NetApp FAS8040 e DS2246 ficam na parte traseira com cabos de conexão.

E, finalmente, em nossos racks, há switches de cluster NetApp CN1610. Eles são usados para combinar os controladores FAS8040, FAS8080, AFF300 em um único cluster de armazenamento (ONTAP em Cluster).
Isso conclui nosso tour de fotos na nuvem 1cloud.
Se você tiver dúvidas sobre a estrutura e a arquitetura da nuvem, escreva-nos para o e-mail: support@1cloud.ru . Nossos especialistas ajudarão e aconselharão.
Algumas postagens do nosso blog corporativo: