Saya persembahkan pos ini untuk orang-orang yang berbohong dalam sertifikat, karena itu kami hampir memasang kembang api di aula kami.
Cerita-ceritanya sudah lebih dari empat tahun, tetapi saya menerbitkan sekarang, karena NDA telah berakhir. Kemudian kami menyadari bahwa kami memuat pusat data (yang kami sewa keluar) hampir sepenuhnya, dan bahwa efisiensi energinya tidak banyak meningkat. Hipotesis sebelumnya adalah bahwa semakin kuat kita mengisinya, semakin baik, karena insinyur didistribusikan kepada semua orang. Tapi ternyata kami menipu diri sendiri dalam hal ini, dan dengan beban yang baik, ada kerugian di suatu tempat. Kami bekerja di banyak bidang, tetapi tim pemberani kami mulai mendingin.
Kehidupan nyata dari pusat data sedikit berbeda dari proyek. Konstan mengacau dari departemen layanan untuk meningkatkan efisiensi dan mengoptimalkan pengaturan untuk tugas-tugas baru. Di sini mengambil posisi tengah mitos. Dalam praktiknya, tidak ada, distribusi beban tidak merata, di suatu tempat padat, di suatu tempat kosong. Jadi saya harus mengkonfigurasi ulang sesuatu untuk efisiensi energi yang lebih baik.
Kompresor pusat data kami diperlukan untuk berbagai pelanggan. Oleh karena itu, di tengah-tengah rak dua-empat-kilowatt biasa bisa sangat 23-kilowatt atau lebih. Dengan demikian, pendingin udara dibuat untuk mendinginkan mereka, dan melalui rak yang kurang kuat, udara hanya lewat.
Hipotesis kedua adalah bahwa koridor hangat dan dingin tidak bercampur. Setelah pengukuran, saya dapat mengatakan bahwa ini adalah ilusi, dan aerodinamika nyata berbeda dari model dalam hampir semua hal.
Survei
Pertama-tama kami mulai memperhatikan arus udara di aula. Mengapa kamu masuk ke sana? Karena mereka mengerti bahwa pusat data dirancang untuk lima hingga enam kW per rak, tetapi mereka tahu bahwa mereka sebenarnya dari 0 hingga 25 kW. Hampir tidak mungkin untuk mengatur semua ini dengan ubin: pengukuran pertama menunjukkan bahwa mereka hampir sama lulus. Dan ubin pada 25 kW tidak ada sama sekali, mereka harus tidak hanya kosong, tetapi dengan cairan vakum.
Kami membeli anemometer dan mulai mengukur aliran di antara rak dan di atas rak. Secara umum, perlu untuk bekerja dengannya sesuai dengan GOST dan banyak standar yang sulit dicapai tanpa menghentikan aula. Kami tidak tertarik pada keakuratan, tetapi pada gambaran mendasar. Artinya, mereka mengukur sekitar.
Dengan mengukur 100 persen udara yang keluar dari ubin, 60 persen masuk ke rak, sisanya terbang lewat. Hal ini disebabkan oleh fakta bahwa ada rak berat 15-25 kW, di mana pendingin dibangun.
Kami tidak dapat mengambil dan memadamkan pendingin udara, karena akan sangat hangat di rak-rak hangat di area server atas. Pada saat ini, kami memahami bahwa perlu mengisolasi sesuatu dari sesuatu, sehingga udara tidak melompat dari baris ke baris dan bahwa pertukaran panas di blok memang terjadi.
Sejalan dengan ini, kami bertanya pada diri sendiri apakah itu layak secara finansial.
Kami terkejut menemukan bahwa kami umumnya memiliki konsumsi daya dari pusat data, tetapi kami tidak dapat menghitung fancoils untuk ruangan tertentu. Yaitu, secara analitis kita bisa, tetapi pada kenyataannya - tidak. Dan kami tidak dapat mengevaluasi penghematan. Tugas menjadi lebih menarik dan lebih menarik. Jika kita menghemat 10% dari daya AC - berapa banyak uang yang dapat disisihkan untuk isolasi? Bagaimana cara menghitungnya?
Kami pergi ke insinyur otomatisasi yang menyelesaikan sistem pemantauan. Terima kasih kepada mereka: mereka memiliki semua sensor, semua yang diperlukan adalah menambahkan kode. Mereka mulai secara terpisah menampilkan pendingin, UPS, pencahayaan. Dengan Pribluda yang baru, menjadi mungkin untuk mengamati bagaimana situasi berubah pada elemen-elemen sistem.
Eksperimen dengan tirai
Secara paralel, kami memulai percobaan dengan tirai (pagar). Kami memutuskan untuk memasangnya pada pin nampan kabel (tidak ada yang lain), karena mereka harus ringan. Dengan kanopi atau sisir memutuskan dengan cepat.
Penyergapannya adalah bahwa sebelum itu kami bekerja dengan sekelompok vendor. Setiap orang memiliki solusi untuk pusat data perusahaan mereka sendiri, tetapi untuk pusat data komersial tidak ada solusi siap pakai pada dasarnya. Pelanggan kami datang dan pergi terus-menerus. Kami adalah salah satu dari sedikit pusat data "berat" tanpa batas lebar rak dengan kemampuan untuk menerima server perontokan ini hingga 25 kW. Tidak ada perencanaan infrastruktur sebelumnya. Artinya, jika kita mengambil sistem modular untuk caching vendor - akan selalu ada lubang selama dua bulan. Artinya, pada prinsipnya ruang rapat tidak akan pernah hemat energi.
Kami memutuskan untuk melakukannya sendiri, karena kami memiliki teknisi sendiri.
Hal pertama yang mereka ambil adalah kaset dari kulkas industri. Ini adalah ingus polietilen fleksibel yang dapat Anda atasi. Anda mungkin melihat mereka di suatu tempat di pintu masuk ke departemen daging dari toko kelontong terbesar. Mereka mulai mencari bahan yang tidak beracun dan tidak mudah terbakar. Ditemukan, dibeli dalam dua baris. Terselubung, mulai memperhatikan apa yang terjadi.
Mereka mengerti bahwa itu tidak terlalu. Tetapi ternyata secara langsung sangat sangat tidak umum. Mereka mulai, seperti pasta, mengepak di aliran sungai. Kaset magnetik yang ditemukan seperti magnet kulkas. Mereka menempelkannya pada strip-strip ini, menempel satu sama lain, temboknya ternyata agak monolitik.
Mereka mulai mencari tahu apa yang akan terjadi di aula.
Kami pergi ke pembangun, menunjukkan proyek mereka. Mereka terlihat, kata mereka: gorden Anda adalah sesuatu yang sangat berat. 700 kilogram di seluruh aula. Pergilah, kata mereka, orang baik, ke neraka. Lebih tepatnya, ke tim SCS. Biarkan mereka mempertimbangkan berapa banyak mie yang mereka miliki di nampan, karena maksimum 120 kg per meter persegi.
SCS berkata: Ingat, satu pelanggan besar mendatangi kami? Dia memiliki puluhan ribu pelabuhan di satu aula. Di tepinya, mashzola masih normal, tetapi tidak akan keluar lebih dekat ke salib: baki akan jatuh.
Lebih banyak pembangun meminta sertifikat untuk materi tersebut. Saya perhatikan bahwa sebelum itu kami mengerjakan pembebasan bersyarat dari pemasok, karena itu hanya percobaan. Kami beralih ke pemasok ini, mengatakan: OK, siap masuk ke versi beta, mari kita ambil semua kertas. Mereka mengirim sesuatu dari pola yang tidak terlalu mapan.
Kami berkata: dengarkan, di mana Anda mendapatkan selembar kertas ini? Mereka: mengirimkannya kepada kami oleh pabrikan Cina kami sebagai tanggapan atas permintaan. Di selembar kertas, benda ini tidak terbakar sama sekali.
Pada saat ini, kami menyadari bahwa sudah waktunya untuk berhenti dan memeriksa fakta. Kami pergi ke gadis-gadis dari keselamatan kebakaran pusat data, mereka memanggil kami sebuah laboratorium yang memeriksa mudah terbakar. Ini adalah uang dan persyaratan terestrial yang cukup (walaupun kami mengutuk semuanya sampai kami membuat jumlah kertas yang tepat). Di sana, para ilmuwan mengatakan: bawa materi, kami akan melakukan tes.
Sebagai kesimpulan, ada tertulis bahwa sekitar 50 gram abu tersisa dari satu kilogram zat. Sisanya terbakar dengan cerah, mengalir dan sangat mendukung pembakaran di genangan air.
Kami mengerti - ada baiknya mereka tidak membeli. Mereka mulai mencari bahan lain.
Ditemukan polikarbonat. Ternyata lebih sulit. Lembar transparan - dua mm, pintu - dari empat milimeter. Bahkan, itu plexiglass. Bersama dengan pabrikan, kami memulai percakapan dengan keamanan kebakaran: berikan sertifikat. Mereka mengirim. Ditandatangani oleh institut yang sama. Kami memanggil di sana, kami berkata: baik, mengapa, teman-teman, apakah Anda memeriksa ini?
Mereka berkata: ya, benar. Awalnya mereka membakarnya di rumah, lalu membawanya hanya untuk tes. Sekitar 930 gram abu tersisa dari satu kilogram material (jika dibakar dengan kompor). Mencair dan menetes, tetapi genangan air tidak akan terbakar.
Segera periksa magnet kami (mereka berada di lapisan polimer). Anehnya, mereka terbakar dengan buruk.
Majelis
Dari sini kita mulai mengumpulkan. Polikarbonat indah karena lebih ringan dari polietilen, yang cenderung jauh lebih buruk. Benar, mereka membawa lembaran 2,5 kali 3 meter, dan pemasok tidak peduli harus berbuat apa. Dan kita membutuhkan 2,8 lebar 20-25 sentimeter. Pintu dikirim ke kantor yang memotong lembaran sebagaimana mestinya. Dan lamela dipotong sendiri. Proses pemotongan itu sendiri biayanya dua kali lipat dari satu lembar.
Inilah yang terjadi:
Intinya - sistem caching terbayar kurang dari setahun. Kami menyimpan ini pada 200–250 kW terus-menerus menggunakan daya koil kipas. Berapa banyak lagi pada pendingin, seberapa tepatnya - kita tidak tahu. Server menghisap dengan kecepatan konstan, pukulan fancoils. Dan chiller dihidupkan dan dimatikan dengan sisir: sulit untuk mengekstrak data darinya. Tidak mungkin untuk menghentikan ruang mashroom untuk tes.
Kami senang bahwa pada suatu waktu ada aturan untuk meletakkan rak 5x5 dalam modul sehingga konsumsi rata-rata mereka adalah maksimum enam kW. Artinya, kehangatan tidak terkonsentrasi oleh pulau, tetapi didistribusikan ke seluruh aula. Tetapi ada situasi di mana 10 buah rak 15-kilowatt berada di dekatnya, tetapi sebaliknya ada rak seratus jam. Dia kedinginan. Seimbang.
Di mana tidak ada rak, Anda perlu pagar ke lantai.
Dan kami juga memiliki beberapa pelanggan yang terisolasi dengan kisi-kisi. Mereka juga memiliki beberapa fitur.
Mereka memotong lamella, karena lebar rak tidak tetap, dan frekuensi sisir pengencang ditentukan: tiga atau empat cm baik ke kanan atau kiri akan selalu. Jika Anda memiliki blok 600 di bawah konter, maka dengan probabilitas 85 persen itu tidak akan naik. Dan lama dan pendek lama hidup berdampingan dan tetap bersatu. Kadang-kadang kita memotong lamella dengan huruf G di sepanjang kontur rak.
Sensor
Sebelum mengurangi kekuatan kumparan kipas, perlu untuk mengatur pemantauan suhu yang sangat akurat di berbagai titik di aula agar tidak terkena kejutan. Jadi ada sensor nirkabel. Wired - pada setiap baris Anda perlu menggantung barang Anda sendiri untuk melintasi sensor ini dan kadang-kadang kabel ekstensi di atasnya. Itu berubah menjadi karangan bunga. Terlalu buruk Dan ketika kabel-kabel ini memasuki sel-sel pelanggan, penjaga keamanan segera menjadi bersemangat dan meminta untuk menjelaskan dengan sertifikat apa yang dihapus melalui kabel-kabel ini. Saraf keamanan harus dilindungi. Untuk beberapa alasan, mereka tidak menyentuh sensor nirkabel.
Dan lebih banyak rak datang dan pergi. Sensor pada magnet lebih mudah dipasang ulang, karena setiap kali magnet harus digantung lebih tinggi atau lebih rendah. Jika server berada di sepertiga bagian bawah rak - Anda perlu menggantungnya, dan tidak sesuai dengan standar satu setengah meter dari lantai di pintu rak di koridor dingin. Tidak ada gunanya mengukur di sana, perlu untuk mengukur apa yang ada di setrika.
Satu sensor pada tiga rak - lebih sering Anda tidak dapat menggantung. Suhunya tidak berbeda. Mereka takut bahwa akan ada tarikan udara melalui rak itu sendiri - itu tidak terjadi. Tapi kami masih memberi udara dingin lebih sedikit dari nilai yang dihitung. Kami membuat jendela di lamelera 3, 7 dan 12, di atas meja kami membuat lubang. Kami memasukkan anemometer ke dalamnya saat memintas: kami melihat aliran mengalir ke tempat yang diperlukan.
Kemudian mereka menggantungkan tali-tali yang cerah: latihan kuno untuk penembak jitu. Itu terlihat aneh, tetapi memungkinkan Anda untuk mendeteksi masalah yang mungkin terjadi dengan lebih cepat.
Lucu
Sementara kami melakukan semua ini dalam diam, seorang vendor datang untuk menghasilkan seorang insinyur untuk pusat data. Dia berkata: mari kita datang dan memberi tahu kami tentang efisiensi energi. Mereka tiba, mulai berbicara tentang aula yang tidak optimal, arus udara. Kami mengangguk penuh pengertian. Karena kita sudah tiga tahun berdiri.
Mereka menggantung tiga sensor di setiap rak. Gambar pemantauan memar, indah. Lebih dari separuh solusi ini adalah perangkat lunak. Pada tingkat siaga di Zabbix, tetapi berpemilik dan sangat mahal. Serangannya adalah mereka memiliki sensor, perangkat lunak, dan kemudian mereka mencari kontraktor di tempat: tidak ada vendor untuk kandang.
Ternyata tangan mereka lima sampai tujuh kali lebih mahal daripada yang kami lakukan.
Referensi