يعتمد عمل مسؤول النظام على الاعتقاد بأن مهندسي مركز البيانات يعرفون وظيفتهم. نحن نبني مجموعات تجاوز الفشل ، ولكن ما تكلفة هذا الفشل إذا خرجت الطاقة؟ ما الفرق الذي يحدثه في سرعة معالجة الخادم للطلب إذا انخفضت القناة من مركز البيانات إلى نقطة تبادل الحركة؟ كيفية رفع الخادم إذا كان محموما جسديا؟
وأود أن لا أصدق ، ولكن لمعرفة كيف يتم إنشاء التسامح مع الخطأ بالضبط على مستوى الحديد. من أين تأتي موثوقية المعدات "التسعة" ، والتي نتحدث عنها عند صياغة SLA Kubernetesov. ماذا يحدث عندما يحترق المشروع بالمعنى الحقيقي للكلمة.
كنا محظوظين بالتجول في مركز بيانات Selectel في اليوم الثالث من Slurm DevOps ، للنظر في قدس الأقداس وحتى التقاط بعض الصور للذاكرة. سألنا أيضًا عن أساطير الشركة التي لا يخبرها موظفو Selectel مطلقًا. وكما اتضح ، هم أنفسهم لا يتذكرون.
ارتبطت شركة Southbridge بشركة Selectel لشراكة طويلة الأمد. نحن ندعم الآن 58 مشروعًا مستضافة على خوادم المزود. عندما يحتاج العميل إلى خادم موجود في روسيا ، فإننا نوصي شركة Selectel ، لأنه من خلال التجربة نعتبره المزود الأكثر موثوقية وملاءمة للبنية التحتية لتكنولوجيا المعلومات.
دعنا نذهب!
أثناء صعودي إلى الطابق الرابع - استعنف المصعدان الأكثر صعوبة ، صعدت الألعاب الرياضية إلى الطابق العلوي - ذكّرني زملاء من ساوثبريدج بأنه يجب عليّ أن أتعلم بالتأكيد عن أساطير Selectel: حول الذئب الضار ، عن الروح المضطربة التي تجولت وعُملت عند بناء مبنى جديد لمركز البيانات. لطالما كنت مهتمة بأساطير الشركات الكبيرة ، التي بقيت من المرحلة المضطربة للولادة والنمو الأول.
في البداية ، كان لدى الشركة مركز بيانات واحد على Flower 1 في سان بطرسبرغ. خدم مركز البيانات الشركة فكونتاكتي. رأيناه من النافذة عندما صعدنا إلى الطابق الرابع. لقد توقف ذات مرة عن التحديث منذ تسع إلى عشر سنوات - ومنذ ذلك الحين يعمل باستمرار. من حيث الموثوقية ، فإنه ينتمي إلى المستوى الثاني.
معلومات للنظر فيها (ج) "لحظات الربيع السبعة عشر":
المؤشر الرئيسي لمركز البيانات هو التسامح مع الخطأ. هناك 4 فئات في المجموع - من المستوى الأول إلى المستوى الرابع. الانتماء إلى فئة معينة يشير إلى مستوى التكرار والأمن المادي والموثوقية.
المستوى الأول (التكرار - التسامح مع الأعطال - 99.671٪) - لا توجد طوابق مرتفعة في مركز البيانات ، ولا توجد مصادر طاقة احتياطية وإمدادات طاقة غير متقطعة ، والبنية التحتية الهندسية غير محفوظة. أثناء عملية إصلاح مجدولة أو طارئة ، يتوقف مركز البيانات.
المستوى الثاني (التكرار - (N + 1) ، التسامح مع الأعطال - 99.749٪) - يوجد مستوى صغير من التكرار ، والأرضيات المرتفعة ومصادر الطاقة الاحتياطية مثبتة في مركز البيانات ، وتتسبب أعمال الإصلاح في توقف مركز البيانات عن العمل ، كما في المستوى الأول.
المستوى الثالث (التكرار - 2N ، تحمل الأخطاء - 99.982٪) - من الممكن القيام بأعمال الإصلاح (استبدال مكونات النظام ، إضافة وإزالة المعدات الفاشلة) دون إيقاف مركز البيانات. جميع الأنظمة محفوظة ، وهناك العديد من قنوات توزيع الطاقة والتبريد.
المستوى الرابع (التكرار - 2 (N + 1) ، التسامح مع الأخطاء - 99،995٪) - التكرار المزدوج والتكرار للنظام مطلوبان. من الممكن القيام بأي عمل دون إيقاف عمل مركز البيانات. الأنظمة الهندسية مزدوجة الحقوق محفوظة ، أي أن النظم الأساسية والثانوية تتكرر.
كان أمامنا مصبغة قوية ، باب مزود بقفل إلكتروني وعجلة دولاب كاملة الارتفاع مصنوعة من مقاطع معدنية سميكة. وخلفها مساحة مركز البيانات نفسها.
مركز البيانات الذي كنا فيه هو أحدث من مركز البيانات في الحي - تم بناؤه في عام 2015. وهو ينتمي إلى فئة المستوى الثالث.
تضم Now Selectel مركزين للتشغيل في Tsvetochnaya ، ثلاثة آخرين في Dubrovka ، ومركزين للبيانات في موسكو ، والتي تعتبر مركز بيانات واحد في الشركة. ستة فقط.
يحتوي المبنى على أربعة طوابق. تقع المكاتب في الطابق الأول وتقع بعض المعدات. تم تخصيص الطابق الرابع جزئيًا للمكاتب ، ولكن معظمه يشغله مبنى فني.
قبل دخول المزود هنا ، كان الإنتاج موجودًا في المبنى. لا يتذكر موظفو مركز البيانات أنفسهم إنتاج ما هو بالضبط - سواء الفيلم أو الملابس. اشترت الشركة المبنى من أجل القضاء على مخاطر العلاقات العقارية المعقدة إذا كان المبنى مملوكًا لطرف ثالث.
على الرغم من حقيقة أن الإنتاج كان موجودًا هنا ، إلا أن هناك أدوات آلية وآلات ثقيلة أخرى ، فقد عززت Selectel الأرضيات. حتى في قاعة المؤتمرات في الطابق الأرضي ، حيث حدث Slurm DevOps المكثف ( 1 ، 2 ، 3 ) ، فإننا نولي الاهتمام للدعم المعزز.
نذهب إلى مركز البيانات فقط في أغلفة الأحذية - القاعدة المعتادة لمثل هذه الأماكن. لوضع onuchi البلاستيك يكلف "رف الأحذية". نحن بصدق مشربة. قدم لنا المصاحب خيارًا - لبس الحذاء بأنفسنا أو تكليف الأطراف بالجهاز الشراعي.
كان خيارنا يمكن التنبؤ به. إيجور أوليمسكي ، مدير Southbridge: "نحن مع الأتمتة" . أنتون تاراسوف ، مسؤول Southbridge: "إذا كان الأمر كذلك مع الجوارب ، سأكون أسعد شخص على هذا الكوكب . "
بينما كانوا يرتدون أحذية ، كان مطورو ساوثبريدج يتساءلون بنشاط عن مكان خوادم VMware. كان الجميع مهتمًا بمعرفة المعدات التي تعمل بها هذه التقنية.
بمجرد دخولهم المجال التقني ، أعلنوا على الفور القواعد: "نحن لا نأكل ، نحن لا نشرب ، لا ندخن. نحن لا نضع أيدينا في أي مكان ، في أي الدروع ، في أي رفوف ، مكيفات الهواء ، أجهزة التحكم عن بعد. نحن نمسك بأيدينا أمامنا ، مثل الديناصور. "
في الطابق الرابع هناك ثلاث غرف خادم. جميع المعدات في الطابق المرتفع. من الضروري أن يتدفق الهواء البارد من الأسفل وأيضًا الاتصالات التي لا تحتاج إلى وصول مستمر. هذه هي خطوط الكهرباء وخطوط أنابيب التبريد.
بمجرد دخولنا إلى غرفة الخادم الصغيرة ، أصابتنا رسالة. إن شخصية الرسوم الكاريكاتورية الشهيرة مع نشارة الخشب في رأسه ستقول بالتأكيد: "هذا جيد ، جيد ، جيد ، لسبب وجيه!" . نظرًا لأننا لم نعتد على ذلك ، بالكاد سمعنا بعضنا البعض في الدقائق الأولى والثانية. توضيحات الدليل ، أيضا ، بالكاد خمنت ، واضطررت إلى الحشد أقرب.
حول رفوف ، رفوف وحتى المزيد من الرفوف ... تصطف في صفوف صارمة. في مراكز بيانات الخادم ، التقينا بمختلف الرتب: من خلال 10 رفوف ، 12 ، 20 ، 30. اعتمادًا على تكوين الغرفة ، والمنطقة المستأجرة من قبل العميل ، والمهام.
في مركز البيانات في جميع غرف الخوادم في نظام التبريد ، يبدو الأمر كما يلي: من الأعلى وعلى الجوانب ، تكون المساحة المبردة محدودة بهيكل الرف ، ويتم إغلاق الجزء الأمامي بالأبواب المثقوبة. تعمل مكيفات الهواء على دفع الهواء البارد تحت الأرضية المرتفعة - والهواء يرتفع تحت الضغط في الرفوف.
يكفي أن تذهب بين الصفوف لتشعر كيف تنخفض درجة حرارة الهواء بحدة بمقدار خمس درجات ، يمكنك أن تشعر بحدود درجة الحرارة. تم تركيب الوصلات في الأرضية المرتفعة بإحكام بحيث لا يوجد مكان يسير فيه الهواء المكيف ، باستثناء المسار المخصص خصيصًا للتبريد.
في الخادم نفسه ، يتم الحفاظ على درجة الحرارة في مكان ما حوالي 22 ± 2 درجة مئوية. في الممر "البارد" ، يمكن أن تنخفض درجة الحرارة إلى 16-17 درجة. كان هناك ممران "باردان" في غرفة الخادم الصغيرة. تبعا لذلك ، تسمى الممرات بينهما "الساخنة". إنها أكثر دفئًا قليلاً من غرفة الخادم المتوسطة - يمر الهواء عبر الرفوف ويسخن من الجهاز.
هناك رفوف للإيجار للعملاء. يقوم المهندسون بتوصيل الطاقة - يقوم العميل بالاتصال بالمعدات ويقوم بما يريد ، في إطار اللوائح والتشريعات. رفوف يمكن أن تكون مستأجرة مختلفة. ما يصل إلى 47 وحدة ، نصف ، أربعة أقسام. يتم فصلها جسديا - يتم استخدام أقفال مختلفة. يمكنك استئجار 10 وحدات فقط. الذي لديه القليل جدا من المعدات ، وهذا سيكون كافيا تماما. وفقا لذلك ، أقل قوة - اتضح أرخص.
إذا كان العميل يستأجر ، على سبيل المثال ، "ربع" في القسم السفلي وتحتاج إلى وضع الكابل ، فسيتم سحبه عبر قناة معدنية خاصة. ولن يتمكن العملاء الموجودون في الأجزاء العلوية من الحامل من الوصول إلى اتصالات الآخرين بأي شكل من الأشكال: لا في الطاقة ولا للنحاس ولا للبصرية.
في غرفة الخادم هي مكيفات الهواء في كمية ثلاث قطع. اثنان منهم فقط العمل. إذا تم إخراج أحد أجهزة تكييف الهواء للصيانة أو في حالة حدوث عطل ، فسيقوم المهندسون بتشغيل الجهاز الإضافي. هذا المخزون الاحتياطي هو متطلبات مواصفات المستوى الثالث.
على سبيل المثال ، هناك امدادات الطاقة غير المنقطعة. لنفترض أن هناك عددًا معينًا منها ، لكن تعمل 6. يمكن أن تعمل غرفة الخادم لمدة ساعة على البطاريات إذا توقفت الكهرباء عن التدفق إلى مركز البيانات. لكن إذا تعطلت 6 وحدات UPS افتراضيًا ، فسيقوم المهندسون بتشغيل ست وحدات أخرى. يوجد دائمًا ضعف عدد العقد في مركز البيانات من أجل الموثوقية.
يمكن أن يستهلك مركز البيانات هذا للمشروع ما يصل إلى 10 ميجاوات. ولكن الآن لا يوجد سوى 1.5. حتى الآن ، يتم استخدام الطابق الرابع فقط للمعدات - الثاني والثالث في مرحلة البناء. والرابع لا يزال غير ممتلئ بالكامل: إنه مصمم ل 250 رف ، و 200 مشغول ، وهناك مجال للنمو.
في المجموع ، يستخدم Selectel 14.4 ميجاوات في جميع مراكز البيانات. رف في العملية 1200.
بالإضافة إلى الرفوف الرئيسية ، والتي تُستخدم في العديد من المشاريع ، وبشكل أساسي للإيجار للعملاء ، توجد رفوف الخدمة في رفوف الخادم ، حيث يتم تثبيت معدات Selectel فقط. هناك رفوف الصليب للاتصال السلبي. فهي بدون كهرباء ، فقط الألياف الضوئية - لتوصيل المعدات بين المنصات وبين الغرف. تحتوي كل غرفة خادم على نفس الخزانة ذات الصلبان. يمكن أن يتقاطع Cross إلى غرفة أخرى أو إلى غرفة خوادم أخرى في الطابق الأرضي ، بمجرد أن يتم بناؤه ، يمكنه الانتقال إلى مركز بيانات مجاور أو حتى إلى مركز بيانات في Dubrovka.
وتمتلك الشركة العديد من هذه الألياف. إذا تمت مقاطعة أحدهم ، فسيبدأ مركز البيانات العمل على الآخر دون توقف مؤقت. جميع المسارات التي وضعت دائما محفوظة.
إذا قاموا بإجراء اتصال بين مركز البيانات هذا والمركز المجاور ، فسيقود المهندسون رابطًا واحدًا عبر الصليب عبر الهواء بين مراكز البيانات ، بينما يؤدي الرابط الثاني عبر المجاري عبر صليب آخر. وبغض النظر عما يحدث ، ستكون هناك دائمًا قناة احتياطية.
نظرًا لوجود الكثير من المعدات في مركز البيانات ، يراقب الموظفون بصرامة السلامة من الحرائق. يحتوي مركز البيانات على عدة سيناريوهات للتعامل مع الحرائق. تحتوي Selectel على طفايات حريق في كل غرفة ، سواء المكتبية أو الفنية. ويتم تدريب الناس على وجه التحديد للعمل معهم. إذا كانت النار محلية ، يمكنك التعامل معها بنفسك.
ولكن إذا ما اشتعلت النيران بشدة ، على سبيل المثال ، مزود الطاقة في الخادم أو دائرة الضاغط بالزيت ، فلا يمكن لطفايات الحريق دائمًا التعامل معها. لمثل هذه الحالات ، يحتوي مركز البيانات على محطة إطفاء حريق غاز. منه ، الأنابيب الصفراء الجري في السقف في كل غرفة.
في حريق خطير ، يتم إخراج جميع الأشخاص من غرفة الخادم. بالقرب من كل باب هو زر أصفر. يغلق الباب بإحكام ، ويتم الضغط على زر ، ويتم إعطاء العد التنازلي لمدة 30 ثانية. يتم توفير غاز Hladon-125 - بنتا فلوروإيثان ، الصيغة الكيميائية C2F5H. يمنع عملية الاحتراق - ويتوقف الحريق على الفور. عند إطفاء حريق في مركز بيانات ، لا يتم استخدام السوائل أو المسحوق لأنها ستدمر الجهاز.
في غرفة الخوادم الكبيرة تم منعنا من التقاط الصور. لأنني سأقول من الذاكرة ما رأوه. في المجموع ، يحتوي مركز البيانات هذا على خادم واحد صغير واثنان كبيران.
تحتوي أول غرفة خوادم كبيرة على ممر "بارد" واحد ، وهو مخصص لمشاريع Selectel ولتأجير العملاء. إنها أطول بكثير من غرفة الخادم الصغيرة. على بعض الرفوف ، توجد إجراءات أمان فردية - على أحد الرفوف ، لاحظنا قفلًا إلكترونيًا مزودًا برمز سري وكاميرا فيديو في الأعلى.
نظرنا إلى كيف تبدو خدمة "تأجير الأماكن المخصصة" من الداخل. يمكنك شراء أي تربيع على الموقع - بالطبع ، من الموقع المتاح. ويمكن للعميل وضع أي رفوف والمعدات التي تلبي المعايير.
تم فحص مساحة كبيرة جدًا ، تابعة لعميل واحد ، من خلال السور المرفق. كانت هناك رفوف الألمانية بناء على طلب خاص. هناك أيضا مستودع صغير منفصل.
وفقًا لقصص دليلنا ، هذه الخدمة ليست بالضرورة كبيرة جدًا. يمكنك وضع اثنين من الرفوف وتحيط القفص. والوصول إليهم سيكون معك فقط. عادة ، تنشأ مثل هذه المتطلبات إذا كان البنك أو العميل يعمل مع المؤسسات المالية.
نظرنا إلى مباني محطة إطفاء الحرائق. هذا هو المكان الذي توجد فيه الاسطوانات المزودة بـ "Freon-125". تم تكوين الجهاز بحيث يتم ، حسب الحجم ، إرسال الغاز من عدد معين من الاسطوانات إلى كل غرفة.
على اليسار على طول الممر توجد غرفة لوحة كهربائية. لكن لا يمكننا الوصول إلى هناك ، فقط في حالة عدم القيام برحلات - وإلا فسيكون ذلك غير مريح ، ولن تختفي الرائحة لفترة طويلة.
هناك امدادات الطاقة غير المنقطعة واللوحات. في هذه الغرفة يأتي الطعام للمبنى بأكمله. وبالفعل من هنا يوجد سلك في جميع الغرف. يذهب Busbars إلى غرف الخادم ، والتي يمكن رؤيتها تحت السقف في الممر.
يتم إرسال جهازي حافلة إلى كل خادم. واحد يذهب تحت السقف ، واحد يذهب تحت الأرض التي أثيرت - هذه هي الطريقة التي يتم بها تلبية شرط الحجز. يتم تشغيل المبنى بأكمله بواسطة أشعة إدخال من محطة الطاقة. إذا تم قطع اتصال أحد المدخلات ، فسيعمل مركز البيانات من الثاني.
إذا تم فصل اثنين في وقت واحد ، فكل المعدات تنتقل إلى البطاريات القابلة لإعادة الشحن. توجد 750 بطارية في غرفة خاصة. علاوة على ذلك ، هناك غرفة أخرى من نفس النوع - وهناك العديد من الغرف الأخرى. سيكون مركز البيانات قادرًا على العيش عليها لمدة 1-3 ساعات ، اعتمادًا على الحمل ، لكن الأمر يستغرق دقيقتين فقط للتبديل إلى محرك الديزل.
في غرف منفصلة هي مجموعات مولدات الديزل العملاقة. يقف كل واحد على منصة مرتفعة حول ركبة واحدة - كما فهمت من التفسيرات ، هذا خزان منفصل مزود بوقود لكل محرك ديزل. بالإضافة إلى ذلك ، يوجد في مركز البيانات عدة خزانات يتم دفنها تحت الأرض ومصممة لعشرات الأطنان من الوقود.
كما يتحلل الوقود ، يتم استبداله بشكل دوري. إذا نفد الوقود في خزان الديزل ، تضخ المضخة الوقود من الخزانات. إذا حدث فجأة مصدر إزعاج وانفجرت المضخة ، فلا يزال هناك احتياطي.
يتم تكرار جميع الأنظمة تمامًا - قنوات الاتصال بالإنترنت والتبريد وإمدادات الطاقة وأنظمة إطفاء الحرائق الطارئة وإمدادات الطاقة البديلة.
لقد طرحنا سؤالًا حول مشغلي الاتصالات. قال مهندس الشركة أنهم يستخدمون باستمرار 5-6 مشغلين للوصلات الصاعدة. وهناك عدد غير قليل من الطرق. بالإضافة إلى ذلك ، لدى المزود اتصالات مع جميع نقاط تبادل حركة المرور تقريبًا في سان بطرسبرغ وموسكو. في موسكو ، أكبرها هو M9. وفي سانت بطرسبرغ - B18 و Kantemirovskaya.
إذا وصل الوقود الموجود في الخزانات الموجودة تحت الأرض إلى نهايته ، يتم إحضار خزان آخر. Selectel لديها عقد مع شركة وقود. يمكن لمركز البيانات أن يعيش بلا توقف على الديزل ، إنه أغلى ثمناً.
لقد سألنا عن كيفية عمل Selectel مع العامل البشري - لأنه هو أكبر خطر ، ولن يساعدك أي حجز.
- كيف تتعامل مع الأخطاء البشرية؟
- نحاول عدم تكرارها. نتوقع الأخطاء المحتملة. نقوم بتنفيذ التدريبات والتمارين. على سبيل المثال ، التدريب على التبديل إلى مولد الديزل: نحن نختبر الأشخاص ، ونتحول إلى الديزل في هذه العملية ، وأحيانًا ننقل الحمولة بأكملها إليهم. بالإضافة إلى وجود قاعدة المعرفة.
وصلنا إلى برنامج VMware. على الخوادم السحابية ، يتم استخدام منصات Intel فقط ، 2 تيرابايت SSD. بطبيعة الحال ، التحفظ هو فقط لكل شيء. على سبيل المثال ، رأينا قريبًا: في كل خادم بطاقتي شبكة ، يوجد رابطان عالقان في كل خادم. يذهب أحد الارتباطات إلى المفتاح الموجود في الأعلى ، بينما ينتقل ارتباط آخر إلى مفتاح الرف التالي. يتم استخدام اثنين من امدادات الطاقة لكل وحدة.
في مركز البيانات ، هناك رفوف CMO الروسية بشكل رئيسي. في مكاتب العميل في المنطقة المستأجرة هناك حلول مختلفة.
أبعد قليلاً أسفل الممر من غرفة الخادم الكبيرة الثانية رأينا مصعداً. يوجد مصعدان لمعدات الرفع - طن واحد وطنين. منطقة التحميل مصنوعة بشكل منفصل - تقع بجوار قاعة المؤتمرات في الطابق الأرضي.
في غرفة المصعد ، رأينا صندوقًا صغيرًا بموجه Juniper MX 2010. حلم أي مسؤول: ثلاثة مصادر طاقة AC ، وحدة طاقة RE واحدة (محرك التوجيه): 1800 × 4 (وحدة المعالجة المركزية 1.8 جيجاهيرتز QuadCore ، ذاكرة وصول عشوائي 16 جيجا بايت) ، وحدة واحدة SFB (تبديل لوحة النسيج).
جادل الزملاء أين وضعه. قررنا أنه في المنزل سيبدو أفضل. سيكون من الممكن توزيع خدمة الواي فاي على الأجهزة المنزلية. مرهقة وصلبة - جهاز توجيه جدي للمسؤولين الجادين. وعندما تتعب ، يمكنك بيع وشراء شقة في مدينة كبيرة.
هناك طراز أكبر وأكثر قوة وإنتاجية - MX 2020.
كيف يعمل جهاز التوجيه؟ الوحدات النمطية ، يتم إدخال بطاقات الخط فيها - فهي مرتفعة بشكل غير عادي وضيقة للغاية. ومثل هذه البطاقات الخطية مختلفة تمامًا - يمكن أن تحتوي على 8 ، 24 ، 48 منفذًا. يمكن أن تكون الموانئ "عشرات" و "مئات". اعتمادا على ما احتياجاتك وما الفرص المالية.
يوجد في MX 2020 32 فتحة لبطاقات الخط: 16 فتحة في الأعلى و 16 فتحة في الأسفل. وبشكل نسبي ، إذا أدخلت 10 بطاقات خطية ، ولكل منها 48 منفذًا ، تكون النتيجة 480 منفذًا. نحن نلتصق في أجهزة إرسال واستقبال "خمسة وعشرين" - ونضرب 480 منفذًا بمعدل 25 جيجابت. هذا هو واحد من الخيارات. يمكنك وضع "المئات".
عندما غادروا المباني التقنية ، بقوا قليلاً عند "نقطة تناول الوجبات الخفيفة" ، حيث استعاد مهندسو Selectel قوتهم في الليل. سألوا عما إذا كانت آلات القهوة في فئة المستوى الثالث مكررة في مركز البيانات. ماكينة صنع القهوة في كل نقطة - لكل منها مصدران للطاقة ... وهكذا.
سأل ايجور أوليمسكي:
— -?
— . . , , , . . — , . - . , . — , , .
, DCIM (Data Center Infrastructure Management). , -, . , , , , .
, Selectel, — , , : " 6 - 40 000 " .
- — , . , , .
, . , , -. - , , .
. - , .
, , - . .
— - ?
— , — Selectel.
— - , .
— .
— .
.
. . , , , . , Selectel. -.
, Selectel , :
— , , ?
— . , — .
, - . , , , 8 . . - , Selectel , , , , , .
, . — . , - . . . , , . . .
Selectel, — , , , . , , -, : , , .
.
— ? , - ? , ?
— , — , . , .
إذا حكمنا من خلال الإجابات المراوغة ، فإن موضوع ذئب سيلتيكيلوفسكي مغطى في ظلام NDA. لم نكتشف أبدًا ما إذا كان موجودًا ، لكننا نظرنا إلى مركز البيانات من الداخل.