रूसी AERODISK भंडारण: लोड परीक्षण। निचोड़ IOPS

सभी को नमस्कार! जैसा कि वादा किया गया था, हम एक रूसी-निर्मित डेटा भंडारण प्रणाली के लोड परीक्षण के परिणाम प्रकाशित करते हैं - AERODISK Engine N2।

पिछले लेख में, हमने स्टोरेज सिस्टम को तोड़ दिया (यानी, हमने क्रैश टेस्ट किए) और क्रैश टेस्ट के परिणाम सकारात्मक थे (यानी हमने कभी स्टोरेज सिस्टम नहीं तोड़ा)। क्रैश टेस्ट के परिणाम यहां देखे जा सकते हैं।

पिछले लेख की टिप्पणियों में, अतिरिक्त - अधिक मुश्किल दुर्घटना परीक्षणों के लिए इच्छा व्यक्त की गई थी। हमने उन सभी को ठीक कर लिया है और निश्चित रूप से निम्नलिखित लेखों में से एक में उन्हें लागू करेंगे। उसी समय, आप किसी भी समय मास्को में हमारी प्रयोगशाला में जा सकते हैं (अपने पैरों के साथ आ सकते हैं या इंटरनेट के माध्यम से दूरस्थ रूप से ऐसा कर सकते हैं) और इन परीक्षणों को स्वयं करें (आप किसी विशिष्ट परियोजना के लिए परीक्षण भी कर सकते हैं :-))। हमें लिखें, सभी परिदृश्यों पर विचार करें!

इसके अलावा, यदि आप मॉस्को में नहीं हैं, तो आप अपने निकटतम शहर में सक्षमता केंद्र में एक नि: शुल्क प्रशिक्षण कार्यक्रम में भाग लेने से हमारे स्टोरेज सिस्टम को अधिक बारीकी से जान सकते हैं।

नीचे आगामी घटनाओं और सक्षमता केंद्रों की सूची दी गई है।

• Ekaterinburg। 16 मई 2019। प्रशिक्षण कार्यशाला। आप लिंक पर पंजीकरण कर सकते हैं: https://aerodisk.promo/ekb/
• Ekaterinburg। 20 मई - 21 जून, 2019। क्षमता केंद्र। AERODISK Engine N2 स्टोरेज सिस्टम के लाइव डेमो के लिए किसी भी समय काम करें। सटीक पता और पंजीकरण लिंक बाद में होगा। जानकारी का ध्यान रखें।
• नोवोसिबिर्स्क। हमारे साइट पर या HABRA पर जानकारी।
  अक्टूबर 2019
• कज़ान। हमारे साइट पर या HABRA पर जानकारी।
  अक्टूबर 2019
• क्रास्नोयार्स्क। हमारे साइट पर या HABRA पर जानकारी।
  नवंबर 2019

हम एक और खुशखबरी भी साझा करना चाहते हैं: आखिरकार, हमारा YouTube चैनल, जहां आप पिछली घटनाओं के वीडियो देख सकते हैं, पूरी तरह से कमाए हैं। वहाँ हम नियमित रूप से अपने प्रशिक्षण वीडियो अपलोड करते हैं।

टेस्ट स्टैंड

इसलिए, परीक्षणों पर वापस जाएं। हमने अतिरिक्त एसएएस एसएसडी डिस्क, साथ ही फ्रंट-एंड फाइबर चैनल 16 जी एडेप्टर स्थापित करके अपने लैब स्टोरेज सिस्टम इंजन एन 2 को अपग्रेड किया। एक सममित तरीके से, हमने सर्वर को अपग्रेड किया जिसमें से हम एफसी 16 जी एडेप्टर को जोड़कर लोड शुरू करेंगे।

नतीजतन, हमारी प्रयोगशाला में 24 एसएएस एसएसडी 800 जीबी, 3 डीडब्लूपीडी डिस्क के साथ 2-नियंत्रक भंडारण प्रणाली है, जो एफसी 16 जी के माध्यम से एक भौतिक लिनक्स सर्वर के लिए सैन स्विच के माध्यम से जुड़ा हुआ है।
नीचे दी गई आकृति में टेस्ट बेंच लेआउट।

परीक्षण पद्धति

ब्लॉक एक्सेस पर सर्वश्रेष्ठ प्रदर्शन के लिए, हम DDP (डायनेमिक डिस्क पूल) पूल का उपयोग करेंगे, जिसे हमने एक बार ALL-FLASH सिस्टम के लिए बनाया था।
परीक्षण के लिए, हमने RAID-10 सुरक्षा स्तर के साथ प्रत्येक 1 टीबी के दो LUN बनाए। हम भंडारण प्रणाली में प्रत्येक स्थापित डिस्क की क्षमता का पूरी तरह से उपयोग करने के लिए प्रत्येक LUN को 12 डिस्क (कुल में 24) में फैलाते हैं।

हम भंडारण संसाधनों के उपयोग को अधिकतम करने के लिए विभिन्न नियंत्रकों के माध्यम से सर्वर को LUN प्रस्तुत करते हैं।

परीक्षणों में से प्रत्येक एक घंटे तक चलेगा, और परीक्षण लचीले आईओ (एफआईओ) कार्यक्रम द्वारा किए जाएंगे, एफआईओ डेटा स्वचालित रूप से एक्सेल पर अपलोड किया जाता है, जिसमें ग्राफ़ पहले से ही बनाए जा रहे हैं, स्पष्टता के लिए।

प्रोफाइल लोड करें

कुल मिलाकर, हम वार्म-अप समय को ध्यान में रखे बिना एक घंटे में तीन परीक्षण करेंगे, जिसके लिए हमें 15 मिनट लगते हैं (यह 24 एसएसडी डिस्क की एक सरणी को गर्म करने में कितना समय लगता है)। ये परीक्षण सबसे आम लोड प्रोफाइल का अनुकरण करते हैं जो हम मुठभेड़ करते हैं, विशेष रूप से, उन या अन्य DBMS, वीडियो निगरानी प्रणाली, प्रसारण मीडिया सामग्री और बैकअप।

इसके अलावा, सभी परीक्षणों में, हमने स्टोरेज सिस्टम और होस्ट पर रैम को कैश करने की क्षमता को जानबूझकर अक्षम कर दिया है। परिणाम, निश्चित रूप से खराब हो जाएंगे, लेकिन, हमारी राय में, ऐसी स्थितियों में परीक्षा अधिक ईमानदार होगी।

परीक्षण के परिणाम

टेस्ट नंबर 1। छोटे ब्लॉकों में यादृच्छिक लोडिंग। एक अत्यधिक भरी हुई लेन-देन DBMS का अनुकरण।

• ब्लॉक आकार = 4k
• पढ़ें / लिखें = 70% / 30%
• नौकरियों की संख्या = 16
• कतार गहराई = 32
• भार की प्रकृति = पूर्ण यादृच्छिक

परीक्षा परिणाम:

कुल मिलाकर, हमने जूनियर मिड-रेंज इंजन एन 2 सिस्टम से 2.6 मिली सेकेंड की देरी के साथ 438k आईओपीएस प्राप्त किया। प्रणाली की श्रेणी को देखते हुए, हमारी राय में, परिणाम काफी सभ्य है। यह समझने के लिए कि क्या यह प्रणाली के लिए सीमा है, हम भंडारण नियंत्रकों के संसाधनों के उपयोग को देखेंगे।

हम मुख्य रूप से सीपीयू में रुचि रखते हैं, क्योंकि, जैसा कि ऊपर बताया गया है, हमने जानबूझकर रैम कैश को अक्षम कर दिया है ताकि परीक्षण के परिणामों को विकृत न करें।

दोनों भंडारण नियंत्रकों पर हम लगभग एक ही तस्वीर देखते हैं।

यही है, सीपीयू पर लोड 50% है। इससे पता चलता है कि यह इस संग्रहण प्रणाली की सीमा से बहुत दूर है और आप अभी भी इसे आसानी से माप सकते हैं। चलिए थोड़ा आगे चलते हैं: निम्नलिखित सभी परीक्षणों में 50% के क्षेत्र में नियंत्रकों के प्रोसेसर पर भी लोड दिखाया गया, इसलिए हमने उन्हें फिर से नहीं दिया।

हमारे प्रयोगशाला परीक्षणों के आधार पर, AERODISK इंजन N2 सिस्टम की आरामदायक सीमा, यदि हम 4k ब्लॉकों के साथ यादृच्छिक IOPS की गणना करते हैं, तो ~ 700,000 IOPS है। यदि यह पर्याप्त नहीं है और आपको एक लाख के लिए प्रयास करने की आवश्यकता है, तो हमारे पास एक पुराना मॉडल इंजन एन 4 है।

यही है, लाखों IOPS के बारे में कहानी है इंजन N4, और यदि एक मिलियन आपके लिए बहुत अधिक है, तो शांति से N2 का उपयोग करें।

हम परीक्षणों पर लौटते हैं।

टेस्ट नंबर 2 बड़े ब्लॉकों में अनुक्रमिक रिकॉर्डिंग। वीडियो निगरानी प्रणाली का अनुकरण, डेटा को एक विश्लेषणात्मक DBMS या रिकॉर्डिंग बैकअप में लोड करना।

इस परीक्षण में, हमें अब IOPS में कोई दिलचस्पी नहीं है, क्योंकि बड़े ब्लॉकों के अनुक्रमिक भार के साथ उन्हें कोई मतलब नहीं है। हम मुख्य रूप से इसमें रुचि रखते हैं: रिकॉर्डिंग स्ट्रीम (मेगाबाइट्स प्रति सेकंड) और देरी, जो बड़े ब्लॉकों के साथ, ज़ाहिर है, छोटे लोगों के साथ अधिक होगी।

• ब्लॉक आकार = 128 k
• पढ़ें / लिखें = 0% / 100%
• नौकरियों की संख्या = 16
• कतार गहराई = 32
• लोड की प्रकृति - अनुक्रमिक

कुल: हमारे पास ग्यारह मिलीसेकंड की देरी के साथ प्रति सेकंड साढ़े पांच गीगाबाइट का रिकॉर्ड है। निकटतम विदेशी प्रतियोगियों की तुलना में, हमारी राय में, परिणाम, उत्कृष्ट है, और इंजन एन 2 सिस्टम की सीमा भी नहीं है।

टेस्ट नंबर 3। बड़े ब्लॉकों में अनुक्रमिक पढ़ा। मीडिया सामग्री को प्रसारित करने, एक विश्लेषणात्मक DBMS से रिपोर्ट तैयार करने या बैकअप से डेटा पुनर्प्राप्त करने का अनुकरण।

पिछले परीक्षण की तरह, हम प्रवाह और देरी में रुचि रखते हैं।

• ब्लॉक आकार = 128 k
• पढ़ें / लिखें = 100% / 0%
• नौकरियों की संख्या = 16
• कतार गहराई = 32
• लोड की प्रकृति - अनुक्रमिक

स्ट्रीमिंग रीड मेट्रिक्स स्ट्रीमिंग राइटिंग मेट्रिक्स की तुलना में थोड़ा बेहतर है।

दिलचस्प है, पूरे परीक्षण के लिए देरी की दर समान (सीधी रेखा) है। यह एक त्रुटि नहीं है, बड़े ब्लॉकों में अनुक्रमिक पढ़ने में, हमारे मामले में यह एक सामान्य स्थिति है।

बेशक, यदि आप कुछ हफ़्ते के लिए सिस्टम को इस रूप में छोड़ देते हैं, तो हम अंततः उन ग्राफ़ों में आवधिक कूदता देखेंगे जो बाहरी कारकों से जुड़े होंगे। लेकिन, सामान्य तौर पर, वे तस्वीर को प्रभावित नहीं करेंगे।

निष्कर्ष

दोहरे नियंत्रक प्रणाली AERODISK इंजन N2 से, हम काफी गंभीर संकेतक (~ 438,000 IOPS और ~ 5-6 गीगाबाइट प्रति सेकंड) निचोड़ने में सक्षम थे। लोड परीक्षणों से पता चला कि हमारे भंडारण के लिए हम निश्चित रूप से शर्मिंदा नहीं हैं। इसके विपरीत, संकेतक बहुत सभ्य हैं और अच्छे भंडारण के अनुरूप हैं।

यद्यपि, जैसा कि हमने ऊपर लिखा था, इंजन एन 2 एक युवा मॉडल है, और इसके अलावा, इस लेख में दिखाए गए परिणाम इसकी सीमा नहीं हैं। बाद में हम अपने पुराने इंजन एन 4 सिस्टम से एक समान परीक्षण प्रकाशित करेंगे।

स्वाभाविक रूप से, एक लेख के ढांचे के भीतर, हम सभी संभावित परीक्षणों को कवर नहीं कर सकते हैं, इसलिए, पाठकों को टिप्पणियों में भविष्य के परीक्षणों के लिए अपनी इच्छाओं को साझा करने के लिए बार-बार आमंत्रित करते हुए, हम भविष्य के प्रकाशनों में उन्हें निश्चित रूप से ध्यान में रखेंगे।

इसके अलावा, हम आपको याद दिलाते हैं कि इस वर्ष हम सक्रिय रूप से प्रशिक्षण में लगे हुए हैं, इसलिए हम आपको हमारे क्षमता केंद्रों में आमंत्रित करते हैं जहाँ आप AERODISK स्टोरेज सिस्टम पर प्रशिक्षण ले सकते हैं, और साथ ही यह दिलचस्प और मजेदार है।

आगामी प्रशिक्षण घटनाओं के बारे में जानकारी की नकल करें।

• Ekaterinburg। 16 मई 2019। प्रशिक्षण कार्यशाला। आप लिंक पर पंजीकरण कर सकते हैं: https://aerodisk.promo/ekb/
• Ekaterinburg। 20 मई - 21 जून, 2019। क्षमता केंद्र। AERODISK इंजन एन 2 भंडारण प्रणालियों के लाइव डेमो के लिए किसी भी समय काम करें। सटीक पता और पंजीकरण लिंक बाद में होगा। जानकारी का ध्यान रखें।
• नोवोसिबिर्स्क। हमारे साइट पर या HABRA पर जानकारी।
  अक्टूबर 2019
• कज़ान। हमारे साइट पर या HABRA पर जानकारी।
  अक्टूबर 2019
• क्रास्नोयार्स्क। हमारे साइट पर या HABRA पर जानकारी।
  नवंबर 2019