ZFS स्टोरेज, स्टैंडबाय और टेस्ट एनवायरनमेंट

- क्या हमारे पास जनवरी के लिए कोई तस्वीर है, फरवरी के करीब?
- अब देखते हैं ... हाँ, वहाँ है! अब खोलो।

ऐसा होता है कि परीक्षण के आधार का औसत जीवनकाल होता है, उन सभी लोगों द्वारा स्नैपशॉट के लिए एक जीवन समय पर सहमति व्यक्त की जाती है, लेकिन कुछ वातावरण उनकी तस्वीर में बहुत लंबे समय तक "लिन्ग" करते हैं, जिन्हें हटाया नहीं जा सकता ... और फिर यह सहयोगियों के लिए उपयोगी साबित होता है। और माइनस से माइनस प्लस देता है।

आमतौर पर, किसी भी सिस्टम के लिए जिसमें कुछ हो सकता है, आपको बैकअप बनाने की आवश्यकता होती है। और अगर यह अभी भी विकसित हो रहा है और अंतिम रूप दिया जा रहा है, तो कहीं न कहीं यह विकास और परीक्षण वातावरण को तैनात करने के लिए भी आवश्यक है। इसके अलावा, बैकअप और परीक्षण वातावरण के लिए जो काम करते हैं, वास्तव में, एक ही डेटा के साथ, आपको बहुत अधिक स्थान की आवश्यकता होती है। और फिर भी इन वातावरणों को किसी तरह वर्तमान स्थिति तक ले जाना चाहिए। और यह सब हार्डवेयर और समय संसाधनों की आवश्यकता है।

हमारे मामले में, इन आवश्यकताओं को ओरेकल जेडएफएस स्टोरेज उपकरण और ओरेकल / सन सर्वर द्वारा कवर किया गया था, जो वास्तव में एक्सडाटा के रूप में एक ही पारिस्थितिकी तंत्र में विलय कर दिया गया था, जो कि कुछ ही समय पहले दिखाई दिया था।

चूंकि Exadata के अंदर एक InfiniBand स्विच है, जिसके माध्यम से इसके घटक संचार करते हैं, और ZFS स्टोरेज भी एक Oracle उपकरण है, फिर:

• सबसे पहले, यह सीधे अपने बंदरगाहों के हिस्से से इस स्विच से जुड़ा था;
• दूसरी बात यह है कि यह एक्साडेटा हाइब्रिड स्तंभकार संपीड़न (EHCC) में संपीड़ित खंडों के साथ तालिका स्थान फ़ाइलों को संग्रहीत कर सकता है, जिससे हमें मुख्य प्रणाली में बहुत अधिक जगह की बचत होती है। यदि आप एक अलग सर्वर पर डेटाबेस को पुनर्स्थापित करने का प्रयास करते हैं, तो पुनर्प्राप्ति के बाद, संपीड़ित डेटा का संदर्भ देते हुए, आपको त्रुटि मिलेगी: "ORA-64307: हाइब्रिड स्तंभ स्तंभ संपीड़न इस भंडारण प्रकार पर टेबलस्पेस के लिए समर्थित नहीं है" - क्योंकि डेटा फ़ाइलें ईएचसीसी में संपीड़ित ओरेकल उपकरण में संग्रहीत किया जाना चाहिए;
• तीसरा, यह परीक्षण पर्यावरण फ़ाइलों के भंडारण के लिए ZFS क्षमताओं का उपयोग करने की संभावना को खोलता है।

खैर, जगह के बारे में क्या? नकल से बचना होगा।

टेस्ट वातावरण को उसी डेटा की आवश्यकता होती है जैसे वे बैकअप में होते हैं। क्या यह डेटा दोनों कार्य कर सकता है? किसी भी विशेषाधिकार प्राप्त परीक्षण वातावरण के लिए एक बैकअप और आधार दोनों होने के लिए एक संपूर्ण डेटा सेट की आवश्यकता है? वे कर सकते हैं!

ओरेकल जेडएफएस स्टोरेज उपकरण एक सरणी है जो अन्य चीजों के साथ, जेडएफएस फाइल सिस्टम के तहत चलने वाले नेटवर्क शेयरों को बनाने की क्षमता प्रदान करता है। ZFS फ़ाइल सिस्टम के भीतर, स्नैपशॉट बनाना संभव है, जिसके आधार पर आप क्लोन को तैनात कर सकते हैं, जो नए नेटवर्क शेयरों के रूप में दिखाई देते हैं। हम इस अवसर का उपयोग इस प्रकार करते हैं:

1. जेडएफएस स्टोरेज पर (जैसा कि हम एरे को कॉल करेंगे, ताकि फाइल सिस्टम के साथ भ्रमित न हों), दो शेयर बनाए गए हैं - एक में आर्कियोलॉग जोड़ा गया है, और दूसरे में डेटाबेस फाइल;
2. शेयर ओरेकल / सन सर्वर (जो एक उपकरण भी है) पर मुहिम शुरू की जाती है, और सर्वर पर ही ओरेकल डाटाबेस का एक उदाहरण उगता है, एक कैस्केड किए गए भौतिक स्टैंडबाय के रूप में कार्य करता है - यह सशर्त रूप से बैकअप साइट से लॉग प्राप्त करता है और शेयर में फ़ाइलों में परिवर्तन लागू करता है;
3. लॉग का उपयोग कार्य-सिद्धांत (वितरित कंप्यूटिंग में सभी प्रतिभागियों को नमस्ते!) के सिद्धांत के अनुसार आयोजित किया जाता है। एल्गोरिथ्म स्तर पर, वर्कुनिट की अवधारणा पेश की जाती है, जो एक निश्चित समय अंतराल से मेल खाती है। आवश्यक अंतराल के लिए लॉग को रोल करने के बाद, आवृत्ति बंद हो जाती है, और फाइलें एक दूसरे के सापेक्ष और नियंत्रण कक्ष के सापेक्ष एक सुसंगत स्थिति में साझा रहती हैं। वास्तव में, यह एक ठंडा बैकअप है, यह इमेज कॉपी भी है, जिसके ऊपर एक स्नैपशॉट बना है;
4. जब परीक्षण वातावरण को फिर से बनाने का समय आता है, तो वांछित स्नैपशॉट से एक क्लोन बनाया जाता है। यह उस सर्वर पर मुहिम की जाती है जिस पर पर्यावरण चल रहा है, जिसके बाद इसमें मौजूद फाइलें डेटाबेस के रूप में एक अलग नाम और रीड / राइट मोड में खुलती हैं;
5. परीक्षण आधार में काम करने की प्रक्रिया में, परिवर्तन किए जाते हैं जो क्लोन के भाग के रूप में स्थगित हो जाते हैं, और यह धीरे-धीरे बढ़ रहा है। जीवन चक्र के अंत तक, माध्यम अधिकतम हो जाता है।
6. डिस्क स्थान की खपत को कम करने के लिए, हम LZJB संपीड़न का उपयोग करते हैं, जो ZFS स्टोरेज मक्खी पर करता है।

संक्षेप में:

1. वर्तमान विन्यास में, परीक्षण वातावरण 3.75 Gb / s के स्तर तक I / O प्रदर्शन कर सकता है;
   पढ़ने के लिए अधिकतम सर्वर पर मौजूदा InfiniBand पोर्ट सेटिंग्स द्वारा सीमित है, लिखने के लिए अधिकतम ZFS स्टोरेज नियंत्रकों पर CPU है और लगभग 2 Gb / s तक पहुंचता है। (हाँ, हाँ! चूँकि 10 GbE पर्याप्त नहीं था, परीक्षण सर्वरों के लिए अलग-अलग स्विच खरीदे गए, जिसमें ZFS स्टोरेज और स्वयं सर्वर शामिल थे);
2. प्रति दिन कई स्नैपशॉट बनाए जाते हैं, जो अब आधार पर, 2 सप्ताह से 2 महीने तक संग्रहीत किए जाते हैं। जिसके बाद वे हर महीने की 1 तारीख को 00:00 बजे बनाए गए उन स्नैपशॉट को छोड़कर सभी को हटा दिया जाता है - ये एक चौथाई से अधिक के लिए संग्रहीत होते हैं। ऐसे मामले थे जब स्नैपशॉट जिन्हें लगभग छह महीने तक संग्रहीत किया गया था, वे उपयोगी साबित हुए;
3. यदि आवश्यक हो, तो पूरे औद्योगिक डेटाबेस को वांछित स्नैपशॉट से पुनर्स्थापित किया जा सकता है। इसके अलावा 1 ... 3 जीबी / एस के क्रम की गति के साथ, लेकिन वांछित स्नैपशॉट से क्लोन बनाने का विकल्प बहुत अधिक लोकप्रिय है, जिसमें से वांछित तालिकाओं का डेटा फिर अनलोड किया जाता है;
4. परीक्षण वातावरण को फिर से बनाने का समय लगभग 1 घंटा है (अतिरिक्त सर्किटों की एक संख्या के हस्तांतरण के साथ, आदि);
5. सहकर्मियों को एक क्लोन प्रदान करने का समय जिससे आप रिकवरी के लिए डेटा एकत्र कर सकते हैं या बस किसी तरह का विश्लेषण 15 मिनट (शर्तों के एक आदर्श संयोजन के तहत) से 1-2 घंटे (जेडएफएस स्टोरेज या यूएस जे पर एक बड़े समानांतर लोड के साथ) है;
6. यदि आवश्यक हो, तो आप स्नैपशॉट और क्लोन, और पूरे डेटाबेस से पुनर्स्थापित कर सकते हैं;
7. एक प्रमुख प्रदर्शन बाधा परीक्षण वातावरण या कैस्केड स्टैंडबाय के उदाहरणों द्वारा उत्पन्न IOPS की संख्या है। और यहाँ सिस्टम पूरी तरह से पर्याप्त और अनुमानित रूप से व्यवहार करता है - जैसे ही उनकी संख्या 75 IOPS प्रति HDD (इसमें 3.5 "7200 आरपीएम पर डिस्क शामिल है) को लंबे समय तक लोड के तहत चुना जाता है, सिस्टम धीरे-धीरे शिथिल होने लगता है। और समय में छोटे - लिखें- और पढ़ें-फ्लैश काफ़ी आसान हैं;
8. आईओपीएस की संख्या, आने वाले डेटा की कुल राशि, सीपीयू पर लोड, रैम और फ्लैश में कैश से रीड की संख्या, साथ ही साथ मैट्रिक्स के दर्जनों (यदि सैकड़ों नहीं) दर्जनों वेब प्रबंधन इंटरफ़ेस में देखे जा सकते हैं;
9. आप दस्तावेज़ में वर्णित REST अनुरोधों का उपयोग करके ZFS संग्रहण वस्तुओं के साथ काम कर सकते हैं। उनकी मदद से, अप्रचलित स्नैपशॉट को हटाने को स्वचालित करना संभव था, लेकिन बहुत कुछ किया जा सकता है!