जेनकिंस और ओरेकल अपैक्स सेवा एकीकरण के साथ भविष्य में

बड़ी मात्रा में डेटा और उनके विज़ुअलाइज़ेशन के प्रबंधन की प्रक्रिया में, हमें रिपॉजिटरी में कार्यात्मक प्रबंधन तक पहुंच के लिए एक एकल टूल को पेश करने की आवश्यकता का सामना करना पड़ रहा है। इसके अलावा, यह उपकरण डेटा प्रबंधन प्रभाग के सभी कर्मचारियों के लिए समान रूप से सुविधाजनक और समझने योग्य होना चाहिए: प्रशासक, विश्लेषक, डेवलपर्स और परीक्षक।



मेरा नाम विटालि है, मैं रोस्टेलेकॉम में स्वचालन के परीक्षण और देवओप्स प्रक्रियाओं के कार्यान्वयन के लिए जिम्मेदार हूं। इस लेख में, मैं रोस्टेलकॉम के एक बड़े डेटा वेयरहाउस में इस समस्या के एक दिलचस्प समाधान के बारे में बात करूंगा।

और इस तरह से हम इस समस्या को हल करने के लिए इस तरह के उपकरणों के लिए आए हैं।

शुरुआत के लिए, थोड़ा पृष्ठभूमि। इससे पहले, मैंने लिखा था कि हमने डेटा गोदाम में वस्तुओं को स्थापित करने की प्रक्रिया को स्वचालित करने के लिए पायथन में अपना स्वयं का मॉड्यूल लिखा था। यह जेनकिंस द्वारा नियंत्रित किया जाता है और आपको आवश्यक स्टार्टअप मापदंडों के इनपुट के साथ एक बटन द्वारा मैन्युअल रूप से आवश्यक कार्यक्षमता शुरू करने की अनुमति देता है, या उपयोगकर्ता के हस्तक्षेप के बिना एक कार्यक्रम के अनुसार पूरी तरह से स्वचालित रूप से। इसके अलावा, हमारी कंपनी ने पहले ही Oracle APEX का उपयोग करते हुए लिखे गए कई अनुप्रयोगों को लागू किया है।

ओरेकल एप्लीकेशन एक्सप्रेस (Oracle APEX) क्या है?

ओरेकल अपैक्स - एप्लिकेशन के पुराने संस्करणों में HTML DB कहा जाता था। इस उपकरण का उपयोग करते हुए, केवल एक ब्राउज़र का उपयोग करके और पीएल / एसक्यूएल और जावास्क्रिप्ट जैसी भाषाओं में प्रोग्रामिंग अनुभव होने पर, आप तेजी से, स्केलेबल और सुरक्षित वेब एप्लिकेशन विकसित कर सकते हैं जो उत्पादन में विकास, परीक्षण और बाद में कार्यान्वयन के लिए किसी भी सर्किट पर आसानी से तैनात किए जा सकते हैं। ।

डेटा एंट्री फॉर्म बनाने के लिए, जटिल तरीके से इंटरफ़ेस को प्रोग्राम करने की आवश्यकता नहीं है। एप्लिकेशन में कई तैयार किए गए टेम्प्लेट हैं जिन्हें आपके स्वयं के समाधान को विकसित करने के लिए पुन: उपयोग किया जा सकता है। अंतिम उपयोगकर्ता भी ब्राउज़र के माध्यम से एप्लिकेशन तक पहुंच प्राप्त करते हैं, जिससे कंप्यूटर पर एप्लिकेशन इंस्टॉल करने की आवश्यकता समाप्त हो जाती है। और उपरोक्त सभी प्लसस के साथ, हमारी रिपॉजिटरी में मेटाडेटा (उपयोग किए गए डेटा के बारे में जानकारी) ओरेकल डेटाबेस में है, इसलिए हम इस टूल को अनदेखा नहीं कर सकते।


अपेक्स एप्लिकेशन आर्किटेक्चर उदाहरण

ओरेकल रीस्ट डेटा सर्विसेज (ओआरडीएस) एक डेटा सेवा है, जो जावा ईई पर आधारित ओरेकल HTTP सर्वर और mod_plsql की जगह लेती है। यह Restfull के माध्यम से वस्तुओं के साथ बातचीत प्रदान करता है ।

जेनकिंस के बारे में थोड़ा सा

कई, शायद, पहले से ही जानते हैं कि यह किस तरह का जानवर है, लेकिन जो लोग इस उपकरण को देख रहे हैं, मैं आपको बताऊंगा कि यह क्या है और हम इसे अपने भंडार में कैसे उपयोग करते हैं।

जेनकिंस एक निरंतर एकीकरण उपकरण है, जिसका उपयोग अक्सर विकास प्रक्रिया के विभिन्न चरणों में सॉफ्टवेयर विकास और अनुप्रयोग परिनियोजन के लिए किया जाता है। सरल शब्दों में, जेनकिंस एक प्रक्रिया स्वचालन वातावरण प्रदान करता है। अपने लचीलेपन और प्लग-इन के एक बड़े सेट के कारण, यह किसी भी एप्लिकेशन या तकनीक में एकीकृत करना संभव बनाता है और विभिन्न संस्करण नियंत्रण प्रणालियों के साथ काम करने का समर्थन करता है।

इसकी मदद से डेटा प्रबंधन के हमारे विभाग में, स्वचालित परीक्षणों के संचालन के साथ CI / CD प्रक्रियाओं को लागू किया जाता है। और जेनकिंस कई स्व-लिखित मॉड्यूल का प्रबंधन करता है, जिसके लिए कई मैनुअल प्रक्रियाएं स्वचालित हैं।


जेनकिंस वेब-क्लाइंट इंटरफ़ेस उदाहरण, क्लिक करने योग्य

गलतफहमी की समस्या और उसका समाधान

कई कार्यों को लागू करने और उन्हें स्वचालित करने के बाद, हमें एक समस्या का सामना करना पड़ा: न केवल DevOps इंजीनियरों और परीक्षण विशेषज्ञों को इन प्रक्रियाओं का प्रबंधन करना होगा, बल्कि ऐसे लोग भी हैं जो इस तरह के उपकरणों का सामना नहीं करते हैं, लेकिन विकास प्रक्रिया में शामिल हैं। अंतिम उपयोगकर्ता विभाग के सभी आंतरिक कर्मचारी थे। जेनकिंस क्लाइंट इंटरफ़ेस, मेरी राय में, काफी सरल और सुविधाजनक है, लेकिन मैं इसे DevOps की आंखों के माध्यम से देखता हूं, और हर कोई इसे उसी तरह नहीं देख सकता है। चूंकि कई कार्यों को हमें कर्मचारियों द्वारा बटन पर चलाना पड़ता था, इसलिए एक ऐसे इंटरफ़ेस के साथ आना आवश्यक हो गया जो उपयोगकर्ता के लिए मित्रतापूर्ण होगा। वास्तव में, जेनकिंस के लिए ब्लू ओशन नामक एक प्लगइन है, जो आपको उपकरण के यूआई प्रतिनिधित्व को बदलने की अनुमति देता है।


जेनकिंस वेब-क्लाइंट इंटरफ़ेस उदाहरण (ब्लू ओशन प्लगइन), क्लिक करने योग्य

यह प्लगइन हमारी समस्या को हल नहीं कर सका, लेकिन एक विकल्प के रूप में, यदि मानक इंटरफ़ेस आपको सूट नहीं करता है, तो आप इसे फिर से कॉन्फ़िगर कर सकते हैं। सबसे अधिक बार, मॉड्यूल को जेनकिंस में एकीकृत करना आवश्यक हो जाता है, और इसके विपरीत नहीं। यह समस्या के हल होने में दिलचस्पी है। इसके समाधान के समय, जैसा कि मैंने लिखा था, हमारे पास पहले से ही Oracle APEX का उपयोग करके लिखे गए कई एप्लिकेशन थे।


APEX अनुप्रयोगों में से एक का इंटरफ़ेस उदाहरण, क्लिक करने योग्य

यह सत्यापित करने के बाद कि इसका इंटरफ़ेस पर्याप्त अनुकूल है और इसे प्रबंधित करना संभव है, और जेनकिंस में आवश्यक कार्यों को लॉन्च करने के लिए सभी मापदंडों को ओरेकल डेटाबेस में संग्रहीत किया जाता है, यह विचार अपेक्स से कई जेनकिंस कार्यों को लॉन्च करने के लिए उत्पन्न हुआ।

इसमें काफी समय लगा। REST जैसी सेवा-उन्मुख प्रणालियों के निर्माण के वास्तु सिद्धांत के अनुसार अनुप्रयोगों के बीच बातचीत को लागू किया गया था। REST आर्किटेक्चर नेटवर्क पर एक वितरित एप्लिकेशन के घटकों की परस्पर क्रिया के लिए नियमों को बताता है। अपेक्स-एप्लिकेशन आपको इस शैली का उपयोग करने की अनुमति देता है और एप्लिकेशन डेवलपमेंट के दौरान HTTP / HTTP- रिक्वेस्ट ऑफ़ टाइप REST भेजने की प्रक्रिया के गठन के लिए तैयार टेम्पलेट प्रदान करता है। नतीजतन, हमने ऐसे कार्यों को शुरू करने के लिए आवेदन को जल्दी से उठा लिया, लॉन्च के लिए डेटा को उनके चयन की संभावना के साथ सीधे डेटाबेस से खींचा जाने लगा, जिसने स्टार्टअप मापदंडों में प्रवेश करने में त्रुटि की संभावना को समाप्त कर दिया। जेनकींस में चल रहे कार्यों के लिए मापदंडों का प्रसारण स्वयं एक POST अनुरोध के माध्यम से किया जाता है, जिसके शरीर में आवश्यक पैरामीटर के साथ JSON निहित है।


किसी एपेक्स एप्लिकेशन को विकसित करने के दौरान कॉल फॉर्म, क्लिक करने योग्य

JSON उदाहरण:

{"parameter":[{"name":"SERVER","labels":"master"},{"name":"INSTANCE","value":"DEV"},{"name":"SRC_CODE_START","value":"SRC_ID"},{"name":"SRC_CODE_END","value":"SRC_ID"},{"name":"MODEL_ID","value":"MODEL_ID"},{"name":"SAVE_DATA","value":"0"}],"statusCode":"303","redirectTo":"."} 

जेनकींस प्रक्रियाओं को लागू करने के लिए एक तैयार एपेक्स एप्लिकेशन का एक उदाहरण, क्लिक करने योग्य

"रन प्रोसेस" बटन पर क्लिक करने का नतीजा जेनकिंस कार्य और उसके बाद के लॉन्च के मापदंडों का हस्तांतरण होगा। सफल और असफल लॉन्च के लॉग के कार्यान्वयन को भी लागू किया जाता है, जो सीधे जेनकिंस निष्पादन प्रक्रिया के कंसोल से वापस आ जाता है। कार्य में कोई भी स्वचालित प्रक्रिया हो सकती है।

अंत में

हमारे विभाग में एप्लिकेशन डेटा के एकीकरण ने एक उत्कृष्ट परिणाम दिखाया। ऐसे लोगों को बाध्य करने की आवश्यकता नहीं है, जिन्हें एप्लिकेशन के टूलकिट को समझने के लिए जेनकिन्स के साथ सीधे काम नहीं करना चाहिए। हम कस्टम अधिकार मैट्रिक्स का उपयोग करते हुए जेनकिंस स्तर पर कार्यों के निष्पादन पर अंतर करने और नियंत्रण छोड़ने में सक्षम थे ताकि उपयोगकर्ताओं में कार्यों के निर्माण की क्षमता थी, लेकिन उन्हें संपादित करने की क्षमता नहीं थी।

चूँकि इस प्रयोग को सफल माना गया था, विकास के विचार जेन्किन्स और हमारे साथ काम करने वाले अन्य अनुप्रयोगों के साथ बातचीत को आसान बनाने के लिए हमारे अपने ओपन सोर्स फ्रेमवर्क लिखने के रूप में सामने आए। लेकिन यह पूरी तरह से अलग कहानी है, जिसके बारे में मैं भविष्य के लेखों में बताने की कोशिश करूंगा।