मोबाइल एप्लिकेशन टेस्ट स्वचालन: उपकरण तुलना

टेस्ट स्वचालन एक बार में कई समस्याओं को हल करने में मदद करता है - जब यह मोबाइल अनुप्रयोगों के लिए आता है। नियमित रूप से श्रम-गहन प्रक्रियाओं को मैन्युअल रूप से करने के बजाय, विशेषज्ञ उनमें से एक महत्वपूर्ण हिस्से को फ्रेमवर्क में सौंप सकते हैं। स्वचालन परीक्षण को सरल बनाता है और प्रतिगमन परीक्षण को गति देने में मदद करता है, और यह पहले से दुर्गम प्रकार के परीक्षण का उपयोग करना भी संभव बनाता है।

हम कई उपकरणों की तुलना करेंगे, जिन्होंने खुद को बाजार में स्थापित किया है और विकसित करना जारी रखा है। यह ज्ञान आपको यह चुनने में मदद करेगा कि किसी विशेष मोबाइल एप्लिकेशन के परीक्षण के लिए किस समाधान का उपयोग किया जाए।



यह आलेख पेशेवरों के लिए नए क्षितिज खोलने की संभावना नहीं है, लेकिन यह शुरुआती लोगों के लिए उपयोगी हो सकता है जो मोबाइल परीक्षण की मूल बातें, और कुछ हद तक, मध्य-स्तर के विशेषज्ञों को सीखने का फैसला करते हैं।

उपकरण का वर्गीकरण

पहली चीज जिस पर आपको निर्माण करना चाहिए, वह वह प्लेटफॉर्म है जिस पर एप्लिकेशन चलता है। इसके आधार पर, हम उपकरणों की सूची को निम्नानुसार वर्गीकृत करते हैं:

एंड्रॉयड

• एस्प्रेसो
• UI ऑटोमेटर

आईओएस

• XCUITest
• EarlGrey

यूनिवर्सल

• detox
• Appium
• Ranorex
• TestComplete मोबाइल

Android अनुप्रयोग टेस्ट स्वचालन

UI ऑटोमेटर

उन्नत बाहरी एकीकरण के साथ शक्तिशाली परीक्षण उपकरण। इसका मतलब यह है कि यह रूपरेखा न केवल आपको एप्लिकेशन का परीक्षण करने की अनुमति देती है, बल्कि ऑपरेटिंग सिस्टम और अन्य अनुप्रयोगों के साथ "संवाद" करने में भी सक्षम है - उदाहरण के लिए, वाई-फाई को सक्रिय करें और निष्क्रिय करें, जीपीएस, परीक्षण के दौरान सेटिंग्स मेनू खोलें और अन्य बाहरी इंटरैक्शन करें।

UI ऑटोमेटर का उद्देश्य ब्लैक-बॉक्स परीक्षण है। इसका मतलब यह है कि विश्लेषण कोड तक पहुंच के बिना बाहरी उपयोगकर्ता की स्थिति से किया जाता है।

मुख्य विशेषताओं में शामिल हैं:

• परीक्षण के दौरान स्क्रीन पर प्रदर्शित घटकों को ट्रैक करने और उनका विश्लेषण करने के लिए यूआई ऑटोमेकर व्यूअर। यह तत्वों और उनके गुणों के बारे में जानकारी प्रदान करता है, जिससे अधिक प्रासंगिक परीक्षण बनाने में आसानी होती है।
• डिवाइस की स्थिति और उस पर चल रही प्रक्रियाओं के बारे में जानकारी प्राप्त करने के लिए एपीआई।
• क्रॉस प्लेटफॉर्म टेस्टिंग के लिए यूआई ऑटोमैटिक एपीआई।

प्रलेखन के लिए लिंक ।

एस्प्रेसो

UI ऑटोमेटर की तुलना में एक हल्का उपकरण, बाहरी अनुप्रयोगों के साथ बातचीत करने के लिए उपयुक्त नहीं है, लेकिन एक विशिष्ट एप्लिकेशन के स्रोत कोड तक पहुंचने या ग्रे-बॉक्स का परीक्षण करने के साथ सफेद बॉक्स के परीक्षण के लिए सुविधाजनक है, जिसकी कुछ आंतरिक प्रक्रियाओं और संरचना तक पहुंच है।

हालाँकि, एस्प्रेसो अपने शक्तिशाली एपीआई https://github.com/hamcrest के साथ खड़ा है। इंटरफ़ेस ऑटोटेस्ट में जांच के लिए सुविधाजनक तरीके जोड़ता है, उदाहरण के लिए:
assert_that (1, कम_or_equal (2))। वेबव्यू के परीक्षण के लिए, विशेष विधियों का उपयोग किया जाता है।

यूआई ऑटोमेकर और एस्प्रेसो परस्पर पूरक हैं और एक ही परियोजना के संयोजन में इस्तेमाल किया जा सकता है।

प्रलेखन के लिए लिंक ।

IOS अनुप्रयोगों के लिए टेस्ट ऑटोमेशन

XCUITest

एप्लिकेशन कोड तक पहुंचने के बिना ब्लैक-बॉक्स परीक्षण के लिए एक उपकरण। यह केवल मूल उत्पादों के साथ काम करता है - दुर्भाग्य से, क्रॉस-ऐप परीक्षण काम नहीं करेगा।

दूसरी ओर, फ्रेमवर्क की मूल प्रकृति इस दृष्टिकोण से एक फायदा है कि, XCUITest का उपयोग करते समय, डेवलपर्स और परीक्षकों की आपसी समझ की डिग्री उन मामलों की तुलना में बहुत अधिक स्तर पर होती है जहां उत्तरार्द्ध विभिन्न भाषाओं का उपयोग करते हैं।

एक उपयोगी जोड़ टेस्ट रिकॉर्डर है, जो कोड के साथ काम नहीं करने वाले लोगों के लिए भी एप्लिकेशन में रिकॉर्डिंग करके परीक्षण लिखना संभव बनाता है।

उपकरण आपको आम गलतियों और उपयोगकर्ता के लिए अनावश्यक, कोड के साथ जोड़तोड़ से बचने की अनुमति देता है। हालाँकि, XCUITest के कुछ नुकसान भी हैं।

एस्प्रेसो के विपरीत, XCUITest, एक अलग थ्रेड में काम करता है, परीक्षण के दौरान आपको कुछ तत्वों और मापदंडों की उपस्थिति के लिए प्रतीक्षा करने की आवश्यकता होती है। एप्लिकेशन की वर्तमान स्थिति पढ़ी नहीं गई है, और डेटा को अपडेट करने में देरी से अनुरोधित तत्वों का पता लगाने में असमर्थता हो सकती है।

XCTest और XCUITest प्रलेखन ।

EarlGrey

अर्लग्रे का जोर उपयोगकर्ता अनुभव को पुन: पेश करने पर है। जब तक स्क्रीन पर तत्वों को नेत्रहीन रूप से प्रस्तुत नहीं किया जाता है, तब तक एप्लिकेशन के साथ काम करने का अनुकरण शुरू नहीं होता है।

इसी समय, कई सुविधाएं और फायदे नोट किए गए हैं। सबसे पहले, विशेषज्ञ जिस तरह से फ्रेमवर्क अनुरोधों, यूआई और थ्रेड्स को सिंक्रनाइज़ करता है। किसी प्रतीक्षा और प्रतीक्षा की आवश्यकता नहीं है।

दूसरे, जैसा कि पहले ही उल्लेख किया गया है, तत्वों की दृश्यता को ट्रैक करने के लिए विशेष ध्यान दिया जाता है। इंटरफ़ेस की लोडिंग की जाँच करने के लिए टूल में एक अतिरिक्त परत होती है और उपयोगकर्ता के इशारों को पुन: पेश करता है - स्वाइप, क्लिक - सीधे एप्लिकेशन इवेंट स्तर पर।

रिपोजिटरी लिंक: github.com/google/EarlGrey और google.imtqy.com/EarlGrey ।

यूनिवर्सल उपकरण

यूनिवर्सल टूल (या "कॉम्बिनेशन") आपको केवल एंड्रॉइड या आईओएस पर अपनी पसंद को सीमित करने की अनुमति नहीं देता है, लेकिन दोनों प्लेटफार्मों के साथ काम करने के लिए।

ऐसे उपकरण निम्नलिखित प्रकारों के परीक्षण अनुप्रयोगों के लिए लागू होते हैं:

• नेटिव ऐप्स (देशी ऐप्स) - सीधे एंड्रॉइड, आईओएस और विंडोज एसडीके के तहत लिखे गए हैं।
• मोबाइल वेब ऐप - एक मोबाइल ब्राउज़र के माध्यम से उपलब्ध है, जैसे कि सफारी या क्रोम।
• हाइब्रिड एप्लिकेशन (हाइब्रिड एप्लिकेशन) - उपयोगकर्ता वेब एप्लिकेशन के शेल के साथ काम करता है, अर्थात, मूल एप्लिकेशन के इंटरफेस के माध्यम से वेब सामग्री के साथ इंटरैक्ट करता है।

detox

हमारी राय में, Detox प्रतिक्रियात्मक मूल में लिखे गए अनुप्रयोगों के लिए सुविधाजनक है। टेस्ट जावास्क्रिप्ट में लिखे जाते हैं, जबकि आईओएस और एंड्रॉइड एप्लिकेशन एक ही जावास्क्रिप्ट कोड से उत्पन्न होते हैं और यथासंभव समान होते हैं। यह आपको दोनों प्लेटफार्मों के लिए एक ही परीक्षण का उपयोग करने की अनुमति देता है।

डेटॉक्स की एक प्रमुख विशेषता ग्रे-बॉक्स परीक्षण है। इस मामले में, ढांचे में आंतरिक तंत्र की कुछ पहुंच होती है, जो आपको एक गहरे स्तर पर होने वाले अनुप्रयोग के बाहरी व्यवहार को सहसंबंधित करने की अनुमति देता है।

डिटॉक्स मेमोरी और ट्रैक रनिंग प्रोसेस तक पहुंच सकता है। ग्रे-बॉक्स सिद्धांत अस्थिरता का मुकाबला करने में मदद करता है, जो इस तथ्य से परिलक्षित होता है कि एंड-टू-एंड परीक्षण के दौरान:

• कोड में परिवर्तन के बिना भी परीक्षण बेतरतीब ढंग से दुर्घटनाग्रस्त हो सकता है;
• परिणाम नियतात्मक नहीं हैं - आवेदन के भीतर विषम कार्यात्मकताओं और प्रक्रियाओं की बड़ी संख्या के कारण, प्रत्येक लॉन्च के परिणाम एक-दूसरे से अप्रत्याशित रूप से भिन्न हो सकते हैं।
• परीक्षकों को मैन्युअल रूप से सिंक्रनाइज़ करने के लिए मजबूर किया जाता है, जो परिणामों की विश्वसनीयता और गुणवत्ता में कमी को दर्शाता है।

अजीब तरह से, "ग्रे बॉक्स" न केवल बेहतर स्थिरता दिखाता है, बल्कि "ब्लैक बॉक्स" की तुलना में उच्च गति भी है। सभी प्रकार के ठहराव, वेट यूटिल, ग्रे-बॉक्स से बचना 5-10 गुना तेज हो सकता है।

Detox को WebDriver की जरूरत नहीं है, JSON के माध्यम से मूल चालक के साथ काम करना। यह डिवाइस पर सीधे देशी तरीकों का उपयोग करता है। इस ढांचे के अंदर, iOS के लिए अर्लग्रे और एंड्रॉइड के लिए एस्प्रेसो का उपयोग किया जाता है।

रूपरेखा एमुलेटर और भौतिक उपकरणों दोनों के साथ काम करती है।

प्रलेखन के लिए लिंक ।

Appium

Appium का लाभ यह है कि फ्रेमवर्क के साथ संगत किसी भी विशेष रूप में एप्लिकेशन को परिवर्तित करने का सहारा लेने के बिना, एकल एपीआई का उपयोग करके प्रत्येक प्लेटफ़ॉर्म के लिए परीक्षण लिखना संभव है।

परीक्षण करते समय, विक्रेताओं से रूपरेखा का उपयोग किया जाता है - अर्थात, आप मूल अनुप्रयोग के साथ काम कर रहे हैं। Android 4.2+ के लिए, क्रमशः, UiAutomator / UiAutomator2 का उपयोग किया जाता है, और iOS 9.3+ - XCUITest के लिए। वेबड्राइवर (उर्फ सेलेनियम वेबड्राइवर) को फ्रेमवर्क फ्रेमवर्क के रूप में उपयोग किया जाता है।

अपीलीय सिद्धांत:

• एप्लिकेशन को पुन: व्यवस्थित करने या परीक्षण को स्वचालित करने के लिए इसे संशोधित करने की आवश्यकता नहीं है।
• यह किसी एक भाषा या ढांचे से जुड़ा होना आवश्यक नहीं है।
• जब स्वचालन API की बात आती है तो पहिया को सुदृढ़ करना आवश्यक नहीं है।

जब आप एक ही बार में कई प्लेटफार्मों पर परीक्षण को स्वचालित करने के लिए एक उपकरण की आवश्यकता होती है तो Appium का उपयोग करना उचित है। यह उपयोगी है यदि आपके पास वेब अनुप्रयोगों के परीक्षण में अनुभव वाले विशेषज्ञ हैं, लेकिन मोबाइल अनुप्रयोगों के परीक्षण को स्वचालित करने का कोई अनुभव नहीं है।

सामान्य तौर पर, यह एक लचीला उपकरण है जिसे परियोजना की जरूरतों के बिना विकास की भाषाओं के सीमित सेट के अनुकूल बनाने के लिए संशोधित किया जा सकता है।

प्रलेखन के लिए लिंक ।

Ranorex

डेस्कटॉप, मोबाइल और वेब अनुप्रयोगों के परीक्षण के लिए व्यापक उपकरण का भुगतान किया। यह प्रोग्रामिंग का उपयोग करने और बिना स्क्रिप्ट का उपयोग किए दोनों का परीक्षण करने की अनुमति देता है। न केवल एमुलेटर के माध्यम से, बल्कि जीवित उपकरणों पर भी परीक्षण करने की क्षमता प्रदान करता है।

उपकरण आपको परीक्षण बनाने और कॉन्फ़िगर करने की अनुमति देता है, साथ ही उन्हें केंद्रीय रूप से प्रबंधित भी करता है। आप नियंत्रण केंद्र में एक परीक्षण बना सकते हैं और इसे विभिन्न बाहरी वातावरण और किसी भी उपकरण पर चला सकते हैं।

आसानी से अपने मौजूदा सीआई वातावरण के साथ एकीकृत करता है: जीरा और टीएफएस जैसे एप्लिकेशन प्रबंधन प्रणालियों के साथ-साथ गीट और एसवीएन जैसे संस्करण नियंत्रण प्रणाली।

Ranorex का SQL, CSV और Excel से डेटा लोडिंग के साथ डेटा-चालित परीक्षण है।

उपकरण बिल्कुल किसी भी उपकरण के लिए उपयुक्त है, उनमें से प्रत्येक पर समानांतर परीक्षण का समर्थन करता है।

यह तीनों परीक्षण दृष्टिकोणों को जोड़ती है: ब्लैक-बॉक्स, व्हाइट-बॉक्स और ग्रे-बॉक्स।

प्रलेखन के लिए लिंक ।

TestComplete

मोबाइल, वेब और डेस्कटॉप अनुप्रयोगों के स्वचालन के परीक्षण के लिए पेड वातावरण। यह एंड्रॉइड और आईओएस का समर्थन करता है, और एप्लिकेशन प्रकारों के संदर्भ में: देशी, वेब एप्लिकेशन और हाइब्रिड।

मुख्य रूप से कार्यात्मक और इकाई परीक्षण पर केंद्रित, उपकरण कई अन्य प्रकार के परीक्षण करने की क्षमता भी प्रदान करता है:

• प्रतिगमन;
• डेटा-संचालित परीक्षण;
• वितरित परीक्षण और अधिक।

TestComplete में एक रिकॉर्डर है - इसमें परीक्षण कार्यों को रिकॉर्ड करके और संपादक में कमांड सेट करके बनाए जाते हैं। फिर उन्हें सीधे या तो सीधे टूल में लॉन्च किया जा सकता है या तीसरे पक्ष के अनुप्रयोगों में निर्यात किया जा सकता है।

यह उपकरण वस्तुओं और नियंत्रणों को पहचानता है और उनके साथ उपयोगकर्ता बातचीत का अनुकरण करने के लिए विशेष आदेशों की पेशकश करता है। जेनकिंस, गिट, और जीरा के साथ एकीकृत करता है, जिससे आपको निरंतर निर्बाध परीक्षण चलाने की अनुमति मिलती है।

प्रलेखन के लिए लिंक ।

संक्षेप में देना

इस या उस मोबाइल एप्लिकेशन का परीक्षण करने की योजना बनाते समय, ऊपर सूचीबद्ध उपकरणों पर ध्यान दें। उनमें से प्रत्येक की अपनी विशेषताएं हैं, और कभी-कभी सीमाएं हैं।

आइए एक उदाहरण देखें। यदि आप थोड़े समय में एक छोटे से आवेदन के परीक्षण के कार्य के साथ सामना कर रहे हैं, तो सबसे पहले आपको खाते के कारकों जैसे कि परीक्षण किए जा रहे प्रकार और अपने विशेषज्ञों के अनुभव को ध्यान में रखना होगा। यदि कोई डेवलपर परीक्षण लिखता है, तो मूल भाषा और इसके प्लेटफ़ॉर्म के लिए एक टूल चुनना बेहतर होता है (नीचे दी गई तालिका देखें)। यदि परीक्षण एसडीईटी विशेषज्ञों द्वारा किए जाते हैं जो अन्य भाषाओं (जावा, जावास्क्रिप्ट, पायथन, आदि) से परिचित हैं और सेलेनियम के साथ काम कर चुके हैं, तो ऐपियम का उपयोग करना सुविधाजनक है। यदि टीम में कोई अनुभवी एसडीईटी नहीं है, और क्यूए विशेषज्ञ परीक्षण लिखेंगे, तो भुगतान किए गए ढांचे को चुनना बेहतर होगा, क्योंकि उनके पास रिकॉर्डिंग परीक्षणों के लिए उपयोगिताओं और ओपन सोर्स फ्रेमवर्क की तुलना में अधिक स्थिर तकनीकी सहायता है।

हमारे अभ्यास से:
हमने एक ऑनलाइन स्टोर के साथ काम किया, जिसमें दो मोबाइल एप्लिकेशन थे - आईओएस और एंड्रॉइड पर। परीक्षण के साथ मुख्य उपयोगकर्ता परिदृश्यों का परीक्षण करने के लिए, हमने कई कारणों से Appium को चुना:

• क्रॉस-प्लेटफ़ॉर्म, कोड को आंशिक रूप से पुन: उपयोग करने की क्षमता
• अंत-से-अंत परीक्षणों के लिए उपयुक्त, वेब के साथ काम कर सकता है
• विशेषज्ञों की टीम में उपस्थिति, जो सेलेनियम के बारे में अच्छी तरह से जानते हैं, जो इस ढांचे के खोल के रूप में कार्य करता है।

परिणामस्वरूप, Appium पूरी तरह से उम्मीदों पर खरा उतरा, हमने iOS और Android के लिए सफलतापूर्वक परीक्षण किए। यह ध्यान में रखा जाना चाहिए कि एपियम के साथ इस तरह के एंड-टू-एंड परीक्षण हर मर्ज अनुरोध पर नहीं किए जाते हैं, क्योंकि इसमें बहुत समय लगता है।

अंत में, हम आपके ध्यान में एक तालिका लाते हैं जो आपको अपनी परियोजना के लिए उपकरण चुनने में मदद करेगी। यह ध्यान दिया जाना चाहिए कि कुछ मामलों में, तालिका में विभाजन सशर्त है। सरलता के लिए कहीं, एक सामान्यीकरण किया जाता है और केवल सबसे बुनियादी पैरामीटर दिए जाते हैं। परीक्षण उपकरण लगातार विकसित हो रहे हैं, इसलिए जब एक रूपरेखा चुनते हैं तो वर्तमान प्रलेखन की जांच करना महत्वपूर्ण है।



आपका ध्यान के लिए धन्यवाद!