🔢 🕚 🕕 टेप रिकॉर्डर - रिकॉर्डिंग ऑटोटेस्ट्स के लिए एक उपकरण 🈵 🙌🏾 🕹️

शुभ दोपहर, प्रिय पाठकों। मेरा नाम विक्टर ब्यूरोव है। मैं आईएसपीसिस्टम में एक डेवलपर के रूप में काम करता हूं और टेस्ट ऑटोमेशन में अपने अनुभव को साझा करना चाहता हूं।

ऐसा हुआ कि हमारे देश में मैनुअल परीक्षण प्रबल हुआ, और परीक्षकों ने समान कार्य करने में बहुत समय बिताया। एक बार हमने सोचा: क्यों न परीक्षक के कार्यों को दोहराने के लिए पैनल को पढ़ाया जाए, क्योंकि, वास्तव में, वे सभी विशिष्ट एपीआई कॉल में बदल जाते हैं। यह लोगों को प्रोग्रामिंग कौशल के बिना भी परीक्षण लिखने की अनुमति देगा।

हमने स्वचालित परीक्षण बनाने के लिए एक मॉड्यूल लिखने का फैसला किया। ताकि परीक्षण करने के लिए परीक्षक सिर्फ बटन दबा सके, परीक्षण के मामले की शर्तों को पूरा कर सके, अंत में "फिनिश" पर क्लिक करें - और यह परीक्षण तैयार था! एक सरल विचार, लेकिन यह महसूस करना आसान नहीं था। क्योंकि हम चाहते थे कि यह मॉड्यूल हमारे उत्पादों के लिए अधिकतम रूप से अनुकूलित हो और एक एकीकृत इंटरफ़ेस का लाभ उठाए: ताकि रिकॉर्ड किया गया वीडियो एक तैयार किए गए परीक्षण के मामले की तरह लगे। यह लेखन परीक्षणों के मैनुअल काम को पूरी तरह से समाप्त कर देगा। परिणामी प्रणाली को "टेप रिकॉर्डर" कहा जाता था।

परीक्षण मामले की स्थिति देखने के लिए इंटरफ़ेस

कार्य सिद्धांत

सभी अनुरोध पैरामीटर (HTTP हेडर, पर्यावरण चर, पोस्ट डेटा, यदि कोई हो) और संपूर्ण प्रतिक्रिया xml फ़ाइल में लिखी गई है। प्रत्येक रिकॉर्ड को एक सीरियल नंबर सौंपा गया है। सभी अनुरोधों को संशोधित और गैर-संशोधित में विभाजित किया गया है। परीक्षण रिकॉर्ड करने के बाद, कई गैर-संशोधित अनुरोधों को काट दिया जाता है, क्योंकि वे परीक्षणों के निष्पादन को प्रभावित नहीं करते हैं और केवल निष्पादन प्रक्रिया को विलंबित करते हैं (इसलिए स्क्रीनशॉट में लापता अनुक्रम संख्या)।

रिकॉर्डिंग के दौरान, टेप रिकॉर्डर आपको एक क्लिक में प्रपत्रों पर और सूचियों के कॉलम में मानों की जांच सेट करने की अनुमति देता है। यह आपको नकारात्मक परीक्षणों को रिकॉर्ड करने की भी अनुमति देता है, यह याद करते हुए कि परीक्षण की रिकॉर्डिंग करते समय पैनल क्या त्रुटि देता है।

प्लेबैक के दौरान, ब्राउज़र का उपयोग किए बिना अनुरोध सीधे एप्लिकेशन एपीआई को भेजे जाते हैं।

वास्तव में, एक टेप रिकॉर्डर एक मॉड्यूल है जो हमारे सभी उत्पादों में एकीकृत होता है और आपको ईवेंट-उत्तरदायी प्रोसेसर स्थापित करने की अनुमति देता है। COREmanager का उपयोग करके लिखा गया है।

टेप रिकॉर्डर द्वारा की गई कॉल को रिकॉर्ड करने का एक उदाहरण:

अभिलेख

<params> <param name="CONTENT_LENGTH">210</param> <param name="CONTENT_TYPE">application%2Fx%2Dwww%2Dform%2Durlencoded%3B%20charset%3DUTF%2D8</param> <param name="HTTPS">on</param> <param name="HTTP_ACCEPT">text%2Fhtml%2C%20%2A%2F%2A%3B%20q%3D0%2E01</param> <param name="HTTP_ACCEPT_LANGUAGE">en%2DUS%2Cen%3Bq%3D0%2E5</param> <param name="HTTP_CACHE_CONTROL">no%2Dcache</param> <param name="HTTP_CONNECTION">keep%2Dalive</param> <param name="HTTP_COOKIE">corelang5%3Dorion%3Aru%3B%20ispmgrlang5%3Dorion%3Aru%3B%20ipmgrlang5%3Dorion%3Aru%3B%20ipmgrses5%3Dbdd69179d627%3B%20ispmgrses5%3D14157f7bbc5e%3B%20menupane%3D30%5Faccount%2D1%253A30%5Fdomains%2D1%253A30%5Fwebserver%2D1%253A30%5Fantispam%2D1%253A30%5Fmaintain%2D1%253A30%5Ftool%2D1%253A30%5Fstat%2D1%253A30%5Fsrvset%2D1%253A30%5Fsysstat%2D1%253A30%5Fintegration%2D1%253A30%5Fset%2D1%253A30%5Fmgrhelp%2D1</param> <param name="HTTP_HOST">172%2E31%2E240%2E175%3A1500</param> <param name="HTTP_ISP_CLIENT">Web%2Dinterface</param> <param name="HTTP_PRAGMA">no%2Dcache</param> <param name="HTTP_REFERER">https%3A%2F%2F172%2E31%2E240%2E175%3A1500%2Fispmgr</param> <param name="HTTP_USER_AGENT">Mozilla%2F5%2E0%20%28X11%3B%20Ubuntu%3B%20Linux%20x86%5F64%3B%20rv%3A24%2E0%29%20Gecko%2F20100101%20Firefox%2F24%2E0</param> <param name="HTTP_X_REQUESTED_WITH">XMLHttpRequest</param> <param name="QUERY_STRING"/> <param name="REMOTE_ADDR"></param> <param name="REMOTE_PORT">38640</param> <param name="REQUEST_METHOD">POST</param> <param name="REQUEST_URI">%2Fispmgr</param> <param name="SCRIPT_NAME">%2Fispmgr</param> <param name="SERVER_ADDR">172%2E31%2E240%2E175</param> <param name="SERVER_NAME">172%2E31%2E240%2E175</param> <param name="SERVER_PORT">1500</param> </params> <postdata>func%3Demaildomain%2Eedit%26elid%3D%26name%3Dtest%2Eemail%26owner%3Dusr%26ipsrc%3Dauto%26defaction%3Derror%26redirval%3D%26spamassassin%3Doff%26avcheck%3Doff%26clicked%5Fbutton%3Dok%26progressid%3Dfalse%5F1424243906672%26sok%3Dok%26sfrom%3Dajax%26operafake%3D1424243906673</postdata> <answer> <doc lang="ru" func="emaildomain.edit" binary="/ispmgr" host="https://172.31.240.175:1500" features="cba82687e7756e2c0195c88d4180f5d50" notify="0" theme="/manimg/orion/" css="main.css" logo="logo-ispmgr.png" logolink="" favicon="favicon-ispmgr.ico" localdir="default/"> <metadata name="emaildomain.edit" type="form" mgr="ispmgr" decorated="yes"> <form> <field name="name"> <input type="text" name="name" required="yes" check="domain" convert="punycode" maxlength="255"/> </field> //   <buttons> <button name="ok" type="ok"/> <button name="cancel" type="cancel"/> </buttons> </form> </metadata> <messages name="emaildomain.edit" checked="cba82687e7756e2c0195c88d4180f5d5"> <msg name="currentmonth"> </msg> // </messages> <doc lang="ru" func="emaildomain.edit" binary="/ispmgr" host="https://172.31.240.175:1500" features="cba82687e7756e2c0195c88d4180f5d50" notify="0" theme="/manimg/orion/" css="main.css" logo="logo-ispmgr.png" logolink="" favicon="favicon-ispmgr.ico" localdir="default/"> <slist name="owner"> <val key="usr">usr</val> </slist> <slist name="defaction"> <val msg="yes" key="error">  </val> </slist> <slist name="ipsrc"> <val msg="yes" key="auto"> </val> </slist> <name/> <avcheck>off</avcheck> <owner>usr</owner> <ipsrc>auto</ipsrc> </doc> <id>test.email</id> <ok/> <tparams> <clicked_button>ok</clicked_button> </tparams> </doc> </answer> <localmacro> <macros name="mpre_HostIP" field="ipsrc">auto</macros> </localmacro>

सुधार (जिसके बारे में हमने पहले नहीं सोचा था)

उम्मीद

एक व्यक्ति "बस इंतजार" कर सकता है, एक कंप्यूटर - नहीं। टेप रिकॉर्डर को हल करने वाली पहली समस्याओं में से एक वाटर्स का लेखन था। ऑपरेशन पूरा होने की प्रतीक्षा करने के लिए लोगों ने क्या आविष्कार नहीं किया। पृष्ठभूमि कार्यों की अपेक्षा और निर्दिष्ट संख्या में सेकंड के लिए स्टॉप पर स्टॉप जोड़ने की क्षमता को लागू किया गया था।

रिकॉर्डिंग और संपादन परीक्षण कदम

शायद, हर कोई टाइपराइटर के समय को याद करता है: एक गलती - और आपको पूरे पृष्ठ को पुनर्मुद्रण करना होगा।

ताकि परीक्षक को एक गलत कार्रवाई के साथ पूरे परीक्षण को फिर से लिखना न पड़े, बचत करने के बाद किसी भी चरण से परीक्षण को फिर से रिकॉर्ड करने के लिए एक तंत्र जोड़ा गया था। संपादित करने की क्षमता तब काम आती है जब आपको परीक्षण कार्यों के व्यवहार में परिवर्तन के लिए परीक्षण को अनुकूलित करने की आवश्यकता होती है।

चर के लिए मैक्रोज़

परीक्षणों के दौरान, जिस सर्वर पर वे चल रहे थे, उसके आधार पर संचरित और जाँच किए गए मापदंडों के मान बदल गए। इस तरह के डेटा का एक उदाहरण आईपी पते है। परीक्षण रिकॉर्डिंग चरण में उन्हें पहचानना असंभव है, इसलिए मैंने एक मैक्रो सिस्टम जोड़ा। इसने हमें ऐसे परीक्षण बनाने की अनुमति दी है जो पर्यावरण के लिए बहुत कठोर नहीं हैं। समाधान का दोष यह है कि रिकॉर्डिंग के बाद, मैक्रोज़ को मैन्युअल रूप से निर्दिष्ट किया जाना चाहिए।

एक और समस्या जो टेप रिकॉर्डर के साथ काम को काफी जटिल करती है, वह है गैर-देशी कुंजी का उपयोग। हमने इसे तुरंत ध्यान नहीं दिया, क्योंकि हमने ISPmanager पर टेप रिकॉर्डर का परीक्षण किया था, जो मूल पहचानकर्ताओं का उपयोग करता है। लेकिन कुछ अन्य पैनलों में, रिकॉर्ड एक अद्वितीय आईडी द्वारा पहचाना जाता है। इसलिए, मुझे रिकॉर्ड या ऑब्जेक्ट बनाने के बाद पहचानकर्ता को न केवल टेप रिकॉर्डर सिखाना पड़ा (क्योंकि आईडी शुरू से शुरू में बदल सकता है), लेकिन बाद के सभी अनुरोधों में इसे प्रतिस्थापित करने के लिए भी।

JUnit प्रारूप का समर्थन

जेनकिंस निरंतर एकीकरण वातावरण में टेप-जनरेट किए गए परीक्षण स्वचालित रूप से चलते हैं। परीक्षणों के पूरा होने के बाद, JUnit प्रारूप में डेटा युक्त एक xml फ़ाइल बनाई जाती है। फ़ाइल को सही ढंग से बनाने के लिए, परीक्षणों के नामकरण पर प्रतिबंध लगाया गया था। उदाहरण के लिए, परीक्षण User.Create.xml उपयोगकर्ता के नाम के साथ टेस्टसुइट में गिर गया और इसलिए, इसने Create के साथ एक टेस्टकेस बनाया। त्रुटि के मामले में, त्रुटि के पूर्ण विवरण के साथ एक विफलता नोड इसमें जोड़ा गया था।

मैट्रिक्स

परीक्षणों के पारित होने के दौरान अनूठे नामक कार्यों की संख्या की गणना की जाती है और अनुपात केवल आंतरिक उपयोग के लिए उपलब्ध कार्यों को छोड़कर, कुल कार्यों के प्रतिशत के रूप में निर्धारित किया जाता है। इस प्रकार, सबसे सरल परीक्षण कवरेज को मापा जाता है। इसके अलावा, मीट्रिक परीक्षण और सफल और असफल परीक्षणों की संख्या को पूरा करने के लिए लिया गया कुल समय दिखाते हैं।

टेस्ट रिपॉजिटरी

सबसे पहले परीक्षण रिपॉजिटरी तैयार किए गए परीक्षणों को अन्य सर्वरों में स्थानांतरित करने की समस्या को हल करती है। यह तब भी काम आता है जब कई परीक्षक परीक्षण लिखते हैं। भंडारण परीक्षणों के भंडारण के लिए एक छोटा पैनल विकसित किया गया था और हमारी कोरमैनगर के आधार पर भी तैनात किया गया था। टेप रिकॉर्डर में भंडारण के साथ परीक्षणों को सिंक्रनाइज़ करने के लिए एक मॉड्यूल है। रिपॉजिटरी से एक नया टेस्ट या अनलोडिंग टेस्ट लिखते समय, वे रिपॉजिटरी में लोड करने के लिए स्वचालित रूप से अनुपलब्ध हो जाते हैं ताकि कोई भ्रम न हो। परीक्षण को बदलने के बाद, संशोधन संख्या में वृद्धि की जाती है ताकि परिवर्तनों के बाद केवल परीक्षण भंडार में लोड किए जा सकें।

कठिनाइयाँ (अच्छी तरह से, जहाँ उनके बिना)

टेप रिकॉर्डर का उपयोग करने से पता चला कि सभी एपीआई फ़ंक्शन ने हमारी आंतरिक सिफारिशों का पालन नहीं किया। विशेष रूप से, सभी कार्यों ने अपने निर्माण के बाद रिकॉर्ड पहचानकर्ता को वापस नहीं किया। मुझे काम करने वाले कोड सहित वापस लौटना था, और इसे आवश्यकताओं के अनुरूप लाना था।

गतिरोध एक और समस्या है। पैनल का अर्थ है कि कुछ महत्वपूर्ण क्रियाओं का प्रदर्शन अनन्य मोड में है। और टेप रिकॉर्डर, एक ही पैनल का हिस्सा होने के कारण, इस तरह के कार्यों के कारण पूरे सिस्टम को फ्रीज कर दिया गया। यह केवल GDB (किसी ने इस सुविधा को याद नहीं किया) की मदद से निर्धारित करना संभव था। दुर्भाग्य से, बैसाखी थे, क्योंकि यह बहु-थ्रेडेड मोड में इन कार्यों को करने के लिए टेप रिकॉर्डर के परीक्षणों को चलाने के दौरान तय किया गया था। सैद्धांतिक रूप से, टेप रिकॉर्डर को एक मॉड्यूल के साथ नहीं, बल्कि एक अलग पैनल के साथ डिजाइन करना संभव था। लेकिन हमने कोशिश नहीं की।

दुर्भाग्य से, लिखना और भूलना भी विफल रहा। हमारे उत्पादों का इंटरफ़ेस बदल रहा है और अधिक जटिल होता जा रहा है। इसके अलावा, इंटरफ़ेस घटकों की संख्या सक्रिय रूप से बढ़ रही है। इसलिए, टेप रिकॉर्डर को समय-समय पर संशोधित करना पड़ता है, ताकि जब नए घटक दिखाई दें, तो यह उनकी संरचना का विश्लेषण कर सके और प्रश्नों के परिणामों को संसाधित कर सके।

निष्कर्ष

टेप रिकॉर्डर बनाने से परीक्षण किए गए उत्पादों की गुणवत्ता में सुधार करने में मदद मिली है। प्रशिक्षण परीक्षकों के लिए समय और संसाधन की बचत की। जिस तरह से, टेप रिकॉर्डर ने हमें आंतरिक सिफारिशों के अनुपालन के लिए हमारे एपीआई की समीक्षा करने की अनुमति दी, और, इसलिए एपीआई को तार्किक रूप से थोड़ा और अधिक बनाएं।

टेप रिकॉर्डर - रिकॉर्डिंग ऑटोटेस्ट्स के लिए एक उपकरण