कैसे कीवी 1'000 पायथन परियोजनाओं का परीक्षण करती है

रूसी बोलने के लिए यहां अनुवादित संस्करण पोस्ट किया गया है ।

मॉस्को पायथन कॉन्फ ++ के नाम पर एलेक्स विस्क्रेनु की इस तरह से चर्चा हुई। अब यह सम्मेलन से दो सप्ताह पहले तक है, लेकिन निश्चित रूप से, मैंने पहले ही सुना है कि एलेक्स किस बारे में बात करेगा। कुछ स्पॉइलर के नीचे का पता लगाएं और बैकस्टेज तैयार करने के लिए बात करें: किवी में एक खुला स्रोत चिड़ियाघर किस तरह का विकसित हुआ, यह पायथन कोड का परीक्षण कैसे करता है और द ज़ू के बीच अंतर क्या है और उदाहरण के लिए मैपी।

- कीवी, अपने बारे में थोड़ा बताइए और एक कंपनी के भीतर आपका क्या काम है?

Kiwi.com चेक गणराज्य में स्थित एक ऑनलाइन ट्रैवल एजेंसी है। हम यात्रा को यथासंभव सरल और सुलभ बनाना चाहते हैं । कंपनी की स्थापना 2012 में Skypicker के रूप में हुई थी , और तब से यह यूरोप में एयरलाइन टिकटों के पांच सबसे बड़े ऑनलाइन विक्रेताओं में से एक बन गया है। 2016 में इसका नाम बदलकर Kiwi.com कर दिया गया।

Kiwi.com पर, हम जो विशेष सुविधा प्रदान करते हैं, वह वर्चुअल इंटरलिंकिंग है , जो हमें उन कंपनियों से उड़ानों को जोड़ने की अनुमति देती है, जो आमतौर पर एक साथ सहयोग नहीं करती हैं, और हम विलंबित उड़ानों के कारण संभावित कनेक्शन मुद्दों को कवर कर रहे हैं।

Kiwi.com पर हमारे द्वारा प्रबंधित किए जाने वाले कुछ नंबरों में 90,000,000+ दैनिक खोजें, प्रतिदिन 25,000 सीटें बेची गईं, और कुल 15,000,000,000+ फ़्लाइट संयोजन उपलब्ध हैं।

मेरे बारे में, मैं एलेक्स विस्क्रेनु, एक पूर्ण-स्टैक डेवलपर हूं जो किवी.कॉम पर काम करने के लिए स्पेन से चेक गणराज्य चले गए । मैंने बैकएंड और जावास्क्रिप्ट में मुख्य रूप से बैकबोन.जेएस, एंगुलर या हाल ही में वीयूज जैसे फ्रेमवर्क के साथ फ्रंटेंड पर पायथन के साथ काम किया है।

मैंने प्लेटफ़ॉर्म टीम के भीतर काम करने के लिए Kiwi.com ज्वाइन किया, इसलिए मैं मुख्य रूप से आंतरिक टूल विकसित कर रहा हूं और हमारे डेवलपर्स द्वारा उपयोग की जाने वाली कुछ सेवाओं को ध्यान में रख रहा हूं। जैसा कि इस स्थिति के लिए बुनियादी ढांचे के प्रबंधन के बारे में बहुत सारे ज्ञान की आवश्यकता होती है और उपकरणों का निर्माण होता है मुझे लगता है कि स्थिति शीर्षक जो कि मैं जो कर रहा हूं उसके लिए सबसे उपयुक्त होगा , ऑप्स भाग की तुलना में एक मजबूत देव के साथ ।

- कीवी में आपके पास कितने अजगर डेवलपर्स हैं? एक कंपनी के भीतर उनकी मुख्य पायथन परियोजनाएं क्या हैं?

हमारे सभी कार्यालयों में लगभग 350 डेवलपर हैं। उन 350 डेवलपर्स से, 200 शायद दैनिक आधार पर पायथन के साथ काम करते हैं। अपने मुख्य प्रोजेक्ट्स के बारे में, किवी.कॉम एक माइक्रोसैके आर्किटेक्चर का उपयोग कर रहा है , और प्रत्येक टीम कई सेवाओं के लिए जिम्मेदार है । हमारी वास्तुकला के अंदर हर परियोजना का अपना महत्व है।

मुझे नहीं लगता कि मैं आपको कोई विशिष्ट मुख्य परियोजना बता सकता हूं जो हमारे सभी देवों पर काम कर रही हो। बैकएंड कोड का सार्वजनिक रूप से खुलासा नहीं किया गया है इसलिए इस बारे में मैं बहुत कुछ नहीं कह सकता।

लेकिन हमारे पास कुछ दिलचस्प परियोजनाएं हमारे गिटहब संगठन पर सार्वजनिक रूप से उपलब्ध हैं। वहाँ आप फीनिक्स , हमारे आउटेज घोषणा सुस्त उपकरण पा सकते हैं; क्रेन , गीतालाब से सीधे रैंचर को तैनात करने के लिए हमारी स्क्रिप्ट; चिड़ियाघर , हमारी सेवा सूची और छोटे, लेकिन अभी भी शांत परियोजनाओं का एक समूह।

- सीआई / सीडी और बुनियादी ढांचे की तैनाती के बारे में क्या?

हम अपने सोर्स कोड रिपॉजिटरी के रूप में GitLab का उपयोग कर रहे हैं, और इस प्रकार, GitLab CI सबसे अच्छा एकीकृत करता है। हमें भी लगता है कि यह एक अच्छा समाधान है। यह बहुत लचीला है और यह हमें क्रिप्ट पाइपलाइनों की अनुमति देता है और, क्रेन के साथ, एक साधारण क्लिक के साथ अलग-अलग वातावरण में प्रत्यक्ष तैनाती (या स्वचालित रूप से यदि आप पर्याप्त बहादुर हैं)।

पूरे CI को ऑटोकॉस्लिंग EC2 इंस्टेंस के एक बेड़े द्वारा किया जाता है, जो हमें काम के घंटों के दौरान बहुत अधिक अप्रयुक्त उदाहरणों को न रखकर लागत को कम रखने के दौरान हमें अपने काम के घंटों के दौरान स्केल करने की अनुमति देता है।

अपने बुनियादी ढांचे की परिक्रमा के लिए हम वर्तमान में रंचर का उपयोग कर रहे हैं, जो हमारे लोड और सेवाओं की संख्या के साथ ठीक काम करने के लिए सिद्ध हुआ है।

- लगता है कि अजगर आपकी पसंद की भाषा है। आप किन अन्य भाषाओं का उपयोग कर रहे हैं और किन उद्देश्यों के लिए?

दूसरी सबसे ज्यादा इस्तेमाल की जाने वाली भाषा जावास्क्रिप्ट होनी चाहिए, जिसका इस्तेमाल मुख्य रूप से हमारे सभी फ्रंटेंड और ग्राफकॉल एपीआई के लिए किया जाता है। एंड्रॉइड ऐप्स के लिए हमारे पास कोटलिन और जावा भी हैं; IOS वालों के लिए स्विफ्ट और ऑब्जेक्टिव-सी; सेवाओं के समूह और हमारी उड़ानों के इंजन के लिए C / C ++ के लिए कुछ GoLang।

- आपने ज़ू प्रोजेक्ट का उल्लेख किया, जो किवी का एक नया ओपन सोर्स है। कीवी ओपन सोर्स बातें क्यों करता है? क्या पकड़ है?

कई अन्य कंपनियों के रूप में, हम खुले स्रोत सॉफ्टवेयर पर भरोसा करते हैं जो हम विकसित करते हैं। शायद यह एक क्लिच की तरह लगता है, लेकिन जब आप इतना लेते हैं तो वापस देने के लिए भी अच्छा है , और उस सामूहिक ज्ञान में योगदान करें जो सभी को आगे बढ़ने में मदद करता है।

हम यह भी सोचते हैं कि हम जो परियोजनाएँ खोल रहे हैं, वे अन्य लोगों को लाभ पहुँचा सकते हैं, और साथ ही, हम अन्य दृष्टिकोणों या बेहतर समाधानों से भी लाभ उठा सकते हैं, जिनके बारे में हमने विचार नहीं किया था।

- ज़ू के बारे में अधिक। आप इसके साथ कितने रिपॉजिटरी की जाँच करते हैं?

हमारे पास हमारे आंतरिक GitLab पर लगभग 1300 रिपॉजिटरी हैं और हमारे सार्वजनिक GitHub में लगभग 100 हैं। कुल में 1500 के करीब है।

हमारे पास प्रत्येक रिपॉजिटरी को स्कैन करता है, स्वतंत्र रूप से अगर सेवा चिड़ियाघर में पंजीकृत है या नहीं। उस तर्क के पीछे मुख्य कारण यह है कि स्कैनिंग से हम जो एनालिटिक्स इकट्ठा करते हैं, वह हमारे लिए फायदेमंद होता है और इसके अलावा, जब सेवा द ज़ू में पंजीकृत होती है तो डेटा पहले से ही मौजूद होगा।

- यह एक प्रभावशाली संख्या है! और आप सामान्य रूप से कितनी त्रुटियां पाते हैं? आपको याद करने के लिए कोई अच्छा कैच?

वर्तमान में हमारे डेटाबेस में हमारे पास लगभग 26000 मुद्दे पाए जाते हैं , जिसका अर्थ है प्रति भण्डार प्रति लगभग 20 मुद्दे। ध्यान रखें कि उनमें से अधिकांश कड़ाई से मुद्दे नहीं हैं, लेकिन सिर्फ सिफारिशें हैं।

उचित मुद्दों के सभी अच्छे पकड़ रहे हैं।

चिड़ियाघर के लिए एक चेक लिखने की प्रक्रिया आमतौर पर कुछ भंडार पर कुछ मुद्दे की पहचान करके शुरू होती है। फिर, यदि हम मानते हैं कि यह कुछ ऐसा है जो अधिक स्थानों पर होना खतरनाक हो सकता है, तो हम द जू के लिए चेक लिखने के लिए आगे बढ़ते हैं, बस यह सुनिश्चित करने के लिए कि हम आसानी से पहचान सकते हैं कि कौन सी परियोजनाएं प्रभावित हुई हैं ताकि हम इसे जल्द से जल्द ठीक कर सकें।

वास्तव में महत्वपूर्ण सुरक्षा उल्लंघनों या मुश्किल संदर्भ मुद्दों की अपेक्षा न करें। हम उस उद्देश्य के लिए अन्य उपकरणों का लाभ उठाते हैं, और भले ही हमने उन्हें अपने प्लेटफ़ॉर्म में एकीकृत किया हो, ज़ू का मतलब ऐसे मुद्दों का पता लगाने की पहली पंक्ति नहीं है। यह आमतौर पर यह सुनिश्चित करने के बारे में अधिक है कि हमारे सभी रिपॉजिटरी कुछ सामान्य दिशानिर्देशों का पालन करते हैं।

- चिड़ियाघर में डिफ़ॉल्ट रूप से कोई चेक नहीं है, यह डेवलपर के लिए कुछ चेक लिखने के लिए है। आपने चिड़ियाघर बनाया और आप इसके लिए सभी प्रकार के चेक लिखते हैं। ये चेक क्या हैं, क्या आप कुछ नाम बता सकते हैं?

हां, द ज़ू का मतलब एक ऐसा प्लेटफ़ॉर्म है जहां कोई भी अपनी जाँच लिख सकता है। हमारा अपना है, जो हमारे सेटअप और कॉन्फ़िगरेशन के लिए काफी विशिष्ट हैं, लेकिन हम उन्हें स्रोत भी खोलना चाहते हैं।

जैसा कि मैंने पहले बताया, हमारी जाँच उन मुद्दों पर आधारित है जो हमने अपनी सेवाओं पर पाए हैं। यह समस्या सिर्फ README की सिफारिशों से लेकर नगणक्स कॉन्फ़िगरेशन जैसे अधिक उन्नत कॉन्फ़िगरेशन ऑडिटिंग तक आसान जानकारी एकत्र करने को सुनिश्चित करने के लिए है।

- ऐसा लगता है कि चीजों के बारे में हर बड़ी कंपनी को जांच करनी चाहिए! क्या आप अपनी बात के दौरान उनके बारे में अधिक बताएंगे?

चेक की सामग्री से अधिक मुझे लगता है कि यह एक सरल तरीके से सभी रिपॉजिटरी पर उन्हें चलाने की क्षमता अधिक महत्वपूर्ण है। निश्चित रूप से मैं Kivi.com पर हम क्या कर रहे हैं, के बारे में जानकारी देंगे, जाँच कर रहे हैं, और उम्मीद है कि अन्य लोग हमारे ज्ञान से लाभान्वित होंगे।

मैं पूरी तरह से लोगों को इसके साथ खेलने के लिए प्रोत्साहित करता हूं, अपनी जांच लिखता हूं और सामान्य नॉलेजबेस में योगदान देता हूं। मुझे यकीन है कि कोई ऐसा व्यक्ति मिलेगा जो अपनी आवश्यकताओं के लिए उपयुक्त होगा।

- धन्यवाद! अंत में, यदि आप 5 साल पहले लौट सकते हैं, तो एक पाइथन से संबंधित सलाह आप एक युवा को क्या देंगे?

यह एक आसान नहीं है ... जैसा कि किसी ने सिर्फ पायथन 3 के बारे में 1.5 साल पहले लिखना शुरू किया था, मैं बहुत जल्द ही इसके साथ शुरू करने की सलाह दूंगा। यह भाषा का एक प्राकृतिक विकास है जो भाषा के मूल सिद्धांतों को सुलझाता है। अभी मैं पायथन 2 के साथ कोड पर वापस नहीं जाऊंगा, और न केवल समर्थन के अंत के कारण, बल्कि इसलिए कि मैं इसकी विशेषताओं के साथ अधिक सहज महसूस करता हूं।

निश्चित रूप से मैं अच्छे पुस्तकालयों का एक सामान भी ले जाऊंगा, जिसे मैंने समय के साथ खोजा, साथ में कुछ अच्छी प्रथाओं के साथ जो मैंने सीखा और मैं सीख रहा हूं।

इस दिलचस्प ओपन सोर्स प्रोजेक्ट के साथ काम करने का विवरण जानने के लिए 5 अप्रैल को मॉस्को पायथन कॉन्फ ++ में आएं और शायद किसी तरह से कीवी के अनुभव को उधार लें।