वेब पोर्टल को आगे बढ़ाते हुए: मोनोलिथ से लेकर माइक्रो सर्विस आर्किटेक्चर तक

हम वेब पोर्टल की वास्तुकला को आधुनिक बनाने के अनुभव को साझा करते हैं, जिसने उत्पाद को सुविधाजनक, स्थिर और दोष-सहिष्णु बनाना संभव बनाया: यातायात 350 हजार से बढ़कर 7 मिलियन उपयोगकर्ता हो गए! कहानी उन लोगों के लिए उपयोगी होगी जो अपने उत्पाद का विस्तार करने की योजना बनाते हैं। सबसे पहले, हम यह देखेंगे कि वेब पोर्टल के कार्य और विकास में कौन से कारक हस्तक्षेप कर सकते हैं:

• अप्रचलन। समय के साथ दर्शकों की जरूरतों को पूरा करने के लिए प्रयोज्य दृष्टिकोण, विभिन्न उपकरणों के अनुकूलन, प्रारंभिक उपस्थिति और संरचना बंद हो जाती है।
• तकनीकी अप्रचलन। वेब मानक और प्रौद्योगिकी लगातार विकसित हो रहे हैं। परिवर्तन दोनों डेवलपर टूल (उदाहरण के लिए, चौखटे, डेटाबेस, अन्य सॉफ्टवेयर), और वेब की मूलभूत नींव को प्रभावित करते हैं। अपेक्षाकृत हाल ही में - http से https के लिए एक विशाल संक्रमण और विरासत DNS के लिए समर्थन का परित्याग।
  
• त्रुटियों और दुर्घटनाओं। डेवलपर्स अपूर्ण रूप से अपने कार्य के साथ सामना कर सकते हैं और दोषों की अनुमति दे सकते हैं। इसके परिणामस्वरूप, साइट का उल्लंघन हो सकता है - इस तथ्य से शुरू करना कि बटन पहली बार काम नहीं करते हैं, जब तक कि सिस्टम पूरी तरह से विफल नहीं हो जाते।
  

मामला

हमें एक ग्राहक से संपर्क किया गया था जिसके वेब पोर्टल को और विकास की आवश्यकता थी। एक निश्चित बिंदु पर, हर महीने 350 हजार अद्वितीय आगंतुकों की एक छत तक पहुंचा गया। यह अपर्याप्त लग रहा था - परियोजना में स्पष्ट रूप से संभावनाएं थीं, और हमें यह पता लगाना था कि संसाधन को आगे बढ़ाने के तरीके में वास्तव में क्या था।

आडिट

यह पता चला कि पुराने बिट्रिक्स इंजन को लोड और स्केलिंग के लिए अनुकूलित नहीं किया गया था। प्रणाली के हर एक घटक को बारीकी से एक दूसरे पर निर्भर और निर्भर करता है। लगातार कीड़े को ठीक करना एक ऐसा कष्टदायी कार्य था जिसे हमने एक लचीली और समझने योग्य माइक्रोसर्विस वास्तुकला का प्रस्ताव दिया। उनमें, प्रत्येक घटक पर्याप्त स्वतंत्र है ताकि उसके अंदर की त्रुटियां सिस्टम के शेष तत्वों को "चोट" न दें।

बिट्रिक्स वास्तुकला का आधार बना रहा - कम से कम, प्राधिकरण इसके लिए बंधा हुआ है, लेकिन जहां यह संभव था और महान दक्षता का वादा किया था, हमने कार्यक्षमता को माइक्रोसर्विसेस में स्थानांतरित कर दिया। वे इस परियोजना की आधारशिला बन गए।

नई संयुक्त वास्तुकला ने हमें सिस्टम के स्थिर, तेज संचालन और कुछ मॉड्यूल पर त्रुटियों की लगभग पूर्ण अनुपस्थिति प्रदान की है। यह विपणक के प्रभावी कार्य के आधार के रूप में भी कार्य करता है। उन्नत वास्तुकला के लिए धन्यवाद, पदोन्नति विशेषज्ञ 20 बार संसाधन की उपस्थिति बढ़ाने में कामयाब रहे।



Mikroservisy

स्टैंड-अलोन माइक्रोसर्विसेस में, हमने एक फ़ाइल लोडर, खोज और समाचार फ़ीड जैसे मॉड्यूल को प्रतिष्ठित किया। इन उपयोगकर्ता के अनुकूल और स्पष्ट चीजों के अलावा, कई अन्य कार्यात्मक तत्व माइक्रोसर्विस के रूप में लागू किए गए थे:

• ओपन सोर्स प्रोजेक्ट्स से डेटा का अनलोडिंग, भंडारण और प्रबंधन;
• RSS फ़ीड्स का गतिशील निर्माण;
• ब्लॉक की एक प्रणाली का गतिशील निर्माण, संरचनात्मक ब्लॉकों में किसी भी सेवाओं की सामग्री का लेआउट;
• सेवा सामग्रियों में अतिरिक्त डेटा जोड़ना;
• तकनीकी सहायता सेवा;
• विभिन्न डेटा का एक एकल कैटलॉग।

उपरोक्त सभी के अलावा, हमने व्यवस्थापक पैनल के साथ सुविधाजनक काम के लिए कई माइक्रोसॉर्क्स बनाए हैं।



साइट का प्रत्येक कार्यात्मक ब्लॉक एक काफी स्वायत्त इकाई बन गया है। एक समर्पित प्रक्रिया का उपयोग अन्य सेवाओं के साथ चौराहे को कम करने और रेंडर करने के लिए किया जाता है।

सहमत, जब कोई उपयोगकर्ता भुगतान करता है, तो वह पृष्ठ के दूसरे भाग में एक अनावश्यक वीडियो को वापस चलाने के लिए जिम्मेदार स्क्रिप्ट को लोड करने के लिए एक लंबा समय इंतजार नहीं करना चाहेगा। दरअसल, अखंड प्रणालियों में यही होता है - पक्ष कार्यक्षमता कभी-कभी वास्तव में महत्वपूर्ण घटकों के काम में हस्तक्षेप करती है।

हमने पहला कदम उठाया और उपयोगकर्ताओं और डेवलपर्स दोनों के लिए जीवन को आसान बना दिया, प्रति वर्ष 20 से अधिक नई सेवाओं को जारी किया। परिणामस्वरूप:

• हमने स्केलिंग की समस्या को हल किया।
• वितरित टीमों द्वारा एक अधिक कुशल विकास प्रक्रिया को कार्यान्वित किया।
• सुचारू और तेज प्रणाली संचालन के लिए गतिशील संसाधन प्रबंधन स्थापित करें।

प्रौद्योगिकी ढेर उन्नयन

समानांतर में, हमने प्रौद्योगिकी स्टैक को अपडेट किया। यदि पोर्टल मूल रूप से php 5.6 और MySQL 5.6 पर आधारित था, तो इंजन को बेहतर बनाने के लिए, हमने इसे php 7.0 और MySQL 5.7 में बदल दिया। Yii2 ढांचे को लागू किया, मेमेचे कैशिंग प्रदान किया।



टास्क की कतार

कार्यों को बेहतर ढंग से समानांतर करने के लिए, हमने वेब श्रमिकों - आंतरिक हैंडलर - को रैबिटमक्यू कतार में स्थानांतरित कर दिया। यह ट्रिगरिंग घटनाओं के अनुक्रम का अनुकूलन करता है, जो सिस्टम पर लोड को कम करता है। साइट के साथ काम करना बहुत तेज़ और अधिक आरामदायक हो गया है।

निरंतर एकीकरण

GitLab CI का उपयोग करके एक पारदर्शी और प्रबंधनीय विकास प्रक्रिया समर्थित है। यह वास्तव में निरंतर निर्बाध विकास है जो प्रोग्रामर और परीक्षकों को पैचिंग छेद के बजाय महत्वपूर्ण प्रश्नों के साथ अधिक समय देता है।

त्रुटियों को कम करने के लिए, हमने अतिरिक्त विकास छोरों की शुरुआत की। श्रृंखला में कई अनुप्रयोग और अवसंरचना परीक्षण लूप होते हैं: पूर्व-रिलीज़, जहां नवीनतम असेंबली परीक्षण (प्री-प्रोडक्ट), कॉम्बैट (ठेस), कई टेस्ट लूप के लिए एक साथ कई टेस्ट, साथ ही साथ डेवलपर्स के लिए एक लूप आयोजित किया जाता है।

विधानसभा प्रणाली

प्रारंभिक चरण में, प्रोजेक्ट स्रोतों से बिल्ड बनाए जाते हैं। कक्षाओं, शैलियों और हैंडलर के एक विषम सेट के बजाय, संयुक्त संस्थाओं का उपयोग किया जाता है - प्रत्येक एक निष्पादन योग्य फ़ाइल के खोल में। केवल आवश्यक निर्माण पृष्ठ पर घटनाओं के प्रदर्शन के लिए विधानसभा में रखे गए हैं। यह अतिरिक्त रूप से साइट की लचीलापन और गति प्रदान करता है।

निगरानी में त्रुटि

GitLab CI कोड सत्यापन और स्वचालित परीक्षण के लिए उन्नत सुविधाएँ प्रदान करता है। दिए गए मापदंडों के साथ असेंबली की थोड़ी सी विसंगति पर, सिस्टम डेवलपर्स को सूचित करता है और बग फिक्स होने तक घटक कार्यान्वयन की आगे की प्रक्रिया शुरू करने की अनुमति नहीं देता है। इसके अतिरिक्त, हमने संतरी, एक पूर्ण त्रुटि निगरानी उपकरण स्थापित किया।



प्रक्रिया अनुकूलन

सिस्टम को उच्च प्रदर्शन की स्थिति में बनाए रखने के लिए, हमने लगातार व्यावसायिक प्रक्रियाओं और बुनियादी ढांचे को अनुकूलित किया है। साझा पुस्तकालयों और सेवाओं के प्रोटोटाइप नए कार्यों के तेजी से कार्यान्वयन का आधार बन गए - हम तैयार किए गए टेम्पलेट लेते हैं और थोड़े समय में हमें एक काम करने वाला उत्पाद मिलता है।

निगरानी और संचालन

सभी प्रक्रियाएँ पूर्ण दृष्टि में हैं। प्रत्येक नोड की स्थिति की निगरानी करना हम ज़ैबिक्स प्रदान करते हैं - एक व्यापक ट्रैकिंग सिस्टम। हमें परियोजना संरचना के बहुत मूल में देखने और इसे कॉम्पैक्ट रूप से देखने का अवसर मिला।

हमने Grafana प्लेटफ़ॉर्म को भी कनेक्ट किया है, जो ग्राहक कर्मचारियों की सुविधा के लिए डेटा को विज़ुअल डैशबोर्ड में बदल देता है।

स्थिरीकरण और refactoring

आवश्यकतानुसार, हमने सिस्टम को फिर से बनाया - कोड सरल किया गया और संक्षिप्त हो गया। उसी समय, बढ़ने के लिए हमेशा जगह होती है, क्योंकि सिस्टम के नियमित डोपिंग साइट को गति देते हैं। परिणामस्वरूप, खोज इंजन और उपयोगकर्ताओं के लिए संसाधन अधिक अनुकूल हो गए हैं।

नई वास्तुकला विकास का आधार है

काम की शुरुआत में, संसाधन में पदोन्नति की एक मामूली क्षमता थी और ग्राहकों के लिए पर्याप्त सुविधाजनक नहीं थी, जिसने कंपनी की व्यावसायिक प्रक्रियाओं को बाधित किया। साइट के साथ उपयोगकर्ता इंटरैक्शन की प्रक्रिया में सुधार करने के लिए, हमने लगभग पूरी तरह से पोर्टल आर्किटेक्चर और इसकी संरचना को अपडेट किया, एक लचीला तंत्र बनाया जो बड़ी संख्या में सेवाओं और अनुप्रयोगों के साथ एकीकृत होता है, हमारे अपने एपीआई के लिए धन्यवाद। कई सेवाएं एक साल से अधिक समय से बेहतर तरीके से काम कर रही हैं, हस्तक्षेप की आवश्यकता के बिना - उनके काम में त्रुटियों की संख्या लगभग शून्य हो गई है।

नई साइट व्यवसाय विकास के लिए एक शक्तिशाली उपकरण है, जिसमें आगे स्केलिंग की क्षमता है। वेब एप्लिकेशन के अपडेटेड आर्किटेक्चर का उपयोग करते हुए, प्रोजेक्ट के मार्केटर्स अपनी प्रचार गतिविधियों को लागू करने और प्रति माह 350 हजार अद्वितीय आगंतुकों से ट्रैफ़िक को 7 मिलियन से अधिक तक बढ़ाने में सक्षम थे। इसके अलावा, दर्शकों में कई वृद्धि के बाद, पोर्टल लगातार कार्य करना जारी रखता है।