DevProject अवार्ड: डेवलपर भाषण 2019 पर मेरा भाषण

सभी को नमस्कार

मेरा नाम दिमित्री गोलेव है। मैं वेलियोव ग्रुप का संस्थापक और तकनीकी निदेशक हूं। आज मैं उस सेवा के बारे में बात करूँगा जिसे DeveloperWeek से "देव परियोजना" पुरस्कार से सम्मानित किया गया था। इस अवसर पर, हम DevExec विश्व परिदृश्य से परियोजना के बारे में बात करने के लिए आमंत्रित किए गए, नीचे मेरे भाषण का एक पाठ संस्करण है।

जैसा कि आप लोगो से अनुमान लगा सकते हैं, हम वेब विकास और जावास्क्रिप्ट पर केंद्रित हैं। सेवा का लक्ष्य एपीआई सर्वर, वेबसाइटों, प्रगतिशील वेब अनुप्रयोगों (पीडब्ल्यूए) और लिनक्स सर्वर पर वेब समाधान की लागत को कम करना है।

अधिकांश वेब प्रोजेक्ट एक डोमेन नाम से शुरू होते हैं। डोमेन नाम में Whois और DNS रिकॉर्ड्स हैं, और चूंकि HTTP / 2 का युग अब है, इसलिए सर्वर और उपयोगकर्ता के ब्राउज़र के बीच संचार एन्क्रिप्ट किया जाना चाहिए, और SSL इसके लिए आवश्यक है, या अधिक सही ढंग से, TLS प्रमाणपत्र।

हम डोमेन नाम डेटा (Whois, DNS, SSL / TLS) की अखंडता की लगातार निगरानी करते हैं और प्रमाणपत्र और डोमेन की समाप्ति तिथि की निगरानी करते हैं। डेटा में सभी परिवर्तनों की सूचनाएँ और डोमेन और प्रमाणपत्रों की आगामी समाप्ति तिथियों को एसएमएस या ईमेल संदेशों के माध्यम से वितरित किया जा सकता है।

हम मानते हैं कि यह सेवा एक शानदार तरीका है:

1. जल्दी से अनधिकृत पहुंच और परिवर्तनों का पता लगाएं;
2. डोमेन नाम सेट करते समय, प्रमाणपत्र की जगह और DNS रिकॉर्ड को अपडेट करते समय त्रुटियों को समाप्त करें।

डोमेन नाम नियंत्रण कक्ष ( ऊपर ), DNS, SSL / TLS प्रमाणपत्र और Whois ( नीचे ) में परिवर्तन की सूचनाओं का एक उदाहरण:

आपकी ज़िम्मेदारी के क्षेत्र के अनुसार आपकी टीम के सदस्यों द्वारा अधिसूचनाएँ व्यक्तिगत हो सकती हैं:

हमने इस सेवा को " मूल डोमेन नाम सुरक्षा " कहा है और इसे सभी टैरिफ योजनाओं पर सभी उपयोगकर्ताओं के लिए हमेशा के लिए मुफ्त कर दिया है। हमारा मानना ​​है कि यह कई उपयोगकर्ताओं को स्थितियों से बचाएगा:

1. यातायात पुनर्निर्देशन;
2. MITM;
3. प्रमाणपत्र प्रतिस्थापन;
4. डीएनएस अपहरण;
5. एक डोमेन नाम और अन्य बहुत अप्रिय स्थितियों की चोरी।

हम एक डोमेन नाम के मालिक की समस्या को हल करते हैं जब रिकॉर्ड को नियंत्रित करना संभव नहीं होता है, क्योंकि यह बहुत बार किया जाना चाहिए, जिसमें रात भी शामिल है - यह एक व्यक्ति के लिए बस एक असंभव कार्य है।

क्या मैं उन सेवाओं पर भरोसा कर सकता हूँ जहाँ डोमेन नाम खरीदा गया था? ज्यादातर मामलों में, DNS सेवाओं में रिकॉर्ड में किए गए बदलावों की सूचना नहीं होती है, और केवल रजिस्ट्रार से एक डोमेन नाम की समाप्ति के बारे में अधिसूचना केवल स्पैम में गिर सकती है और किसी का ध्यान नहीं जा सकता है। एसएसएल / टीएलएस प्रमाणपत्रों का एक दुर्लभ प्रकाशक और वितरक प्रमाण पत्र को फिर से जारी करने की आवश्यकता के बारे में सूचनाएं भेजता है, इसलिए हम इस निष्कर्ष पर पहुंचे कि रिकॉर्ड और प्रमाण पत्र को अक्सर और स्वचालित रूप से जांचने की आवश्यकता होती है। प्रारंभ में, यह एक आंतरिक सेवा थी जो अब सभी के लिए उपलब्ध है ।

पूर्व-प्रतिपादन (पूर्व-प्रतिपादन)

सबसे लोकप्रिय सेवा उत्पाद प्री-रेंडरिंग है । यदि आप कभी भी एंगुलर, रिएक्ट, वीयू, ब्लेज़ या किसी अन्य "क्लाइंट" लाइब्रेरी में वेब एप्लिकेशन लिखने के लिए पर्याप्त भाग्यशाली रहे हैं, तो आप देख सकते हैं कि सर्वर पर उन पेजों की प्रतिक्रिया अलग-अलग होती है जिनका एचटीएमएल कोड सर्वर पर उत्पन्न होता है। "क्लाइंट" पुस्तकालयों पर आधारित वेब एप्लिकेशन में डेटा और टेम्पलेट के बिना न्यूनतम आवश्यक HTML मार्कअप है।

आधुनिक वेब अनुप्रयोग गतिशील या " उत्तरोत्तर " सर्वर से भागों में कोड, टेम्पलेट्स और उनके डेटा को खींचते हैं। सर्वर से लोड किया जाएगा "क्लाइंट" खुद ( ब्राउज़र, डिवाइस ) द्वारा तय किया जाता है, उपयोगकर्ता के कार्यों के आधार पर, खुले पृष्ठ ( "मार्ग", मार्ग ) और कार्यात्मक आवश्यकताओं। आज हम ऐसे अनुप्रयोगों को प्रगतिशील वेब ऐप (PWA) कहते हैं।

जैसा कि आप इस स्लाइड पर देख सकते हैं, पीडब्ल्यूए के कई फायदे हैं और एक बड़ा ऋण है - एसईओ अनुकूलन की पूर्ण कमी।

जबकि सर्वर पर HTML पेज का गठन उपयोगकर्ता के ब्राउज़र में काम करने के लिए एक शर्त नहीं है, तथाकथित मकड़ियों और बॉट्स (क्रॉलर, स्पाइडर, और बॉट) विज़िट किए गए पृष्ठ के जावास्क्रिप्ट को निष्पादित नहीं करते हैं। आपकी साइट खोज परिणामों (Google, Bing, Yandex, आदि) में दिखाई देने के लिए, तत्काल संदेशवाहक, सामाजिक नेटवर्क (Skype, Facebook, Twitter, iMessage, vk.com, आदि) और अधिकांश अनुप्रयोगों और सेवाओं में, जहाँ आप एक लिंक भेज या प्रकाशित कर सकते हैं - आपको "क्लाइंट" जावास्क्रिप्ट के निष्पादन के परिणामस्वरूप उत्पन्न HTML-कोड को स्थानांतरित करने का एक तरीका खोजने की आवश्यकता है।

यदि आप अब इस सवाल का सामना कर रहे हैं कि "क्लाइंट-साइड जावास्क्रिप्ट सॉल्यूशन पर आधारित एप्लिकेशन के लिए एसईओ कैसे प्रदान करें?", आपके पास दो तरीके हैं: विकास में अधिक समय और संसाधनों का निवेश करके " सर्वर साइड रेंडरिंग / एसएसआर " को लागू / एकीकृत करें। या किसी तृतीय-पक्ष प्री-रेंडरिंग सेवा का उपयोग करें।

यह कैसे काम करता है? एक प्रॉक्सी के रूप में, हम रोबोट से आने वाले अनुरोधों को फ़िल्टर करते हैं और उन्हें प्री-रेंडरिंग इंजन पर पुनर्निर्देशित करते हैं, जहां पृष्ठ का अनुरोध किया जाएगा और इसके जावास्क्रिप्ट को निष्पादित किया जाएगा क्योंकि इसे उपयोगकर्ता के ब्राउज़र में निष्पादित किया गया होगा।

प्री-रेंडरिंग के साथ वेब एप्लिकेशन के परिणाम:

मैसेंजर में प्रिव्यू लिंक

सामाजिक नेटवर्क पर लिंक का पूर्वावलोकन करें

खोज इंजन परिणामों में पूर्वावलोकन, विवरण, मेटाडेटा और साइटलिंक

हम पहली बार ECMAScript 6/7 समर्थन पेश करने वाले हैं।

आप prerendering.com पर प्री-रेंडरिंग के बारे में अधिक जान सकते हैं

निगरानी

सेवा का दूसरा सबसे लोकप्रिय उत्पाद एसएनएमपी प्रोटोकॉल के माध्यम से वेब एप्लिकेशन, एपीआई और लिनक्स-सर्वर के लिए निगरानी है।
एक तृतीय-पक्ष निगरानी सेवा एक उत्कृष्ट समाधान है, क्योंकि आपको और आपकी टीम को विकास में स्थापित, अपडेट, रखरखाव, निवेश और समय की निगरानी की "स्थापना" करने की आवश्यकता नहीं है।

यह सुनिश्चित करने के लिए कि आपका वेब एप्लिकेशन काम कर रहा है और उपयोगकर्ताओं के लिए सुलभ है, हम प्रतिक्रिया कोड, हेडर, प्रतिक्रिया निकाय और कितनी जल्दी प्रतिक्रिया प्राप्त हुई, इसकी जांच करते हैं।

उपरोक्त गतिशील रूप से उत्पन्न डेटा के साथ एक समापन बिंदु की निगरानी करने का एक उदाहरण है, आपको बस XML, JSON या बस नंबर वापस करना है, और आप मानों को बहुत अधिक, कम या अपने मानदंडों को पूरा नहीं करने पर भी सूचनाएं कॉन्फ़िगर कर सकते हैं।

ऊपर SNMP प्रोटोकॉल के माध्यम से एक लिनक्स सर्वर की निगरानी का एक उदाहरण है। एसएनएमपी विभिन्न हार्डवेयर सेंसर और लिनक्स सर्वर सहित ऑपरेटिंग सिस्टम से डेटा पढ़ने के लिए एक उद्योग मानक है, जिसका उपयोग आधुनिक वेब अनुप्रयोगों की सेवा के लिए किया जाता है। अपने सर्वर तक अनधिकृत पहुंच को रोकने के लिए, सेवा आपको प्रत्येक नए स्थापित एसएसएच कनेक्शन से सूचित करेगी।

Snmp-monitoring.com पर निगरानी सेवा के बारे में अधिक जानें।

वेब विश्लेषिकी

तीसरा सबसे लोकप्रिय सेवा उत्पाद वेब विश्लेषिकी है । एक बार जब हमने बहुत सारे एनीमेशन के साथ एक एप्लिकेशन पर काम किया, तो हमारे डिजाइनरों ने एनीमेशन को सुचारू बनाने में बहुत समय लिया। सब कुछ ठीक था और हमने सभी लोकप्रिय उपकरणों और ब्राउज़रों पर स्वीकार्य एनीमेशन प्रदान करते हुए कार्य पूरा किया। बाद में, क्लाइंट ने एक छोटा सा कार्य निर्धारित किया - एनालिटिक्स कोड को जोड़ने के लिए। यह लोकप्रिय समाधानों में से एक था जिसने उपयोगकर्ता के बारे में बहुत सारे डेटा एकत्र किए, जिसमें पेज की हीट मैप को संकलित करने के लिए कर्सर और पेज स्क्रॉल की स्थिति भी शामिल थी। चूंकि जावास्क्रिप्ट में एक एकल-थ्रेडेड रनटाइम (वेब ​​वर्कर्स और सर्विस वर्कर्स गिनती नहीं है), और एनालिटिक्स ने सभी उपयोगकर्ता कार्यों को ट्रैक करने के लिए सीपीयू संसाधनों का एक महत्वपूर्ण हिस्सा लिया, इसने बजट और मोबाइल उपकरणों पर सुचारू एनीमेशन के उद्देश्य से हमारे सभी कार्यों को नष्ट कर दिया। इसलिए हम 100% खुले स्रोत और अंतिम उपयोगकर्ता के लिए एक सरल गैर-ट्रैकिंग प्रक्रिया के साथ एक आसान-समझने वाला, वास्तविक समय, गोपनीय और GDPR- अनुरूप वेब विश्लेषिकी के विचार और पहला कार्यान्वयन के साथ आए।

वेब एनालिटिक्स की मुख्य विशेषताओं में से एक वास्तविक समय में जावास्क्रिप्ट रनटाइम ( रनटाइम त्रुटियों और अपवादों ) की सभी त्रुटियों पर एक रिपोर्ट का स्वचालित संग्रह और संगठन है। यदि आप वेब विकास में लगे हुए हैं, तो आप जानते हैं कि विभिन्न संस्करणों में उपकरणों और ब्राउज़रों के विभिन्न संयोजनों का परीक्षण करना कितना महत्वपूर्ण है, लेकिन सभी 100% संयोजनों को कवर करना केवल शारीरिक रूप से असंभव है। इस क्षण में, आपके उपयोगकर्ता उन उपकरणों के स्वामी हैं जिन पर परीक्षण करना आवश्यक है। वेब विश्लेषिकी स्वचालित रूप से जावास्क्रिप्ट रनटाइम के सभी त्रुटियों और अपवादों ( त्रुटियों, क्रम अपवाद ) को एकत्र करती है। प्रत्येक त्रुटि रिपोर्ट एक विवरण, फ़ाइल, लाइन और प्रतीक के साथ फ़ाइल, स्टैक ट्रेस (यदि कोई हो), डिवाइस, ब्राउज़र, ओएस और उनके संस्करणों में होती है।

उपलब्ध उत्पादों की एक पूरी सूची और अधिक विस्तृत जानकारी ostr.io पर उपलब्ध है। सभी नए खातों को "ऋण" ( फ्री-टियर ) की एकमुश्त आपूर्ति प्राप्त होती है, इससे एकीकरण और परीक्षण सेवाओं को मुफ्त में लागू करना संभव हो जाता है।

आधारभूत संरचना

सबसे दिलचस्प हिस्सा सेवा का बुनियादी ढांचा है। वर्तमान में, सेवा की जरूरतों को पूरा करने के लिए सत्रह सर्वरों की आवश्यकता होती है। सभी उत्पादों और उनकी इकाइयों को माइक्रोसिस्टम के रूप में कार्यान्वित किया जाता है और प्रत्येक माइक्रो सर्विस को एक भौतिक सर्वर पर होस्ट किया जाता है। सभी सर्वर एक दूसरे की समान प्रतियाँ हैं। परीक्षण सर्वर पर प्रत्येक परिनियोजन और परिवर्तन से पहले, पूरी प्रक्रिया को चरणों में क्रमबद्ध किया जाता है और बैश स्क्रिप्ट में निष्पादित किया जाता है, फिर स्क्रिप्ट को GitHub पर भेजा जाता है, जहां से इसे प्राप्त किया जाएगा और अन्य सर्वरों द्वारा लॉन्च किया जाएगा। प्रत्येक सर्वर में एप्लिकेशन कोड, माइक्रोसर्विस, नग्नेक्स और मोंगोडीबी ( प्रतिकृतियों के लिए धन्यवाद ) की एक प्रति शामिल है, यह योजना हमें हमलों का सामना करने, असफल परीक्षणों से बचने और समस्या को हल करने के लिए समय देती है। यह सेवा उपयोगकर्ताओं को अवसंरचना के 93% तक की गिरावट की स्थिति में भी उपलब्ध होगी, यह, बेशक, प्रतिक्रिया की गति को प्रभावित कर सकती है, लेकिन यह SLA के ढांचे के भीतर होने की अनुमति देती है।

सभी सर्वरों के बीच लोड को समान रूप से वितरित करने के लिए, हम दो राउंड-रॉबिन DNS बैलेंसिंग स्तरों ( हमारे मामले में, CloudFlare ) और अपने स्वयं के सर्वर का उपयोग करते हैं, जिस पर HAProxy स्थापित है ।

JoSk

जैसा कि आप ऊपर दिए गए विवरण से देख सकते हैं, हमारे पास कई आवर्ती घटनाएं हैं, उदाहरण के लिए, सर्वर, एपीआई, व्हिस, डीएनएस और अन्य समापन बिंदुओं की निगरानी करने के लिए, हमें नियमित रूप से और बिना रुकावट के उन्हें एक अनुरोध भेजने की आवश्यकता है। आवधिक कार्यों की निरंतरता सुनिश्चित करने के लिए, हमने कई सर्वरों के अपने विकेंद्रीकृत नेटवर्क का निर्माण किया, इसलिए हम हमेशा जानते हैं कि कार्य करने के लिए एक निशुल्क सर्वर है। जैसे ही अनुरोध वर्तमान क्षमताओं से अधिक हो जाता है, हम क्षैतिज स्केलिंग की सादगी के लिए, ऊपर वर्णित योजना के लिए आसानी से नए सर्वरों की आवश्यक संख्या जोड़ सकते हैं।

प्रारंभिक चरणों में, हमारे सर्वर की क्षमता वर्तमान जरूरतों से काफी अधिक हो गई, परिणामस्वरूप, हमने खुद को ऐसी स्थिति में पाया जहां दो या दो से अधिक मुक्त सर्वर समानांतर में एक ही कार्य करते थे। इससे बहुत अधिक विकास को खतरा हुआ, क्योंकि यह सेवा एक ही उपयोगकर्ता को कई समान पत्र भेज सकती थी या हमारे आईपी पते से दर्जनों DNS प्रश्न भेज सकती थी, जिसमें प्रतिबंध की धमकी दी गई थी।

इस समस्या को जल्दी से हल करने के लिए, हम एक कार्य desynchronizer लेकर आए, जिसने 95% गारंटी दी कि कतार में कार्य को एक बार और एक इकाई में निष्पादित किया जाएगा। बाद में हमने एक एनपीएम पैकेज के रूप में josk कोड प्रकाशित किया और josk नाम josk । यदि आप हुड के नीचे देखने में रुचि रखते हैं, तो यहां GitHub का लिंक है ।

मेल-समय

इसी कारण से हमें mail-time बनाने में मदद मिली, जो आपको एक बहुस्तरीय बुनियादी ढांचे से पत्र भेजने की अनुमति देता है। पैकेज को josk के आधार पर लिखा गया है, एक कतार में अक्षरों को व्यवस्थित करता है और उन्हें एक बहुस्तरीय बुनियादी ढांचे से भेजता है। मेलिंग के अलावा, mail-time आपको माइक्रोसर्विसेज को विभाजित करने की अनुमति देता है:

1. "क्लाइंट" ( client ), जो केवल कतार में अक्षर जोड़ते हैं;
2. "सर्वर" ( server ), जो केवल दो कार्यों को करने के लिए एक स्वतंत्र माइक्रोसेवा बनाता है - पत्रों की कतार और उनके वितरण का प्रबंधन।

यह पुस्तकालय की एकमात्र अनूठी विशेषता नहीं है, विवरण के लिए और सभी विशेषताओं का अधिक विस्तृत विवरण, प्रलेखन पढ़ें ।

दुर्भाग्य से, इस समय, दोनों संकुल ( josk और mail-time ) को कतार और डी-सिंक्रनाइज़ेशन के लिए एक डेटाबेस (DB) के रूप में MongoDB की आवश्यकता होती है। हम दोनों पुस्तकालयों को विकसित करने के लिए तैयार हैं और अन्य डेटाबेस के लिए समर्थन जोड़ने के लिए खुशी से चर्चा करेंगे और पीआर को अपनाएंगे । हमारे हिस्से के लिए, रेडिस एकीकरण के लिए एक महान उम्मीदवार की तरह दिखता है।

अंत तक पढ़ने वाले सभी को बहुत-बहुत धन्यवाद। यदि आप रुचि रखते हैं, तो प्रश्न पूछें और लैन में लिखें और यदि पाठकों की रुचि है, तो मैं वेब डेवलपमेंट, नोड.जेएस और जावास्क्रिप्ट पर अन्य कार्यक्रमों में भाग लेने और बोलने के अनुभव के बारे में बात करने के लिए तैयार हूं।

हर कोई जो ostr.io के बारे में जानने के लिए इच्छुक है, सेवा का उपयोग करता है, एक प्रचारक कोड प्राप्त करता है, छूट या प्रश्नों के उत्तर - पीएम या सामाजिक नेटवर्क पर मुझे लिखें। समर्थन ostr.io केवल अंग्रेजी बोलता है, लेकिन बहुत तेज़ी से प्रतिक्रिया करता है, उदाहरण के लिए एफबी मैसेंजर के माध्यम से।