👨🏼‍🚒 🤷🏽 🦂 हमारे सॉफ्टवेयर उत्पादों की तकनीकी निगरानी के लिए एक अन्य उपकरण के रूप में ग्राफ्टाना 🧗🏽 🎩 🤹🏻

तर्कपूर्ण निगरानी उपकरण श्रृंखला में एक और लेख ग्राफ्टाना के बारे में बात करता है। हम आंतरिक और बाहरी दोनों परियोजनाओं के दृश्य और डेटा विश्लेषण के लिए इस सॉफ्टवेयर टूल का उपयोग करते हैं। यह लेख तकनीकी निदेशकों, डेवलपर्स, DevOps, सिस्टम प्रशासक, परियोजना प्रबंधकों, साथ ही सभी इच्छुक पार्टियों के लिए उपयोगी हो सकता है।

ग्राफाना क्या है?

ग्राफाना डेटा की कल्पना, निगरानी और विश्लेषण के लिए एक खुला स्रोत मंच है। उपयोगकर्ता के व्यवहार और सिस्टम के प्रदर्शन की निगरानी के लिए यह टूल, ग्रेगल के साथ संयुक्त, हमारे टू-वे सिस्टम का हिस्सा है। ग्राफाना उपयोगकर्ताओं को पैनलों के साथ डैशबोर्ड बनाने की अनुमति देता है, जिनमें से प्रत्येक समय की एक निश्चित अवधि के लिए कुछ संकेतक प्रदर्शित करता है। प्रत्येक डैशबोर्ड सार्वभौमिक है, इसलिए इसे एक विशिष्ट परियोजना के लिए अनुकूलित किया जा सकता है या किसी भी विकास और / या व्यावसायिक आवश्यकताओं को ध्यान में रखा जा सकता है।

हमारी तर्कपूर्ण टीम मुख्य रूप से एलफिनाटसर्च और इन्फ्लक्सबीडी के संयोजन में ग्राफाना का उपयोग करती है, लेकिन यह सॉफ्टवेयर टूल कई अन्य डेटा स्रोतों (प्रोमेथियस, मायक्यूसी, पोस्टग्रेज आदि) का समर्थन करता है। प्रत्येक डेटा स्रोत के लिए, ग्राफाना एक कस्टम क्वेरी संपादक और विशेष सिंटैक्स प्रदान करता है।

Grafana शर्तें

पैनल चयनित संकेतकों का मूल दृश्य तत्व है। ग्राफाना ग्राफ्स, सिंगल स्टेटस, टेबल्स, क्लिक हीटमैप और फ्री टेक्स्ट के साथ-साथ ऑफिशियल और कम्युनिटी क्रिएट किए गए प्लगइन्स (जैसे कि वर्ल्ड मैप या क्लॉक) के साथ इंटीग्रेशन को सपोर्ट करता है और ऐसे एप्लिकेशन भी देखे जा सकते हैं। आप प्रत्येक पैनल की शैली और प्रारूप को अनुकूलित कर सकते हैं; सभी पैनलों को एक नए स्थान पर खींचा जा सकता है, पुन: व्यवस्थित और आकार दिया जा सकता है।
डैशबोर्ड - चर के सेट के साथ ग्रिड में रखे गए अलग-अलग पैनलों का एक सेट (उदाहरण के लिए, सर्वर नाम, एप्लिकेशन और सेंसर)। चर को बदलकर, आप डैशबोर्ड पर प्रदर्शित डेटा (उदाहरण के लिए, दो अलग-अलग सर्वर से डेटा) को स्विच कर सकते हैं। सभी डैशबोर्ड को अनुकूलित किया जा सकता है, साथ ही अनुभाग और उनमें प्रस्तुत किए गए डेटा को उपयोगकर्ता की जरूरतों के अनुसार खंडित किया जा सकता है। ग्राफाना परियोजना में कोड डेवलपर्स और उपयोगकर्ताओं का एक बड़ा समुदाय शामिल है, इसलिए विभिन्न प्रकार के डेटा और स्रोतों के लिए तैयार डैशबोर्ड का एक बड़ा चयन है।
डैशबोर्ड में, आप विभिन्न पैनलों में विशिष्ट घटनाओं को प्रदर्शित करने के लिए एनोटेशन का उपयोग कर सकते हैं। एलिटिक्स खोज में कस्टम प्रश्नों द्वारा व्याख्याएँ जोड़ी जाती हैं; ग्राफ पर, एनोटेशन को ऊर्ध्वाधर लाल रेखा के साथ प्रदर्शित किया जाता है। जब आप एनोटेशन पर होवर करते हैं, तो आप ईवेंट और टैग का विवरण प्राप्त कर सकते हैं, उदाहरण के लिए, त्रुटि कोड 5xx के साथ सर्वर की प्रतिक्रिया को ट्रैक करने या सिस्टम को पुनरारंभ करने के लिए। इसके लिए धन्यवाद, आप आसानी से आवेदन में समय, एक विशिष्ट घटना और इसके परिणामों की तुलना कर सकते हैं, और सिस्टम के व्यवहार की जांच कर सकते हैं।

तर्कपूर्ण टीम के साथ ग्राफाना टूल का उपयोग करने के लिए सर्वोत्तम अभ्यास

आंतरिक परियोजनाओं में ग्राफाना का उपयोग करना

हमारी आंतरिक परियोजना "इंटरनेट ऑफ थिंग्स" (कार्यालय जलवायु निगरानी समाधान) के लिए, हमने कार्यालय जलवायु में परिवर्तन की कल्पना करने और तदनुसार प्रतिक्रिया करने के लिए, ग्रेफाना को एक बार श्रृंखला डेटाबेस, इन्फ्लक्सबीडी से जोड़ा। खेरसॉन में हमारे कार्यालय के प्रत्येक क्षेत्र में सेंसर का एक सेट तापमान, आर्द्रता, वायुमंडलीय दबाव और CO2 स्तर को मापता है; इन मापदंडों को एक बड़े रसोई मॉनिटर और ऑनलाइन पर ग्राफ ग्राफाना के रूप में एकत्र और कल्पना की जाती है।

दफ्तर के क्षेत्रों को एकजुट करने के साथ ग्राफाना डैशबोर्ड

इसलिए हम लगातार वायु गुणवत्ता मापदंडों की निगरानी करते हैं, और हमारे कार्यालय प्रबंधक परिवर्तनों पर प्रतिक्रिया करते हैं: खिड़कियां खोलता है, अगर सीओ 2 का स्तर बहुत अधिक है, तो एयर कंडीशनर और ह्यूमिडिफायर चालू और बंद हो जाते हैं।

कार्यालय जलवायु के साथ ग्राफाना डैशबोर्ड

ग्रेफाना में प्रदर्शित रेखांकन और समय श्रृंखला एनोटेशन के लिए धन्यवाद, हमने कई महीनों और मौसमों के लिए कार्यालयों में माइक्रॉक्लाइमेट रुझानों का विश्लेषण किया। हमने इस टूल का उपयोग एक बड़े रसोई मॉनिटर पर कुछ उपयोगी विगेट्स और जानकारी (मौसम पूर्वानुमान, मुद्रा विनिमय दर, आंतरिक कैलेंडर) की कल्पना करने के लिए भी किया था।

कस्टम वेब अनुप्रयोगों में ग्राफाना का उपयोग कैसे करें

ग्राफाना + ग्रेलाग

हम वेब एप्लिकेशन के लॉग को स्टोर करने के लिए, उन्हें प्रबंधित करने और उनके विकास के चरण और उनके ऑपरेशन के चरण में दोनों के प्रदर्शन की निगरानी करने के लिए ग्रेलाग टूल का उपयोग करते हैं । ग्रेफाना एक उपकरण है जो ग्रेग्लॉग में संग्रहीत पत्रिकाओं को विश्लेषणात्मक और सिस्टम मॉनिटरिंग के लिए दृश्य रूपों में परिवर्तित करता है। हमारी वर्तमान परियोजनाओं में से एक के लिए, ग्राफाना टूल को वेब अनुप्रयोगों और क्लाइंट प्रवाह के प्रदर्शन को लोड करने और निगरानी के लिए उपयोगकर्ता इंटरफ़ेस कहा जा सकता है। ग्रेलाग और ग्राफाना उपकरण एक दूसरे से स्वतंत्र रूप से मौजूद हैं, हमने उन्हें एक दूसरे से जोड़ने के लिए कोई विशेष जटिल एकीकरण उपकरण नहीं बनाया। चूँकि ग्रेफ्लॉग, एलफैटेखर्च के सभी लॉग डेटा को संग्रहीत करता है, जो ग्रैफाना के डेटा स्रोतों में से एक है, हम केवल विशिष्ट एलियस्टिक्स खोज इंडेक्स का उपयोग करते हैं, जहाँ ग्रेफाना को ग्रेलॉग से जोड़ने के लिए लॉग को संग्रहीत किया जाता है।

वेब एप्लिकेशन के लिए ग्राफ्टाना में क्या मीट्रिक देखे जा सकते हैं?

सरल-पाठ लॉग या त्रुटि सूचनाएं ग्राफाना के लिए "दिलचस्प" नहीं हैं क्योंकि इसका मुख्य उद्देश्य ग्राफ़, चार्ट और टेबल के रूप में डेटा की कल्पना करना है। हमने Django के लिए डेटा एकत्र करने के लिए एक कस्टम मॉड्यूल लिखा है जिसे हम प्रत्येक संसाधित अनुरोध और नेटवर्क / कर्मचारी प्रतिक्रिया के लिए ट्रैक करना चाहते हैं। डेटा में न केवल सफलता / विफलता की स्थिति शामिल है, बल्कि संरचित फ़ील्ड (सामान्य और परियोजना से संबंधित दोनों) का एक सेट भी शामिल है, जैसे:

अनुप्रयोग संस्करण
प्रत्येक अनुरोध के अद्वितीय पहचानकर्ता
प्रतिक्रिया समय और स्थिति
त्रुटि कोड (यदि कोई हो)
आईपी पता जिसमें से अनुरोध भेजा गया था
उपयोगकर्ता जानकारी (ई-मेल, पंजीकृत उपयोगकर्ताओं के लिए उपयोगकर्ता नाम, भूमिका, अनुमति)
उपकरण, आदि

Django ने उपयोगकर्ता के संरचित विश्लेषणात्मक रिकॉर्ड्स को ग्रेलाग में रखा है, जो उन्हें एक अलग स्ट्रीम में बचाता है। हालांकि इस डेटा को ग्रे-निर्मित डैशबोर्ड्स का उपयोग करके देखा जा सकता है, लेकिन वे ग्राफ्टाना डैशबोर्डों की तरह अच्छे नहीं लगते हैं। इसलिए, हम ग्राफाना को इस विश्लेषणात्मक डेटा को पढ़ने और इसे देखने के लिए मजबूर करते हैं। इस प्रकार, हम आवेदन के प्रदर्शन की निगरानी करते हैं और वास्तविक समय और पूर्वव्यापी दोनों में डेटा डाउनलोड करते हैं।

Grafana एक डिबगिंग टूल के रूप में

Grafana डैशबोर्ड मुख्य रूप से एप्लिकेशन डीबग करने में हमारी मदद करता है। यदि अंतिम क्लाइंट किसी समस्या की रिपोर्ट करता है, तो ग्राफाना हमें क्लाइंट / सर्वर की ओर की त्रुटियों को वास्तविक त्रुटियों या एप्लिकेशन लॉजिक में अंतराल से अलग करने का अवसर देता है। हम क्लाइंट द्वारा शुरू किए गए सभी वेब अनुरोधों को ट्रैक करते हैं (ईमेल पते का उपयोग करके), एप्लिकेशन प्रशासक और स्वयं निर्दिष्ट समय के लिए आवेदन करते हैं और अपवर्जन की विधि द्वारा हम इसका कारण ढूंढते हैं।

यदि हम लोडिंग और एप्लिकेशन प्रदर्शन के ग्राफ़ में डैशबोर्ड पर एक विसंगति को देखते हैं, तो हम डिबग और फिक्स भी करते हैं। निम्नलिखित ग्राफन ग्राफ उदाहरण समय की अवधि में वेब अनुरोधों के लिए प्रतिक्रिया समय दिखाता है। प्रत्येक वेब अनुरोध के लिए, हम अधिकतम, न्यूनतम और औसत प्रतिक्रिया समय ट्रैक करते हैं। यदि हम एक अनुरोध देखते हैं जो हमें संसाधित करने में बहुत अधिक समय लगाता है, तो हम ग्राफ़ के एक निश्चित भाग को मापते हैं और समस्या की जांच करते हैं।

उदाहरण ग्राफ ग्राफ ग्राफ वेब रिस्पांस टाइम दिखा रहा है

एक अन्य ग्राफ सिस्टम लोड को निर्धारित समयावधि के लिए दिखाता है और ट्रैफ़िक को ट्रैक करने के लिए उपयोगी है। यदि हमें गतिविधि का असामान्य प्रकोप दिखाई देता है, उदाहरण के लिए, घंटों या सप्ताहांत के बाद, हम इसकी जांच करेंगे। उदाहरण के लिए, Google क्रॉलर द्वारा वेबसाइट की सामग्री को अनुक्रमित करने या दुर्भावनापूर्ण बॉट द्वारा कमजोरियों के लिए हमारे सिस्टम को स्कैन करने के कारण इस तरह की स्पाइक हो सकती है। फिर से, प्रत्येक मामले की जांच की जाती है और तदनुसार विचार किया जाता है।

उदाहरण Grafana ग्राफ आवेदन डाउनलोड दिखा रहा है

ग्राफाना में एक अंतर्निहित सूचना तंत्र है (उदाहरण के लिए, ईमेल के माध्यम से या स्लैक के माध्यम से सूचनाओं के माध्यम से) कुछ नियमों के अनुसार। हम ग्रेफाना टूल की इस सुविधा का उपयोग नहीं करते हैं, क्योंकि हमारे पास ग्रेगल में सभी सूचनाएँ कॉन्फ़िगर हैं । हालांकि, सिस्टम प्रदर्शन के साथ कुछ समस्याएं केवल प्रोग्राम चलाने के बाद देखी जा सकती हैं, उदाहरण के लिए, वेब अनुरोध के लिए असामान्य रूप से लंबी प्रतिक्रिया समय। हमें इसका ग्रेग्लॉग नोटिफिकेशन प्राप्त नहीं होगा, लेकिन ग्रेफाना चार्ट पर विसंगति स्पष्ट रूप से दिखाई देगी। इसलिए, दोनों उपकरण एक-दूसरे के पूरक हैं जब हमें कुछ समस्या के बारे में पता चलता है: एक उच्च स्तर पर हम यह समझने के लिए ग्रेफाना की जांच करते हैं कि क्या हुआ और क्यों हुआ, और फिर एक विशिष्ट अनुरोध पहचानकर्ता का उपयोग करके ग्रेगल के साथ गहरी खुदाई करें।

ग्रेलॉग के विपरीत, जिसका उपयोग विकसित और प्रयुक्त दोनों अनुप्रयोगों के लिए किया जाता है, ग्राफाना का उपयोग केवल उपयोग किए गए अनुप्रयोगों के लिए किया जाता है। केवल एक अपवाद है जब एक आवेदन के लिए ग्राफाना का उपयोग करना जो अभी भी विकास के चरण में है, प्रदर्शन परीक्षण है। हम JMeter का उपयोग करके सिस्टम बूट का अनुकरण करते हैं, फिर ग्राफाना डैशबोर्ड की जांच करते हैं कि यह कैसे प्रतिक्रिया करता है।

ग्रेफाना एक बिजनेस इंटेलिजेंस टूल के रूप में

प्रदर्शन ट्रैकिंग और डीबगिंग लक्ष्यों के अलावा, ग्रेफाना डैशबोर्ड, सूचित व्यावसायिक निर्णय लेने के लिए एक शक्तिशाली उपकरण है। जब ठीक से कॉन्फ़िगर किया गया (अधिमानतः Google विश्लेषिकी सेवा के साथ मिलकर), ग्राफाना सिस्टम में पाई चार्ट, टाइम हिस्टोग्राम और अन्य ग्राफिक तत्वों के रूप में उपयोगकर्ता के व्यवहार के कस्टम एनालिटिक्स की कल्पना कर सकता है। उनके आधार पर, उत्पाद में रुचि रखने वाले पक्ष आवेदन को आगे बढ़ाने, कुछ कार्यों को जोड़ने या हटाने और ग्राहकों के साथ बातचीत के चक्र में सुधार के बारे में निर्णय ले सकते हैं।

ई-कॉमर्स एप्लिकेशन में उपयोगकर्ता के व्यवहार को प्रदर्शित करने वाले ग्राफाना डैशबोर्ड का एक उदाहरण

चूंकि उपरोक्त डैशबोर्ड व्यवसाय पर अधिक केंद्रित है, इसलिए डेवलपर्स इसका उपयोग आंतरिक उद्देश्यों के लिए करते हैं, बल्कि, ई-कॉमर्स एप्लिकेशन में ग्राहकों के प्रवाह को ट्रैक करने के लिए सुरक्षा उपकरण के रूप में: पंजीकरण, प्राधिकरण, दिए गए समय पर दिए गए आदेश।

यहां 2 वास्तविक दुनिया की परियोजनाएं हैं जहां ग्राफाना एक वेब एप्लिकेशन की उपयोगिता को बढ़ाने में सक्षम है।

ग्राफाना की मदद से, हम नियमित रूप से सिस्टम में आवधिक आदेशों की स्थिति की निगरानी करते हैं और विफल आदेशों को फ़िल्टर करते हैं। ये आदेश एक सदस्यता पर आधारित होते हैं, अर्थात, हर महीने सिस्टम में उत्पन्न होते हैं, और ग्राहकों के बैंक खातों से पैसा अपने आप डेबिट हो जाता है। कभी-कभी भुगतान विफल हो जाते हैं (किसी वित्तीय संस्थान का अपर्याप्त धन / इनकार), और फिर सिस्टम प्रशासक स्थिति की जांच करते हैं और मैन्युअल रूप से ऑर्डर को फिर से जेनरेट करने के लिए ग्राहकों से संपर्क करते हैं। इस प्रकार, एक भी आदेश दृष्टि से बाहर नहीं गिरता है; दोनों ग्राहक और आपूर्तिकर्ता संतुष्ट हैं।
ई-कॉमर्स एप्लिकेशन के लिए ग्राफाना का उपयोग करके बनाई गई रिपोर्टों का उपयोग करते हुए, हमने पाया कि नए ग्राहकों का एक बड़ा प्रतिशत चेकआउट पृष्ठ छोड़ देता है, हालांकि उनके पास पहले से ही उनके बास्केट में आइटम हैं। यह निष्कर्ष Google Analytics सेवा की रिपोर्टों द्वारा समर्थित था, इसलिए चेकआउट प्रक्रिया का चरण दर चरण विश्लेषण किया गया और इसमें सुधार हुआ: अब उपयोगकर्ता 2 क्लिक में एक आदेश दे सकते हैं। परिणामस्वरूप, ग्राहकों के लिए आगंतुक रूपांतरण दर बढ़ी है - आपूर्तिकर्ता का लाभ भी बढ़ा है।

Grafana दोनों आंतरिक और बाहरी परियोजनाओं के लिए टीम की निगरानी प्रणाली को सक्रिय करने का एक महत्वपूर्ण घटक है। यह सॉफ्टवेयर टूल ओपन सोर्स है, साथ ही डेवलपर्स का एक बड़ा और सक्रिय समुदाय है। लेकिन हममें से अधिकांश को लचीलापन पसंद है - यह कई डेटा स्रोतों का समर्थन करता है और डैशबोर्ड और पैनल को अनुकूलित करना आसान बनाता है।

हमारे सॉफ्टवेयर उत्पादों की तकनीकी निगरानी के लिए एक अन्य उपकरण के रूप में ग्राफ्टाना