मैंने QoE (अनुभव की गुणवत्ता) का परीक्षण कैसे किया

पिछले छह महीनों में, मैंने अक्सर "अनुभव की गुणवत्ता" (क्यूओई) की अवधारणा पर आधारित विभिन्न उत्पादों के बारे में सम्मेलनों और परिचितों से सुनना शुरू किया। यह शब्द तेजी से लोकप्रिय हो रहा है। किसी विशेष सेवा या सेवा के उपयोगकर्ताओं की धारणा की गुणवत्ता का निर्धारण करने के लिए नए तरीकों को बनाने के लिए बहुत सारे शोध चल रहे हैं, लेकिन अब मैं इस सिद्धांत में तल्लीन नहीं करना चाहता कि कौन स्वयं को Google में सक्षम होने में रुचि रखता है।

विज्ञापन संदेश कहते हैं कि यह चमत्कार उत्पाद कर सकता है:

• सीपीई के लिए संचार की गुणवत्ता के साथ समस्याओं की पहचान करने के लिए, सब्सक्राइबर उपकरण सहित,
• LTV (LifeTimeValue) बढ़ाएँ,
• क्लिकस्ट्रीम एनालिटिक्स, यानी प्रतियोगी साइटों सहित विज़िट की गई साइटों को ट्रैक करने की क्षमता,
• पता करें कि असली आईपी पते के पीछे कितने आभासी आईपी पते हैं,
• निर्धारित करें कि कौन सी सेवाएं / उपकरण ग्राहक उपयोग करते हैं (SIP, OTT, स्मार्ट हाउस, स्मार्ट टीवी, नेटवर्क उपकरण)
• प्रत्येक उपयोगकर्ता के लिए, ट्रैफ़िक को प्राथमिकता दें और कुछ L7- आधारित प्रोटोकॉल को सीमित करें,
• OSS / BSS के साथ आसान एकीकरण।

चूंकि मेरा मुख्य कार्य इंटरनेट की गुणवत्ता से असंतुष्ट ग्राहकों को खोजना है और आम तौर पर हर तरह से ग्राहक मंथन की समस्याओं को हल करना है (मैं एक में काम करता हूं, सेवा की गुणवत्ता विभाग में सबसे छोटे दूरसंचार ऑपरेटर नहीं), इस उत्पाद (हम इसे सुविधा के लिए "क्यूओई" कहेंगे) ), विक्रेताओं और विपणक के मीठे शब्दों के साथ, इस समस्या को हल करता है। लेकिन यह सब सिद्धांत में है, और जब तक आप अभ्यास में खुद को नहीं देखते, तब तक आप समझ नहीं पाएंगे। यही कारण है कि मैं इस समाधान के व्यावहारिक पक्ष के सहयोगियों के साथ साझा करना चाहता था, सुंदर विपणन पैकेजिंग से रहित।

मैं तुरंत एक आरक्षण करूँगा जो मैंने एक विक्रेता को नहीं बुलाया, अन्यथा वे इसे विज्ञापन के लिए मानेंगे, और कोई भी मुझे इसके लिए भुगतान नहीं करेगा। मैं केवल यह कह सकता हूं कि यह एक रूसी निर्माता है, जिसकी पंक्ति में URL, DPI और इस DPI पर आधारित QoE के सिद्धांतों पर आधारित उत्पाद को फ़िल्टर करने के लिए समाधान (हार्डवेयर और सॉफ़्टवेयर) हैं।

इसलिए, मैं बताऊंगा और दिखाऊंगा कि मैं किस कार्यक्षमता का परीक्षण करने में कामयाब रहा, परीक्षण के दौरान क्या समस्याएं आईं और मैं अपने व्यक्तिपरक परिणाम को संक्षेप में बताऊंगा।

परीक्षण शुरू करें

मैं विशेष रूप से वर्णन नहीं करूंगा कि मुझे परीक्षण के लिए उपकरण कैसे प्राप्त हुए, क्योंकि इस स्तर पर कुछ खास नहीं हुआ। संक्षेप में, एनएजी कंपनी के विक्रेता के भागीदारों ने जल्दी से मुझसे संपर्क किया।

हमने अपनी कंपनी से QoE, नेटवर्क टोपोलॉजी, ट्रैफिक वॉल्यूम और कॉन्टैक्ट पर्सन डेटा का उपयोग करके उन कार्यों के बारे में जानकारी स्पष्ट करने के लिए कहा जो हम चाहते हैं। उसके बाद, उन्होंने आपके व्यक्तिगत खाते के लिए एक लिंक भेजा, जहां आप उत्पाद के लाइव से परिचित हो सकते हैं।

व्यक्तिगत खाता

प्राधिकरण पर, एक डैशबोर्ड दिखाई देता है, दिखा रहा है:

• सक्रिय ग्राहक
• गरीब आरटीटी / भयानक आरटीटी (राउंड ट्रिप टाइम) ग्राहक
• / से ग्राहकों के लिए पैकेज,
• आरटीटी का औसत मूल्य।

ईमानदारी से, "भयानक आरटीटी" की अवधारणा किसी भी तरह से धीमी है। कुछ के लिए, 10 एमएस को भयानक माना जाता है, दूसरों के लिए - 100 एमएस। लेकिन, विक्रेता के तकनीकी समर्थन की ओर मुड़ते हुए, मुझे पता चला कि प्रदाता "हॉरर" के संकेतक को निर्धारित करता है और इसे क्यूओई कॉन्फ़िगरेशन में लिखता है।

विशिष्ट ग्राहकों के लिए समस्याएं

मैंने तुरंत उन समस्या वाले ग्राहकों को पाया जिनके पास गंभीर देरी थी। उदाहरण के लिए, 4.5 से अधिक एमएस





यहां आप क्लाइंट उपकरण का डेटा देख सकते हैं, इस स्थिति में इसमें टीपी-लिंक है। साथ ही, सब्सक्राइबर केबल की लंबाई और CRC त्रुटियाँ दिखाई देती हैं।

बस एक त्वरित संदर्भ: सर्कुलर रिडंडेंसी चेक (सीआरसी) डेटा ब्लॉक में छोटे बदलावों का पता लगाने का एक तरीका है। इस प्रकार की त्रुटि का पता लगाना विशेष रूप से उपयोगी है जब एक नेटवर्क पर पैकेट डेटा भेजते हैं जैसे कि SynqNet। जबकि पैकेट त्रुटि काउंटर गुम या अमान्य पैकेट की जाँच करता है, CRC त्रुटि काउंटर पैकेट में डेटा की वैधता की जाँच करता है।

हम यह निष्कर्ष निकाल सकते हैं कि या तो केबल टूट गई है या अपार्टमेंट के अंदर समस्याएं हैं।



आप मुख्य समस्याओं को प्रदर्शित कर सकते हैं: उदाहरण के लिए, दिन के समय और आरटीटी के आधार पर जिलों के समूहों द्वारा खंड के ग्राहकों को आप विभिन्न मानदंडों के अनुसार फ़िल्टर और समूह कर सकते हैं:

• प्रति सप्ताह सीआरसी की संख्या,
• एक्सेस स्विच
• सेवा,
• बैकबोन स्विच,
• समझौता
• राज्य,
• सब्सक्राइबर डिवाइस विक्रेता
• केबल की लंबाई।

हम क्षेत्र द्वारा फ़िल्टर करके बैकबोन स्विच को सूचीबद्ध करते हैं। नतीजतन, हम मुख्य स्विच पर ग्राहकों की संख्या देखेंगे। एक पर 99 ग्राहक हैं, दूसरे पर 64 आदि। इसके अलावा, आप बैकबोन स्विच पर औसत देरी देख सकते हैं।



सबसे अधिक मुझे ब्रेकिंग स्विच खोजने में दिलचस्पी थी। जैसा कि आप ऊपर दिए गए स्क्रीनशॉट से देख सकते हैं, यह स्विच 99 ग्राहकों के साथ सूची में पहले स्थान पर है। हम उसके डेटा में जा सकते हैं और देख सकते हैं कि उसके साथ क्या गलत है।

हम "मेन स्विच" की कसौटी पर, "एक्सेस स्विच" की कसौटी पर समूहीकृत होकर स्विच पर क्लिक करते हैं। तो यह स्पष्ट हो जाएगा कि कौन सा एक्सेस स्विच इस ट्रंक स्विच पर "सबसे खराब" है:



नतीजतन, सबसे खराब एक्सेस स्विच (लाल रंग में हाइलाइट किया गया) प्रदर्शित किया जाएगा - इसमें सबसे बड़ा आरटीटी है।



अब हम इस सबसे खराब एक्सेस स्विच पर जाते हैं और निम्नलिखित चित्र देखते हैं:



हम लंबे विलंब के साथ कई सत्र देखते हैं। यदि आप इस एक्सेस स्विच पर सब्सक्राइबर्स को देखते हैं, तो आप देख सकते हैं कि जिनके पोर्ट में त्रुटियां हैं - ये केबल के साथ समस्याएं हैं। नीचे स्क्रीनशॉट में, ग्राहक संख्या 12 दिखाई दे रही है, जिसमें 898 त्रुटियां हैं।



आप तुरंत बड़े RTT वाले ग्राहकों को देख सकते हैं, उदाहरण के लिए, 10.5



हम ग्राहक के पास जाते हैं और निम्न चित्र देखते हैं:



प्रत्येक पांच मिनट के रिट्रांसमिशन के लिए, सब्सक्राइबर को लगभग 2% नुकसान होता है। सबसे अधिक संभावना है, उसे वाई-फाई राउटर को बदलने की आवश्यकता है। इस ग्राहक को निश्चित रूप से संबोधित करने की आवश्यकता है।

लगातार खराब इंटरनेट वाले सदस्य

यह एक मुख्य कारण है जिसने मुझे क्यूओई की कोशिश करने के लिए प्रेरित किया। आप सभी ग्राहकों को कठोर आरटीटी के साथ वापस ले सकते हैं और प्रत्येक के साथ व्यक्तिगत रूप से काम कर सकते हैं। उदाहरण के लिए, ग्राहक संख्या 3 के लिए सूची में आंकड़े खोलें।



इस ग्राहक के पास पोर्ट पर कोई त्रुटि नहीं है, केबल 37 मीटर है। सबसे अधिक संभावना है, परेशानी ग्राहक के अपार्टमेंट में है।

समस्या वाई-फाई विक्रेताओं

जैसा कि मैं इसे समझता हूं, यह इस तरह काम करता है: सब्सक्राइबर उपकरणों के एमएसीएस पर डीएचसीपी सर्वर से जानकारी हटा दी जाती है। इस प्रकार, सभी वाई-फाई विक्रेताओं को बाहर निकाला जाता है:



सबसे लोकप्रिय और सामान्य RTT के साथ Zyxel निकला, इसके 9307 ग्राहक हैं।



15.2 और उससे नीचे के आरटीटी के साथ शीर्ष शीर्ष नीचे।

पुनर्विक्रय इंटरनेट

मुझे एक फ़ंक्शन भी मिला जो ग्राहकों को सत्रों की संख्या के साथ दिखाता है।



आप तुरंत ग्राहकों को सत्रों के एक समूह के साथ देख सकते हैं। नंबर 1 पर सब्सक्राइबर पर जाएं।



क्लिकस्ट्रीम लॉग्स सेक्शन में, आप देख सकते हैं कि उपभोक्ता के पास वर्तमान में कितने डिवाइस हैं:



जैसा कि हम देखते हैं, सब्सक्राइबर के पास 100 डिवाइस हैं। ऐसा सब्सक्राइबर निश्चित रूप से इंटरनेट को फिर से बनाता है इससे क्या लेना-देना? उदाहरण के लिए, हम एक कानूनी इकाई के रूप में सेवा के लिए ऐसे ग्राहकों को स्थानांतरित करने की योजना बनाते हैं।

क्लिकस्टैट एनालिटिक्स

ऐसा लगता है कि यहां सब कुछ सरल है: क्लिकस्ट्रीम शो से पता चलता है कि उपभोक्ता किस उपकरण का उपयोग करते हैं, वे किन साइटों पर जाते हैं, कौन से ब्राउज़र का उपयोग करते हैं। यह जानकारी मेरे लिए इतनी दिलचस्प नहीं है, लेकिन यह हमारे विपणक के लिए आवश्यक है। उदाहरण के लिए, वे निम्नलिखित परिदृश्यों में रुचि रखते हैं:

1) उन ग्राहकों को हमारी टीवी सेवा की बिक्री, जिनके पास स्मार्ट टीवी है। ऐसा करने के लिए, आप उपयोगकर्ता-एजेंट: स्मार्टटीवी द्वारा फ़िल्टर कर सकते हैं और स्मार्ट टीवी के मालिकों को प्रदर्शित कर सकते हैं। फिर प्रौद्योगिकी का मामला: ग्राहकों को कॉल करना या टीवी के साथ टैरिफ को जोड़ने के लिए एक पत्र भेंट करना।





2) संभावित असंतुष्ट ग्राहकों के लिए खोजें जो प्रतियोगियों की साइटों में रुचि रखते हैं। उसी अनुभाग में, "क्लिकस्ट्रीम लॉग्स" हम "डोमेन" लाइन के लिए रुचि के प्रतियोगी का URL चलाते हैं, और, परिणामस्वरूप, हमें निम्न सूची मिलती है:





इसके अतिरिक्त, आप मेरे परीक्षण की शुरुआत में लौट सकते हैं और आरटीटी गुणवत्ता के लिए जांच कर सकते हैं (शायद ग्राहक को अपने वाई-फाई राउटर के साथ कोई समस्या है)।

इसके अलावा इस जानकारी को विपणन, कॉल सेंटर में स्थानांतरित किया जा सकता है, उन्हें पता है कि क्या करना है। कम से कम, वे ग्राहकों के साथ हमारी सेवाओं की गुणवत्ता के साथ उनकी संतुष्टि के बारे में संवाद करेंगे।

कनेक्शन लॉग

एक कनेक्शन लॉग फ़ंक्शन है जिसके साथ आप यह निर्धारित कर सकते हैं कि एक वास्तविक एक के पीछे कितने आभासी पते हैं।



वास्तव में, यह ग्राफ NAT प्रदाता के घनत्व को दर्शाता है। यह ग्राफ दर्शाता है कि NAT को अभी भी कंपैक्ट किया जा सकता है।

डीपीआई लॉग

यहां आप TOP ऑटोनॉमी, एप्लिकेशन देख सकते हैं।





आप संचार गुणवत्ता के संदर्भ में एक विशिष्ट एप्लिकेशन देख सकते हैं, और जिसमें से स्वायत्तता डालते हैं, उदाहरण के लिए, टैंकों की दुनिया:





कुछ भी असामान्य नहीं है: यह GCORE के साथ आता है, वास्तव में कोई ब्रेक नहीं हैं।

आप GCORE स्टैंडअलोन में जा सकते हैं और देख सकते हैं कि उस पर हमसे और क्या-क्या मिलाया जा रहा है:



आप एक दिलचस्प फ़िल्टर भी बना सकते हैं। उदाहरण के लिए, 16 से अधिक एमएस की देरी के साथ रूसी एएस दिखाओ।

दूसरे शब्दों में, आप समझ सकते हैं कि पियरिंग पश्चिम से होकर कहाँ जाती है



नतीजतन, हमें सूची मिलती है:



परिणाम:

मेरे कार्यों के लिए, सामान्य तौर पर, उत्पाद उपयुक्त है, क्योंकि बिना किसी कठिनाई के मैं 4-5 c से अधिक RTT के साथ सभी समस्याग्रस्त ग्राहकों को ढूंढ सकता हूं, कारण (टूटी हुई केबल, वायरस, आदि) और "समस्या" क्षेत्रों का संकेत - सड़क और आईपी ग्राहकों का संकेत। । मैं एक उपयोगी विशेषता भी नोट करना चाहता हूं - उन ग्राहकों की खोज जो पहले से ही प्रतियोगियों से अपने भागने पर विचार कर रहे हैं।

मैं उत्पाद के भविष्य के संस्करणों में जो देखना चाहता हूं वह स्वचालन है। यही है, यहां सिस्टम सब्सक्राइबर्स को पाता है, जिन्होंने प्रतियोगियों की वेबसाइटों पर जाना शुरू कर दिया है, मेरे लिए ऐसी घटनाओं के बारे में मेल द्वारा सूचनाएं प्राप्त करना अधिक सुविधाजनक होगा।

स्वचालन के संदर्भ में, यह सुविधाजनक होगा यदि हम अपने वीओआईपी के साथ एकीकृत कर सकें, ताकि सब्सक्राइबर पर "भयानक" RTT के मामले में, हमारा कॉल सेंटर स्वचालित रूप से एक पूर्व निर्धारित परिदृश्य के अनुसार ऐसे ग्राहकों को कॉल करे।

लेकिन अभी के लिए, हम, एक प्रदाता के रूप में, मैनुअल या अर्ध-मैनुअल मोड में समर्थन सेवा और कॉल सेंटर के साथ मिलकर ग्राहकों के बहिर्वाह की समस्या को हल करना होगा। निकट भविष्य में हम परीक्षण से कार्यान्वयन तक बढ़ना चाहते हैं।

पुनश्च: यदि यह दिलचस्प है, तो मैं इस बारे में बात कर सकता हूं कि हमने उन ग्राहकों के साथ कैसे काम किया जो प्रतियोगियों से बचना चाहते थे। और यह भी कि हम इस उत्पाद को अपने नेटवर्क में कैसे एकीकृत करेंगे।

सामान्य तौर पर, टिप्पणियों में लिखें कि आप इनमें से किस विषय को अगले लेख के रूप में देखना चाहते हैं, और मैं साइट के संपादकों को सामग्री भेजूंगा - शायद वे मेरी रचनाओं को प्रकाशित करने के लिए सहमत होंगे।