व्यवहार रेंगना रामबाण नहीं है?

पिछले लेख में, हमने उस डैशबोर्ड पर विज़ुअलाइज़ेशन के लिए कम्प्यूटेशनल (एकत्रीकरण) डेटा प्रोसेसिंग के मुद्दे पर लागू होने वाले दृष्टिकोण की जांच की। यह आलेख विश्लेषणात्मक मामलों के संदर्भ में प्राथमिक स्रोतों से उपयोगकर्ताओं को सूचना के वितरण के चरण पर छुआ है, जो सूचना घन को घुमाने के लिए संभव बनाता है। मक्खी पर प्रस्तुत डेटा रूपांतरण मॉडल एक अमूर्त बनाता है, सभी जुड़े प्रकारों के डेटाबेस, तालिकाओं, सेवाओं और फ़ाइलों की गणना, एकत्रीकरण और एकीकरण का वर्णन करने के लिए एक एकल क्वेरी प्रारूप और निर्माता प्रदान करता है।

सूचीबद्ध स्रोत अधिक संरचित होने की संभावना रखते हैं, डेटा प्रारूप की भविष्यवाणी और उनके प्रसंस्करण और दृश्य के लिए प्रक्रियाओं की विशिष्टता को प्रभावित करते हैं। लेकिन विश्लेषक के लिए, असंरचित डेटा कम दिलचस्प नहीं है, जो कि जब पहले परिणाम दिखाई देते हैं, तो कभी-कभी ऐसी प्रणालियों की अपेक्षाओं को कम कर देता है। भूख खाने के साथ आती है, और सावधानी के नुकसान कहानी दोहरा सकते हैं ...

- अधिक! अधिक सोना!
लेकिन उनकी घरघराहट बमुश्किल श्रव्य थी और उनकी आँखों में डरावनी आवाज़ दिखाई देती थी

(परी कथा "गोल्डन एंटेलोप")

कट के तहत, लेख आभासी उपयोगकर्ताओं द्वारा एक बहु-भूमिका समूह और व्यवहार क्रॉलर की प्रमुख विशेषताओं और डिजाइन की रूपरेखा तैयार करता है जो जटिल इंटरनेट संसाधनों से जानकारी एकत्र करने की दिनचर्या को स्वचालित करते हैं। और केवल इस तरह की प्रणालियों की सीमा का सवाल उठाया जाता है।

रेंगने के तरीकों पर विचार करते समय, किसी भी काल्पनिक इंटरनेट संसाधन जिसमें से हमें जानकारी निकालने की आवश्यकता होती है, को दो चरम सीमाओं पर रखा जा सकता है - साधारण स्थैतिक संसाधनों और एपीआई से गतिशील इंटरैक्टिव साइटों के लिए जिन्हें उच्च उपयोगकर्ता भागीदारी की आवश्यकता होती है। पूर्व में खोज रोबोट की पुरानी पीढ़ी ( आधुनिक वाले, कम से कम, जावास्क्रिप्ट को संसाधित करना सीख चुके हैं ) शामिल हैं, बाद वाले में ब्राउज़र फ़ार्म और एल्गोरिदम के साथ सिस्टम शामिल हैं जो उपयोगकर्ता के काम का अनुकरण करते हैं या जानकारी एकत्र करते समय उसे आकर्षित करते हैं।

दूसरे शब्दों में, क्रॉलिंग तकनीकों को एक जटिलता पैमाने पर रखा जा सकता है:

एक तरफ, स्रोत की जटिलता को प्राथमिक जानकारी प्राप्त करने के लिए आवश्यक क्रियाओं की एक श्रृंखला के रूप में समझा जा सकता है, और दूसरी तरफ, प्रौद्योगिकियों को विश्लेषण के लिए उपयुक्त मशीन-पठनीय डेटा प्राप्त करने के लिए लागू किया जाना चाहिए।

यहां तक ​​कि स्थैतिक पृष्ठों से ग्रंथों का प्रतीत होता है सरल निष्कर्षण हमेशा व्यवहार में नहीं होता है - आपको या तो सभी प्रकार के पृष्ठों के लिए HTML योजना नियमों को विकसित करने और बनाए रखने की आवश्यकता होती है, या हेराटिक्स और जटिल समाधानों को स्वचालित और आविष्कार करना है। कुछ हद तक, माइक्रो-मार्कअप ( विशेष रूप से, Schema.org , RDFa , लिंक्ड डेटा ) के विकास से संरचना को सरल बनाया गया है, लेकिन केवल कंपनी कार्ड, उत्पाद, व्यवसाय कार्ड और अन्य खोज इंजन अनुकूलन उत्पादों और खुले डेटा को डाउनलोड करने के लिए संकीर्ण विशेष मामलों में।

नीचे हम जानबूझकर गुंजाइश को कम करेंगे और जटिल सोशल नेटवर्क में, विशेष रूप से सोशल नेटवर्क में - जानकारी को डाउनलोड करने के लिए डिज़ाइन किए गए ब्राउज़र क्रॉलर्स के सबसेट के तकनीकी घटक पर ध्यान केंद्रित करेंगे - यह वास्तव में ऐसा है जब अन्य सरल क्रॉलिंग विधियां काम नहीं करती हैं।

सूचना टेप

एक दृष्टिकोण पर विचार करें जो सामाजिक नेटवर्क से जानकारी एकत्र करने के कार्य को समयरेखा टेप के गठन को कम करता है - एक अद्यतन संग्रह या विशेषताओं और समय टिकटों के साथ वस्तुओं की धारा। ऑब्जेक्ट प्रकारों और उनकी विशेषताओं की सूची अलग-अलग, परिवर्तनीय और विस्तार योग्य है, उदाहरण के लिए: पोस्ट, पसंद, टिप्पणियां, रिपॉस्ट और अन्य इकाइयां जो डेवलपर्स और एनालिटिक ऑपरेटरों द्वारा सिस्टम में जोड़ी जाती हैं, और क्रॉलर द्वारा लोड की जाती हैं।

चूंकि टेप संरचित वस्तुओं की एक धारा है, इसलिए इसके भरने पर सवाल उठता है। हमने दो प्रकार के टेपों का समर्थन किया:

• एक साधारण टेप जो निश्चित स्रोतों से सामग्री से भरा होता है;
• एक विषय फ़ीड कीवर्ड, वाक्यांशों और खोज शब्दों के अनुसार सामग्री से भरा होता है।

निश्चित स्रोतों के साथ एक साधारण फ़ीड का एक उदाहरण ( प्रोफाइल और पृष्ठों के लिए URL की सूची सेट की गई है ):

एक सरल प्रकार के टेप में इन प्रोफाइलों और पेजों के आवधिक क्रॉलिंग शामिल हैं, जो किसी दिए गए क्रॉल की गहराई और उपयोगकर्ता द्वारा चयनित वस्तुओं को लोड करने के साथ विभिन्न सामाजिक नेटवर्क पर हैं। जैसे ही यह भरता है, टेप डेटा देखने, विश्लेषण और अपलोड करने के लिए उपलब्ध हो जाता है:

विषय टेप एक साधारण विस्तार है, यह टेप में भरी हुई वस्तुओं की पूर्ण-पाठ खोज और फ़िल्टरिंग प्रदान करता है। सिस्टम स्वचालित रूप से टेप स्रोतों के सेट और उनके बाईपास की गहराई को नियंत्रित करता है, स्रोतों की प्रासंगिकता और संबंधों का विश्लेषण करता है। कार्यान्वयन की यह विशेषता सामाजिक नेटवर्क में खोजशब्दों की अंतर्निहित खोज की अनुपस्थिति या "अजीब" कार्य के कारण है। ऐसा फ़ंक्शन उपलब्ध होने पर भी, ज्यादातर अक्सर परिणाम पूरी तरह से उत्पन्न नहीं होते हैं और कुछ आंतरिक एल्गोरिदम के अनुसार, जो क्रॉलर के लिए आवश्यकताओं के साथ पूरी तरह से असंगत है।

एक निश्चित हेयुरिस्टिक के साथ एक विशेष तंत्र प्रणाली में टेप के प्रबंधन के लिए जिम्मेदार है - यह डेटा और इतिहास का विश्लेषण करता है, प्रासंगिक स्रोतों (प्रोफ़ाइल और सामुदायिक फ़ीड) को जोड़ता है, जिस पर या तो निर्दिष्ट अभिव्यक्तियां उल्लिखित हैं, या वे किसी तरह से संबंधित हैं, और अप्रासंगिक लोगों को हटाते हैं।

विषयगत टेप का एक उदाहरण:

भविष्य में, टेप को परिणामों के बाद के दृश्य के साथ विश्लेषणात्मक परिवर्तनों में एक स्रोत के रूप में उपयोग किया जाता है, उदाहरण के लिए, ग्राफ के रूप में:

कुछ मामलों में, थर्ड-पार्टी सिस्टम ( उदाहरण ) में एकत्रित सामग्री का उपयोग करने के लिए विशेष लक्ष्य संग्रह को सहेजने या REST API के माध्यम से अपलोड करने के साथ आने वाली वस्तुओं की स्ट्रीमिंग प्रोसेसिंग की जाती है। दूसरों में, टाइमर द्वारा ब्लॉक प्रसंस्करण किया जाता है। ऑपरेटर एक स्क्रिप्ट के साथ प्रसंस्करण स्क्रिप्ट का वर्णन करता है या नियंत्रण संकेतों और फ़ंक्शन ब्लॉकों के साथ एक प्रक्रिया का निर्माण करता है, उदाहरण के लिए:

टास्क पूल

सक्रिय टेप प्राथमिक कार्य पूल को परिभाषित करते हैं, जिनमें से प्रत्येक संबंधित कार्यों को बनाते हैं। उदाहरण के लिए, एक एकल प्रोफ़ाइल ट्रैवर्सल कार्य कई संबंधित उप-कार्य उत्पन्न कर सकता है - दोस्तों, ग्राहकों को दरकिनार करना, या नए पोस्ट डाउनलोड करना और विस्तृत विवरण इत्यादि। विषयगत टेप की नई वस्तुओं के पूर्व-प्रसंस्करण का एक चरण भी है, जो नए प्रासंगिक स्रोतों से संबंधित कार्यों को भी बनाता है।

परिणामस्वरूप, हमें प्राथमिकताओं, समय और निष्पादन स्थितियों से संबंधित, विभिन्न प्रकार के कार्यों की एक बड़ी संख्या प्राप्त होती है - इन सभी चिड़ियाघर को सही ढंग से प्रबंधित करने की आवश्यकता होती है, ताकि कोई भी ऐसी स्थिति न हो जिसमें कुछ कार्य सभी क्लस्टर संसाधनों को अन्य टेपों से कार्यों की बाधा के लिए खुद को खींच लेंगे। ।

विसंगतियों को हल करने के लिए, सिस्टम के कार्यान्वयन ने आभासी संसाधनों और गतिशील प्राथमिकता के लिए एक तंत्र साझा किया, जो कि कार्यों के प्रकार, वर्तमान समय और "गुंबद" के रूप में लॉन्च करने की संभावना को ध्यान में रखते हैं। सामान्य शब्दों में - एक निश्चित बिंदु पर प्राथमिकता अधिकतम हो जाती है, लेकिन जल्द ही दूर हो जाती है, कार्य "खट्टा", लेकिन कुछ परिस्थितियों में यह फिर से बढ़ सकता है।

इस तरह के गुंबद का सूत्र कई कारकों को ध्यान में रखता है, विशेष रूप से: मूल कार्यों की प्राथमिकता, संबंधित स्रोत की प्रासंगिकता, और अंतिम प्रयास के समय (बार-बार क्रॉल करने के लिए परिवर्तन या जब कोई त्रुटि होती है)।

आभासी उपयोगकर्ता

व्यापक अर्थों में, एक आभासी उपयोगकर्ता को मानव कार्यों की अधिकतम नकल के रूप में समझा जा सकता है, व्यावहारिक रूप में - गुणों का एक सेट जो क्रॉलर के पास होना चाहिए:

• उपयोगकर्ता, OS, ब्राउज़र, UserAgent, प्लगइन्स, फ़ॉन्ट सेट और अधिक के समान टूल का उपयोग करके पेज कोड निष्पादित करें;
• पृष्ठ के साथ बातचीत करें, कीबोर्ड और माउस के साथ किसी व्यक्ति के काम का अनुकरण करते हुए - पृष्ठ पर कर्सर को स्थानांतरित करें, पाठ को प्रिंट करते समय यादृच्छिक मूवमेंट, पॉज़, प्रेस कीज़ (और मोबाइल उपकरणों के बारे में मत भूलना );
• एक निर्णय केंद्र के साथ बातचीत करें जो पृष्ठ के संदर्भ और सामग्री को ध्यान में रखता है:
  
  • डुप्लिकेट को ध्यान में रखें, पृष्ठ पर वस्तुओं की प्रासंगिकता, क्रॉल की गहराई, समय सीमा और अधिक;
  • असामान्य स्थितियों पर प्रतिक्रिया - कैप्चा या त्रुटि के मामले में, एक अनुरोध बनाएं और तीसरे पक्ष की सेवा का उपयोग करके या सिस्टम ऑपरेटर की भागीदारी के साथ समाधान का इंतजार करें;
• एक विश्वसनीय किंवदंती है - अपने ब्राउज़िंग इतिहास और कुकीज़ (ब्राउज़र प्रोफ़ाइल) को सहेजें, कुछ आईपी पते का उपयोग करें, अधिकांश गतिविधि (उदाहरण के लिए, सुबह-शाम या दोपहर-रात) की अवधि को ध्यान में रखें।

एक आदर्श दृश्य में, एक आभासी उपयोगकर्ता के पास कई खाते हो सकते हैं, विभिन्न समय अवधि में कई ब्राउज़रों का उपयोग कर सकते हैं और अन्य आभासी उपयोगकर्ताओं के साथ जुड़ा हो सकता है, साथ ही साथ इंटरनेट सर्फिंग के व्यवहार और आदतों के अधिकारी हो सकते हैं जो किसी व्यक्ति की विशेषता हैं।

उदाहरण के लिए, ऐसी स्थिति की कल्पना करें - वर्चुअल एक ब्राउज़र और आईपी का उपयोग करता है जैसे कि काम पर (उसी आईपी का उपयोग "सहयोगियों" द्वारा किया जा सकता है), एक और ब्राउज़र और आईपी जैसे कि घर पर ("पड़ोसी" उनका उपयोग करते हैं), और समय-समय पर करते हैं। मोबाइल फोन। समस्या के इस दृष्टिकोण के साथ, इंटरनेट सेवाओं द्वारा स्वचालित संग्रह का मुकाबला करना एक गैर-तुच्छ और संभवतः, अव्यवहारिक कार्य प्रतीत होता है।

व्यवहार में, सब कुछ बहुत सरल है - क्रॉलर के खिलाफ लड़ाई लहर की तरह है और इसमें तकनीकों का एक छोटा सेट शामिल है: मैनुअल मॉडरेशन, उपयोगकर्ता व्यवहार का विश्लेषण (कार्यों की आवृत्ति और एकरूपता) और कैप्चा दिखाना। क्लोरीर, ऊपर की सूची से कम से कम कुछ हद तक संपत्ति रखने, पूरी तरह से आभासी उपयोगकर्ताओं की अवधारणा को लागू करता है और, ऑपरेटर के उचित ध्यान के साथ, लंबे समय तक अपने कार्य को पूरा कर सकता है, शेष " मायावी जो "।

लेकिन आभासी उपयोगकर्ताओं का उपयोग करने के नैतिक और कानूनी पक्ष के बारे में क्या?

सार्वजनिक और व्यक्तिगत डेटा की अवधारणाओं के साथ नहीं खेलने के लिए, पार्टियों में से प्रत्येक के अपने स्वयं के वजनदार तर्क हैं, हम केवल मूल बिंदुओं पर स्पर्श करेंगे।

आभासी उपयोगकर्ताओं की सामग्री, स्पैम मेलिंग, खातों का पंजीकरण और अन्य "सक्रिय" गतिविधियों का स्वचालित प्रकाशन आसानी से अवैध माना जा सकता है या तीसरे पक्ष के हितों को प्रभावित कर सकता है। इस संबंध में, सिस्टम एक दृष्टिकोण लागू करता है जिसमें आभासी उपयोगकर्ता केवल उपयोगकर्ता (उनके ऑपरेटर) का प्रतिनिधित्व करने वाले उत्सुक पर्यवेक्षक होते हैं और इसके बजाय जानकारी एकत्र करने की दिनचर्या का प्रदर्शन करते हैं।

साझा वर्चुअल संसाधन प्रबंधन

जैसा कि ऊपर वर्णित है, एक आभासी उपयोगकर्ता एक सामूहिक इकाई है जो प्रक्रिया में कई सिस्टम और आभासी संसाधनों का उपयोग करता है। कुछ संसाधनों का उपयोग अकेले किया जाता है, जबकि अन्य को कई आभासी उपयोगकर्ताओं द्वारा साझा और उपयोग किया जाता है, उदाहरण के लिए:

• आउटपुट नोड पता (बाहरी आईपी) - एक या अधिक आभासी उपयोगकर्ताओं के साथ जुड़ा हुआ;
• ब्राउज़र प्रोफ़ाइल - एक आभासी उपयोगकर्ता के साथ जुड़ा हुआ;
• कंप्यूटिंग संसाधन - सर्वर से जुड़ा हुआ है, सर्वर की सीमाओं को समग्र रूप से और प्रत्येक प्रकार के कार्य के लिए सेट करता है;
• वर्चुअल स्क्रीन - सर्वर प्रतिबंध सेट करता है, लेकिन आभासी उपयोगकर्ता द्वारा उपयोग किया जाता है।

प्रत्येक वर्चुअल संसाधन में एक प्रकार और उदाहरणों का एक समूह होता है जिसे स्लॉट कहा जाता है। क्लस्टर के प्रत्येक नोड पर, वर्चुअल संसाधनों और स्लॉट्स के कॉन्फ़िगरेशन को परिभाषित किया गया है, जो वर्चुअल संसाधनों के पूल में जोड़े जाते हैं और क्लस्टर के सभी नोड्स के लिए सुलभ हैं। इसके अलावा, एक प्रकार के आभासी संसाधन के लिए, एक निश्चित और एक चर संख्या दोनों को जोड़ा जा सकता है।

प्रत्येक स्लॉट में विशेषताएँ हो सकती हैं जो संसाधनों को जोड़ने और आवंटित करते समय शर्तों के रूप में उपयोग की जाएंगी। उदाहरण के लिए, हम प्रत्येक आभासी उपयोगकर्ता को कुछ प्रकार के कार्यों, सर्वरों, आईपी पतों, खातों, सबसे बड़ी क्रॉलिंग गतिविधि की अवधि और अन्य मनमानी विशेषताओं के साथ जोड़ सकते हैं।

सामान्य स्थिति में, संसाधन के जीवन चक्र में कुछ चरण होते हैं:

1. जब वर्चुअल संसाधनों के साझा पूल में क्लस्टर नोड लॉन्च किया जाता है, तो अतिरिक्त खुले स्लॉट पंजीकृत होते हैं, साथ ही संसाधनों के बीच लिंक भी होते हैं;
2. जब किसी कार्य को वर्चुअल संसाधनों के एक पूल से डिस्पैचर द्वारा लॉन्च किया जाता है, तो एक उपयुक्त फ्री स्लॉट का चयन किया जाता है और ब्लॉक किया जाता है। बदले में, मूल संसाधन को अवरुद्ध करने से संबंधित संसाधनों को अवरुद्ध होता है, और मुक्त स्लॉट्स की अनुपस्थिति में, एक विफलता उत्पन्न होती है;
3. कार्य पूरा होने पर, मुख्य संसाधन स्लॉट और उससे जुड़े स्लॉट मुक्त हो जाते हैं।

नोड कॉन्फ़िगरेशन में निर्दिष्ट लोगों के अलावा, उपयोगकर्ता वर्चुअल संसाधन भी हैं - ऐसी संस्थाएं जिनके साथ सिस्टम ऑपरेटर काम करता है। विशेष रूप से, ऑपरेटर वर्चुअल उपयोगकर्ता रजिस्ट्री इंटरफ़ेस का उपयोग करता है, जो एक ही बार में कई उपयोगी कार्यों का समर्थन करता है:

• विवरण और अतिरिक्त विशेषताओं का प्रबंधन, उपयोग की बारीकियों को दर्शाता है, विशेष रूप से, आभासी उपयोगकर्ताओं को समूहों में विभाजित किया जा सकता है और विभिन्न प्रयोजनों के लिए उपयोग किया जा सकता है;
• आभासी उपयोगकर्ताओं की स्थिति और आंकड़ों पर नज़र रखना;
• वर्चुअल स्क्रीन का कनेक्शन - कार्य का वास्तविक समय पर नज़र रखना, आभासी उपयोगकर्ता (दूरस्थ डेस्कटॉप विजेट) के बजाय ब्राउज़र में कार्य करना।

उपयोगकर्ता वर्चुअल संसाधनों की उदाहरण रजिस्ट्री:

अच्छा मामला है कि जड़ नहीं लिया है

"किलर फिची" के रूप में सूचनात्मक टेपों के अलावा, हमने जटिल खोजों को करने और ऑनलाइन जांच करने के लिए एक प्रोटोटाइप खोज ग्राफ विकसित किया। मुख्य विचार एक दृश्य ग्राफ बनाना है जिसमें नोड्स ऑब्जेक्ट्स (व्यक्ति, संगठन, समूह, प्रकाशन, पसंद, आदि) के टेम्पलेट हैं, और लिंक पाए गए ऑब्जेक्ट्स के बीच कनेक्शन के पैटर्न हैं।

व्यक्तियों और उनके बीच संबंधों की एक सरल खोज ग्राफ का एक उदाहरण:

यह दृष्टिकोण मानता है कि खोज न्यूनतम ज्ञात जानकारी के साथ शुरू होती है। प्रारंभिक खोज के बाद, उपयोगकर्ता परिणामों की जांच करता है और धीरे-धीरे खोज ग्राफ़ में अतिरिक्त शर्तें जोड़ता है, चयन को संकीर्ण करता है और परिणाम की क्रॉल गहराई और सटीकता बढ़ाता है। अंतत: ग्राफ वह रूप लेता है जिसमें प्रत्येक नोड्स परिणामों के साथ एक अलग सूचना फीड होती है। इस टेप को डैशबोर्ड्स और विजेट्स पर आगे के विश्लेषण और विज़ुअलाइज़ेशन के लिए एक स्रोत के रूप में भी इस्तेमाल किया जा सकता है।

जब हमने इस तरह के एक फिट के विकास की घोषणा की, हमारे ग्राहकों और भागीदारों ने इस विचार का गर्मजोशी से समर्थन किया, तो ऐसा प्रतीत हुआ कि मौजूदा समान समाधानों में बहुत कमी थी। लेकिन काम के प्रोटोटाइप के पूरा होने पर, व्यवहार में यह पता चला कि ग्राहक अपनी आंतरिक प्रक्रियाओं को बदलने के लिए तैयार नहीं थे, और इंटरनेट जांच को कुछ ऐसी चीज़ों के रूप में देखा गया था जो अचानक से ज़रूरत पड़ने पर काम में आ सकती हैं। एक ही समय में, तकनीकी पक्ष से, कार्यक्षमता गंभीर है और आगे शोधन और समर्थन की आवश्यकता है। परिणामस्वरूप, हमारे सहयोगियों की मांग में कमी और व्यावहारिक रुचि के कारण, इस फिच को बेहतर समय तक अस्थायी रूप से जमे रहना पड़ा।

पुनर्जन्म

हमारे समाधानों के विकास के वर्तमान वेक्टर को देखते हुए, यह विशेषता अभी भी प्रासंगिक लगती है, लेकिन तकनीकी दृष्टिकोण से यह पहले से ही एक अलग तरीके से देखा जाता है। बल्कि, यह क्यूबिसियो की कार्यक्षमता का विस्तार है, अर्थात्, डोमेन मॉडल के संपादक और डेटा प्रोसेसिंग प्रक्रियाओं के संपादक, जिन्हें अब तक एक प्रोटोटाइप के रूप में लागू किया गया है, लेकिन एक सामान्यीकृत रूप में इसी तरह के दृष्टिकोण के लिए प्रदान करते हैं।

विषय क्षेत्र के सामाजिक मॉडल "सोशल नेटवर्क" का एक उदाहरण (संपादक की छवि पर क्लिक करता है):

उपरोक्त ऑन्कोलॉजी पर आधारित खोज-विश्लेषणात्मक ग्राफ़ का एक उदाहरण (छवि पर क्लिक करना संपादक को खोलता है):

क्लस्टर प्रौद्योगिकी स्टैक

वर्णित प्रणाली को कई साल पहले मंच के साथ संयोजन में विकसित किया गया था (हम इसे dWires कहते हैं), यह कार्यशील है और अभी भी उपयोग में है। मुख्य रूप से सफल समाधान स्वाभाविक रूप से हमारे नए विकास के लिए चले गए। विशेष रूप से, वर्णित मंच सूचना-विश्लेषणात्मक प्रणालियों के डिजाइनर की पहली पीढ़ी का प्रतिनिधित्व करता है, जिसमें से jsBeans मंच और हमारे अन्य विकास बंद हो गए हैं।

संक्षेप में, सिस्टम अक्का क्लस्टर, राइनो दुभाषिया और एम्बेडेड जेट्टी वेब सर्वर पर आधारित है। ऊपर दिए गए आरेख में कुछ उपयोगी वास्तुशिल्प विशेषताओं को देखा जा सकता है। , , , JavaScript- , jsBeans .

, – .

Java. , , – - JavaScript. JavaScript ( ), , , . – , , , , , - .

Akka - . - Akka Cluster , . , " " ( ) .

Selenium WebDriver , : , , API . WebDriver ( , IP ).

( ):

• , , Xvfb;
• VNC , , x11vnc;
• VNC Web Viewer , , noVNC -.

MongoDB, – . Elasticsearch, MongoDB. (H2, EhCache, Db4o).

" ", , bash , ( ). . , .

, .

. – . , " ".

, .

,

( « »)