पार्सिंग साइटें - और क्या यह आमतौर पर रूस में कानूनी है?

एक परिभाषा के अनुसार, पार्सिंग सूचना का एक पार्सिंग है। एक व्यक्ति जो इंटरनेट परियोजनाओं के लिए जानकारी एकत्र करने और प्रसंस्करण के विशिष्ट कार्यों में शामिल नहीं है, इसका कोई मतलब नहीं है। और बहुत परिभाषा, केवल सामान्य शब्दों में, काम की विशाल राशि का मतलब है कि सैकड़ों लाखों लोग और लाखों रोबोट (हालांकि आभासी, लेकिन कम वास्तविक नहीं) हर मिनट दुनिया भर में करते हैं। लेकिन यह कार्य एक व्यक्ति के लिए आम है - कि ऑनलाइन टिकटों की कीमतों की तुलना करते हुए, कि दुकानों की साइटों पर सही इलेक्ट्रॉनिक्स का चयन करना ... घर के निकटतम सुपरमार्केट के एक सुविधाजनक मोबाइल एप्लिकेशन में कीमतें और प्रचार देखना, हममें से कोई भी खुद को एक पार्सर डबिंग के बारे में नहीं सोचेगा।


फिर भी, व्यापार पार्सिंग मौजूद है, काम करता है और निश्चित रूप से, विचार के कई स्तरों पर जीवंत चर्चा का विषय है: नैतिक, कानूनी, तकनीकी, वित्तीय और न केवल।

यह लेख एक निश्चित राय व्यक्त नहीं करता है, सलाह नहीं देता है और रहस्यों को उजागर नहीं करता है - यहां हम केवल एक अलग लेख पर सबसे दिलचस्प टिप्पणियों के उदाहरण पर कुछ राय पर विचार करेंगे (50k विचारों और 400 से अधिक टिप्पणियों!) के बारे में, वे अपने दृष्टिकोण के दृष्टिकोण से व्यवहार करते हैं। वेब परियोजनाओं को पार्स करने में अनुभव। दूसरे शब्दों में - हमने बहुत समय बिताया और सबसे दिलचस्प पाठकों की टिप्पणियों को एक साथ लाने और वर्गीकृत करने की कोशिश की ... सांसारिक ज्ञान, इसलिए बोलने के लिए :)

तो, पार्सिंग के बारे में:

"तकनीक का मामला है।" शानदार परदे के पीछे और वे कहाँ रहते हैं।

जिस तरह खुद को पार्स करने का विचार स्वाभाविक है (यह देखना हमेशा दिलचस्प होता है कि "पड़ोसियों" के साथ क्या होता है), इसके कार्यान्वयन के मूल तरीके बिल्कुल सरल हैं। यदि आप जानना चाहते हैं, तो पूछें, लेकिन यदि आप एक बड़े डेटा ऐरे के वास्तविक मूल्यों (चाहे वह सामान की कीमत, उनके विवरण, ऑर्डर देने या हॉट डिस्काउंट के लिए उपलब्ध वॉल्यूम) जानना चाहते हैं, तो आपको बहुत बार और अक्सर "पूछना" होगा। यह स्पष्ट है कि किसी को भी इस डेटा को मैन्युअल रूप से इकट्ठा करने का प्रयास करने के लिए कभी नहीं होगा (दक्षिणी देशों के मेहनती बच्चों की एक बड़ी टीम को छोड़कर जो सबसे मानवीय तरीके से प्रेरित नहीं थे), इसलिए माथे में सरल, प्रभावी समाधान का उपयोग किया जाता है: साइट को "ढेर" करने के लिए, ब्राउज़र सेट करें। संग्रह बॉट्स - और "नल" रुचि के संकेतकों के लिए लक्ष्य साइट, ध्यान से एक सुविधाजनक प्रारूप में "नोटपैड" में उत्तर लिखें, एकत्र किए गए डेटा का विश्लेषण करें, और दोहराएं।

यहाँ हमारे पाठकों से और हम से "पार्सिंग तकनीक" के कुछ तरीके हैं:

1. "सेलेनियम फार्म - आगे बढ़ो!" (यह सेलेनियम / स्प्लिटर्न जैसे एक ब्यूटीफुल-जैसे समाधान के साथ हेडलेस ब्राउज़र को संदर्भित करता है)। हमारे पाठक के अनुसार, उसने विक्रेता की साइटों (वह एक आयातक है) की निगरानी के लिए अपनी पत्नी को docker झुंड क्लस्टर पर एक छोटी सी साइट लिखी ताकि वे RRC / MRC पॉलिसी (खुदरा कीमतों की सिफारिश) का उल्लंघन न करें। लेखक के अनुसार, सब कुछ स्थिर रूप से काम करता है, पार्सिंग अर्थव्यवस्था जुटती है - "सभी लागत $ 3. के लिए 4 नोड हैं।" सच है, अभिमानी लेखक के पास केवल एक हजार उत्पाद और पार्सिंग में दर्जनों साइटें हैं, कोई और नहीं :)
2. "हम क्रोमियम लॉन्च करते हैं और सब कुछ ठीक है, यह पता चलता है कि 4-5 सेकंड में 1 उत्पाद लिया जा सकता है ..."। यह स्पष्ट है कि सर्वर पर जम्प किए गए लोड से कोई भी व्यवस्थापक खुश नहीं होगा। साइट, निश्चित रूप से, इस उद्देश्य के लिए आवश्यक है कि हर किसी को जानकारी प्रदान करने के लिए जो दिलचस्पी है, लेकिन "आप में से कई हैं, लेकिन मैं अकेला हूं", इसलिए, जो लोग विशेष रूप से रुचि रखने के लिए उत्सुक हैं, उन्हें अनदेखा किया जाता है, ज़ाहिर है। खैर, इससे कोई फर्क नहीं पड़ता: क्रोमियम बचाव में आता है - यदि ब्राउज़र "केवल हमसे पूछें" मोड में साइट पर दस्तक दे रहा है - यह लाइन में प्रतीक्षा किए बिना किया जा सकता है। वास्तव में, पार्सिंग कार्यों के सामान्य सरणी में, html पृष्ठों का पार्सिंग 90% मामलों में किया जाता है, और "विशेष रूप से कठिन मामलों" में (जब साइटों को सक्रिय रूप से संरक्षित किया जाता है, उसी तरह Yandex.Market कैप्चा के लिए पूछ रहा है), यह क्रोमियम है जो इसे प्रबंधित करता है।
3. "एलटीई राउटर / मोडेम से अपने खुद के हाथों से साफ परदे।" खोज इंजनों को पार्स करने के लिए उपयुक्त स्वच्छ परदे के पीछे कॉन्फ़िगर करने के लिए काफी काम के तरीके हैं: एक 3 जी / 4 जी मॉडेम खेत या यादृच्छिक गंदे परदे के एक समूह के बजाय सफेद परदे के पीछे खरीदना। यह महत्वपूर्ण है कि ऐसी औद्योगिक पार्सिंग के लिए प्रोग्रामिंग भाषा का क्या उपयोग किया जाता है - प्रति दिन 300 साइटें (और सही उत्तर है .net :) :)। वास्तव में, इंटरनेट खुली प्रॉक्सी सूचियों वाली साइटों से भरा है, जिनमें से 50% काफी काम कर रहे हैं, और इन साइटों से प्रॉक्सी सूचियों को पार्स करना इतना मुश्किल नहीं है, फिर उनकी मदद से अन्य साइटों को पार्स करने के लिए :)) खैर, हम यह करते हैं।
4. सेलेनियम के पक्ष में एक और मामला: "मैं खुद को पार्स कर रहा हूं (लेकिन RuNet में नहीं, लेकिन मैं अपने प्रिय up.com पर आदेशों को पकड़ता हूं, जहां इसे आमतौर पर स्क्रैपिंग कहा जाता है, एक अधिक उपयुक्त शब्द, IMHO)। मेरा थोड़ा अलग अनुपात है, कहीं न कहीं 75 से 25 के आसपास। लेकिन पूरी तरह से, हाँ, अगर यह आलस्य है या मुश्किल है - अब तक किसी ने सेलेनियम को चकमा नहीं दिया है :) लेकिन कई सौ साइटों में से जिन्हें मुझे काम करना था, यह कभी भी पहचान में नहीं आया। लक्ष्य डेटा प्राप्त करने के लिए चित्र। आमतौर पर, अगर html में कोई डेटा नहीं है, तो वे हमेशा किसी न किसी जसन में खींचे जाते हैं (ठीक है, वास्तव में, हमने पहले ही नीचे एक उदाहरण दिखाया है)।
5. "पायथन टामर्स।" और एक अन्य पाठक का मामला: "अपने पिछले काम में मैंने पायथन / स्क्रेपी / स्पलैश का इस्तेमाल किया, जो कि प्रिज्मा.फी और वर्कोकोकप्प्प.कॉम से अलग-अलग आकार के एक दिन में 3-5 उत्पादों के साथ कुछ छोटी चीज़ों के लिए इस्तेमाल करता है। पिछले साल के अंत में, हमने ऐसे सर्वर को Hetzner (https://www.hetzner.com/dedicated-rootserver/ax60-ssd) से उबंटू सर्वर पर किराए पर लिया था। अधिकांश कंप्यूटिंग संसाधन अभी भी निष्क्रिय हैं।
6. "वेबड्राइवर हमारा सब कुछ है।" सामान्य स्वचालन में संलग्न (जहां पहले से ही पार्स गिर जाता है), जितना संभव हो उतना विश्वसनीय (क्यूए कार्यों)। एक अच्छा वर्कस्टेशन, समानांतर में एक दर्जन या दो ब्राउज़र - आउटपुट एक बहुत ही दुष्ट, तेज़ थ्रेशर है।

एक होवरिंग के "जेंटलमैन सेट" - 4 वर्चुअल मशीन, असीमित ट्रैफ़िक, प्रत्येक पर 4 प्रोसेसर, 8 जीबी मेमोरी, विंडोज सर्वर ... अभी तक, सशर्त 50 साइटों के प्रत्येक नए बैच के लिए पर्याप्त है - आपको अपनी वर्चुअल मशीन की आवश्यकता है। लेकिन यह खुद साइटों पर बहुत कुछ निर्भर करता है। विजुअल स्टूडियो में System.Net भी है, जो वास्तव में विंडोज में स्थापित इंटरनेट एक्सप्लोरर का उपयोग करता है। यह भी काम करता है।

“अपने मन में (अपने आप को बचाने के लिए) कैसे रक्षा करें? कोई रास्ता नहीं, हम वैसे भी क्रॉल करेंगे ”

व्यापार विचारों को पार्स करना, हमारे व्यवसाय के बारे में बात करना, लगातार हमें फेंक दिया जाता है।

1. यैंडेक्स को जारी करना, कई एसईओ सेवाएं करना। “इसके लिए अधिक मांग है, अधिक पैसा है। सच है, वे मूल रूप से पूरे एसईओ विश्लेषिकी प्रणाली को बेचते हैं। " लेकिन हम जारी करने को पार्स नहीं करते हैं - हमने नहीं पूछा, और 100 अनुरोधों के तुरंत बाद कैप्चा होगा, हमें स्वच्छ प्रॉक्सी की आवश्यकता है, लेकिन उन्हें प्राप्त करना या महंगा होना मुश्किल है, यह इतना लाभदायक नहीं है ... बेशक, बड़े खिलाड़ियों को खेलना आसान है, और पाठक हमारे साथ हैं। इसे साझा करें (हम खुद Google और Yandex को पार्स नहीं करते हैं)। अनुभव के अनुसार, यैंडेक्स, Google और इसी तरह के बड़े निगमों के डेटा केंद्रों के सबनेट के साथ एक निश्चित आधार है (आखिरकार, प्रॉक्सी डेटाबेस अपडेट किए जाते हैं, और बड़े खिलाड़ी उन्हें सदस्यता लेते हैं और प्रतिबंध लगाते हैं)। इस प्रकार, डेटा केंद्रों को जारी किए गए आईपी पते पर उठाए गए प्रॉक्सी नेटवर्क कैप्चा और अन्य बटेर जारी करने के साथ प्रतिबंध के लिए पूरी तरह से उड़ते हैं। नतीजतन, बोटनेट के मालिकों और एक समान "गंदगी" से प्रॉक्सी की खरीद के साथ केवल अवैध विकल्प हैं, जिस स्थिति में आपके पास एक वास्तविक उपयोगकर्ता आईपी होगा। और फिर भी, ऐसे निगमों को वास्तव में आपको "व्यवस्थित" कुकीज़ रखने की आवश्यकता होती है, जिसके साथ आप उन साइटों पर कुछ समय के लिए "क्रॉल" कर चुके हैं जहां वे आपको ट्रैक कर सकते हैं (उदाहरण के लिए, हिट मायने रखता है)। लेकिन वे सोने के क्षेत्रों में NAT से पार्सर्स को कैसे अलग करते हैं? सशर्त 100 अनुरोध कुछ भी नहीं हैं।
2. पार्सिंग से सुरक्षा: "महान और भयानक" को विचार से हटाकर, हम पर ध्यान केंद्रित करेंगे, "मात्र नश्वर"। यदि वे हैं जो पार्स करने में लगे हुए हैं, तो ऐसे लोग होने चाहिए जो उन्हें ऐसा करने से रोकने की कोशिश करेंगे। जीवित लोगों के साथ खेलना अधिक दिलचस्प है: प्रतिद्वंद्विता का एक तत्व दिखाई देता है, प्रत्येक पक्ष दूसरे को पछाड़ने की कोशिश करता है। और, चूंकि कोई भी अभी भी मैन्युअल रूप से जानकारी एकत्र करने का इरादा नहीं रखता है, वे खेलते हैं जो बॉट को एक जीवित व्यक्ति के समान बना देगा, और जो वास्तविक उपयोगकर्ताओं से अनुरोधों का जवाब देना जारी रखते हुए इन बॉट्स को अधिक कुशलता से पहचानने में सक्षम होंगे - साइट को व्यवसाय की सहायता के लिए डिज़ाइन किया गया है , हम इस से निष्कासित हैं। और, व्यवसाय दक्षता के कार्य के ढांचे के भीतर, कोई भी संसाधनों के उचित आवंटन और उपायों की लाभप्रदता को ध्यान में नहीं रख सकता है, वास्तव में, इसे पार्स और काउंटर करना।
   
   
   • आप खुद को पार्स करने से नहीं बचा सकते ("छात्रों" को छोड़कर), लेकिन आप उस पर खर्च करने के लिए सीमा बढ़ा सकते हैं (समय और धन दोनों)। नतीजतन, जो डेटा हम सुरक्षित करते हैं (साइट के कई खंड) पार्स करना आसान नहीं है, लेकिन तैयार डेटाबेस खरीदने और खरीदने के लिए, जैसे हम इसे खरीदते हैं। नेटवर्क पर पार्सर आईपी पतों की तालिकाएं हैं, प्रवेश द्वार पर इस सूची पर कैप्चा दिखाना कोई समस्या नहीं है। इसी तरह, id और classes जनरेट करना, जैसा कि mail.ru करता है, भी कोई समस्या नहीं है और इसके लिए किसी बड़े खर्च की आवश्यकता नहीं है। Google का एक नया कैप्चा आमतौर पर बहुत सटीक रूप से निर्धारित करता है कि रोबोट है या नहीं। यदि कोई संदेह है, तो उपयोगकर्ता को काटना और एक कैप्चा के लिए पूछना सरल है। अंत में, किसी ने भी बॉट को पकड़ने के लिए हनीपॉट चारा को रद्द नहीं किया है। अच्छी तरह से, क्लासिक, पाठ में अक्षरों को प्रतिस्थापित करते हैं, मास्क बनाते हैं, आदि।
   • और यहां हम खुद पर आपत्ति करेंगे: शायद, व्यक्तिगत रूप से, यह सब मदद नहीं करेगा, लेकिन सभी एक साथ आपके जीवन को इतना जटिल करेंगे कि यह अक्षम हो जाए। इसके अलावा, इन सभी तकनीकों में आम तौर पर बड़े व्यय की आवश्यकता नहीं होती है। सच है, इन सभी तकनीकों में बहुत खर्च होता है, इसलिए संक्षेप में कोई सुरक्षा नहीं है। गतिशील परदे के पीछे, भारतीयों द्वारा कैप्चा को पहचानने वाली सेवाएं और सेलेनियम एक अच्छी तरह से परिभाषित एक्शन एल्गोरिदम के साथ। वह सब हासिल किया जा सकता है - पार्सर के विकास में अधिक लागत आएगी, यह किसी को डरा सकता है, लेकिन अगर लक्ष्य साइट "हॉर्न्स एंड होव्स" के स्थानीय कार्यालय के डेढ़ पृष्ठों की सूची नहीं है, तो लागत में वृद्धि से कुछ लोग भयभीत होंगे।
   • बचाव करते समय, यह हमेशा वास्तविक आगंतुकों के विशिष्ट व्यवहार मॉडल का उपयोग करने के बारे में होता है, प्लस सिस्टम जो "सफेद" बॉट्स (यांडेक्स, Google, आदि) को पर्याप्त रूप से पहचानते हैं। और एक वास्तविक आगंतुक के अनुकूल होने के लिए, आपको मानक संक्रमण मानचित्रों के एक सेट को जानने की आवश्यकता है। और फिर एक साधारण प्रॉक्सी पूल जब पार्सिंग पर्याप्त नहीं है। सिस्टम 100% की रक्षा नहीं करता है, लेकिन यह कार्य को हल करता है - आंकड़ों को देखने के अनुसार, आप समझ सकते हैं कि जब पूरी साइट को स्कैन किया गया था। या तो पार्सर या सर्च इंजन ऐसा करते हैं। लेकिन खोज इंजन robots.txt पर प्रतिक्रिया देते हैं, लेकिन पार्सर्स नहीं करते हैं।

“अरे वाह! अगर सभी लोगों ने सब कुछ समझदारी से किया ... मुझे लगता है कि 10 गुना अधिक बेरोजगार होंगे। अपनी उम्र के लिए पर्याप्त है। ”

“क्या मैं पर्यावरण के साथ रहता हूँ? हां, लेकिन व्यर्थ में "

1. मुद्दे के विचार के नैतिक और नैतिक विमान में पार्सिंग के तकनीकी और कानूनी दोनों पहलुओं से संबंधित एक महत्वपूर्ण बिंदु निहित है। Robots.txt फ़ाइल अपने नाम में सरलता और प्रतीकात्मक है, जिसे हमारे पाठक और हम विभिन्न तरीकों से व्याख्या करते हैं:
   
   
   • किसी बॉट के "ड्राइवर" के रूप में आपकी गतिविधि "नैतिक" है, जैसा कि आपके बॉट आपके द्वारा देखी गई साइट के robots.txt का अनुसरण करते हैं। "उत्पाद पृष्ठ बंद नहीं होते हैं" की मान्यताओं पर आधारित नहीं है, लेकिन शाब्दिक रूप से अनुरोधित URL पर अनुमति देने और मुखौटे लगाने पर रोक है। लापता robots.txt - आपके पक्ष में व्याख्या; वर्तमान, लेकिन आप इसका उल्लंघन करते हैं - निश्चित रूप से, आप दुर्भावनापूर्वक साइट का उपयोग कर रहे हैं। बेशक robots.txt में कानून का बल नहीं है, लेकिन अगर आप वास्तव में इसे "बेक" करते हैं, तो यह एक तथ्य नहीं है कि यह निश्चित रूप से वकीलों द्वारा पारित होगा। "
   • इस तथ्य के बावजूद कि रोबोट के साथ बातचीत करना असंभव है, कभी-कभी लोगों के साथ तुलना में आसान होता है, क्योंकि दुकानों में वे संकेत लटकाते हैं "फ़ोटो निषिद्ध हैं", और यह अवैध है। और अनैतिक। “बस ऐसी ही एक परंपरा। robots.txt एक तकनीक है। यह नैतिकता के बारे में नहीं है। यदि आप इंगित करना चाहते हैं कि आप पार्स नहीं करना चाहते हैं, तो इस तरह से एक अनुभाग बनाएं: account.habr.com/info/agreement। मुझे नहीं पता कि इस तरह का प्रतिबंध कानूनी होगा, लेकिन कम से कम आप अपनी इच्छाओं को मानव भाषा में व्यक्त कर सकते हैं (या robots.txt का उल्लेख करें), तो आप नैतिकता के बारे में बात कर सकते हैं। ” हमारे वकील मुंहतोड़ जवाब देते हैं: "किसी भी तरह से इस तरह का प्रतिबंध कानूनी नहीं होगा।"
   • हम एक साथ पार्सिंग और सूचना के आगे उपयोग के बारे में सोचते हैं। “Robots.txt पार्सिंग के बारे में इतना नहीं है, लेकिन आगे के प्रकाशन (उदाहरण के लिए, खोज परिणामों में) के बारे में है। यदि आप चाहते हैं कि डेटा किसी को प्राप्त न हो, तो आपको उन लोगों के सर्कल को सीमित करना चाहिए जो इसे देख सकते हैं। यदि आपके पास खिड़कियों पर पर्दे नहीं हैं, तो आपको नग्न नहीं जाना चाहिए। यह खिड़कियों और बदसूरत बाहर देखने के लिए जानबूझकर हो सकता है, लेकिन पर्दे के बिना क्या दावा है? "
   • नैतिकता को पार्स करना तटस्थ है। प्राप्त जानकारी का उपयोग करना अनैतिक हो सकता है। सामान्य तौर पर, विशुद्ध रूप से एक नैतिक दृष्टिकोण से, हर किसी को सार्वजनिक जानकारी प्राप्त करने का अधिकार है जो निजी या विशेष नहीं है और कानून द्वारा संरक्षित नहीं है। कीमतें निश्चित रूप से सार्वजनिक सूचना के लिए हैं। वर्णन भी। विवरण कॉपीराइट के अधीन हो सकते हैं और उन्हें अनुमति के बिना पोस्ट नहीं किया जाना चाहिए। लेकिन किसी भी नैतिकता का उल्लंघन नहीं किया जाता है, भले ही मैं साइटों को पार्स कर दूंगा और अपनी खुद की सार्वजनिक साइट बनाऊंगा, जो कीमतों की गतिशीलता और प्रतियोगियों की तुलना को प्रतिबिंबित करेगा। यह नैतिक रूप से भी उपयोगी है क्योंकि यह सामाजिक रूप से उपयोगी जानकारी प्रदान करता है। ”
2. "हाथों को इकट्ठा किया जा सकता है, लेकिन रोबोट को पार्स नहीं किया जा सकता है।" उचित परिश्रम और कौशल के साथ किसी भी "बुराई" को उचित ठहराया जा सकता है, और इससे भी अधिक पार्सिंग हो सकती है, क्योंकि इस बात के जीवंत उदाहरण हैं कि इसका हर अर्थ में सही तरीके से कैसे उपयोग किया गया था, हम अपने पाठक को उद्धृत करते हैं: "मैं बहुत समय पहले पार्स करने में लगा था, लेकिन मैंने हमेशा पूछा पूरी तरह से कानूनी और नैतिक रूप से सही पार्सिंग करें। कई बार, बिचौलियों ने अनुरोध किया कि थोक व्यापारी (अपने माल को बेचने के लिए) पार्स किया जाए, थोक व्यापारी खुद बुरा नहीं मानता, लेकिन एपीआई के विकास में निवेश नहीं करने वाला था (या तकनीकी कारणों से नहीं कर सकता था); एक बार एक चीनी स्टोर के एक मध्यस्थ ने एकीकरण का अनुरोध किया, लेकिन वहां चीनी स्टोर की एपीआई इतनी गड़बड़ और सीमित थी कि पार्स करके आंशिक रूप से जानकारी प्राप्त करना आवश्यक था; एक बार लेखक और साइट का मालिक और मंच एक मुक्त साइट से माइग्रेट करना चाहता था जो डेटाबेस को "क्लैंप" करता है; उन्होंने साहित्यिक प्रतियोगिता की साइट और उसके मंच का एकीकरण भी किया, ताकि एक नई कहानी जोड़ने पर, मंच पर विषय स्वतः प्रकट हो जाए (तकनीकी कारणों से यह अन्यथा नहीं किया जा सका)। ”

“क्या वकील को बुलाया गया था? उद्धरण पार्स नहीं किया जा सकता है "

भले ही आप शक्ति के स्रोत को निर्धारित करने के लिए किस पक्ष को चुनते हैं: पैसा या सच्चाई - एक बात स्पष्ट है, कि, जहां पैसा मिलना शुरू होता है, सच्चाई का पता लगाना और अधिक कठिन हो जाता है। इस लेख के दायरे से परे, कानून और स्वयं के प्रतिनिधियों सहित सब कुछ प्राप्त करने की संभावना के बारे में चर्चा करते हुए, हम टिप्पणियों में उठाए गए कुछ कानूनी पहलुओं पर विचार करेंगे:

1. "झाँकने से लेकर चोरी करना एक कदम है।" यहां तक ​​कि अगर सब कुछ निषिद्ध नहीं है, तो हमारे पाठकों का मानना ​​है, “कीहोल में झांकना कम से कम बदसूरत है, और यदि ग्राहक भी अपने स्वयं के रूप में स्थानिक बंद कर देता है, तो यह प्रत्यक्ष चोरी है। बेशक, यह स्पष्ट है कि व्यापार में हर कोई ऐसा करता है। लेकिन एक सभ्य समाज में इस बारे में चुप रहने के लिए अभी भी प्रथागत है।] हालांकि, किसी के लिए पार्सिंग करना और अपने स्वयं के रूप में स्पर्सन को पारित करना, जैसा कि वे कहते हैं, दो बड़े अंतर हैं: “आप नरम और ठंडे को भ्रमित करते हैं। हम वास्तव में पार्सिंग सेवाएं प्रदान करते हैं। लेकिन यह ठीक उसी तरह है जैसे आप निर्माताओं को दोष दे सकते हैं, उदाहरण के लिए, हथियार, उसे मारने के लिए। हम व्यापार करते हैं, लेकिन व्यापार में एक नियम है - क्या यह कानूनी है या नहीं। मेरा कहना है ... यदि ग्राहक हमारे पास आते हैं और डेटा प्राप्त करने के लिए बहुत अधिक भुगतान करने को तैयार हैं - यह वास्तव में बुरा है ... "
2. "एक मीडिया साइट के लिए एक आवेदन किया - एक शिकायत के लिए किसी को भी नहीं दिया।" फोर्ब्स साइट, पार्सिंग, Google Play पर एप्लिकेशन - क्या गलत हो सकता है? “एक समय मैंने फोर्ब्स वेबसाइट के लिए एक आवेदन करने का फैसला किया। साइट से लेख प्राप्त करने के लिए - पार्स किए गए पृष्ठ। मैंने स्वचालित मोड में सब कुछ कॉन्फ़िगर किया और Android के लिए एक आवेदन किया। मैंने एप्लिकेशन को बाजार में पोस्ट किया। एक साल बाद, एक वकील ने मुझसे संपर्क किया और आवेदन को हटाने की मांग की, क्योंकि मैं कॉपीराइट का उल्लंघन करता हूं। मैंने बहस नहीं की। यह शर्म की बात है कि फोर्ब्स के पास साइट से अपने स्वयं के लेखों के लिए एक आवेदन नहीं है। केवल एक साइट है। और उनकी साइट धीमी है, लंबे समय से भरी हुई है और विज्ञापन के साथ लटका हुआ है ... "
3. "मेरा डेटाबेस संरक्षण के तहत मेरा काम है!" कॉपीराइट एक अन्य अवधारणा है जो चर्चा के एक दर्जन पृष्ठों (सैकड़ों मौजूदा लोगों के अलावा) के लिए समर्पित हो सकती है, लेकिन इसका उल्लेख नहीं करना भी गलत है। हमारे पाठक ने अवधारणा जारी की: “किसी ने माल का एक डेटाबेस बनाया। जानकारी खोजने, डेटाबेस में डेटा डालने, इस जानकारी को व्यवस्थित करने पर संसाधनों का एक गुच्छा खर्च किया। एक प्रतियोगी के अनुरोध पर, आप इस आधार को पार्स कर रहे हैं और इसे उसी प्रतियोगी को पैसे के लिए दे रहे हैं। क्या आपको लगता है कि कोई नैतिक मुद्दे नहीं हैं? नियम कानून के बारे में, मुझे नहीं पता कि यह रूसी संघ में कैसा है, लेकिन यूक्रेन में एक डेटाबेस कॉपीराइट के अधीन हो सकता है। ”
   
   हालांकि, सेवा या उत्पाद का उपयोग करने के लिए जिम्मेदारी अभी भी निहित है जो इसे प्राप्त करता है / किस उद्देश्य के लिए: "... रूस में भी। हम डेटा संग्रह सेवाएं प्रदान करते हैं। और इस सेवा के लिए हम पैसे मांगते हैं। हम स्वयं डेटा नहीं बेचते हैं। "वैसे, मैं सभी ग्राहकों को चेतावनी देता हूं कि यदि वे उपयोग करते हैं तो वे कानून तोड़ सकते हैं, उदाहरण के लिए, विवरण।"
4. "औपचारिक रूप से, आप सही हैं, लेकिन मुझे आप पर एक लेख मिला है!" रूसी संघ का आपराधिक संहिता (अनुच्छेद 146) केवल उल्लंघन की सीमा का वर्णन करता है जो कॉपीराइट के उल्लंघन को "आपराधिक अपराध" के रूप में वर्गीकृत करने की अनुमति देता है। नागरिक संहिता में अधिकारों का स्वयं वर्णन किया गया है - और इस हद तक कि अधिनियम को "आपराधिक", नियमित रूप से पार्सिंग के रूप में वर्गीकृत किया गया है, जैसे कि "साइट नीचे जाएगी," सवाल उठता है, बिना किसी समस्या के। लेकिन पहलू महत्वपूर्ण हैं:
   
   
   • वहां, "बड़ा आकार" पार्स किए गए पृष्ठों की संख्या में नहीं है, लेकिन पैसे में। आप पैसे के रूप में कॉपीराइट के उल्लंघन ((!) के रूप में पार्सिंग (और इसकी नियमितता) को कैसे दर करते हैं? और यह आमतौर पर ऐसे मामलों में कैसे किया जाता है और फिल्म की प्रति के अनुसार सैकड़ों डॉलर का जुर्माना कहां से आ सकता है? "खो लाभ" की गणना इसी गुणांक के साथ की जाती है। - — «». , , ( ), «». : , -? , .
   • ( . : — 30 , — 1000, « », ). , ? , « ».

सारांश: "- कैसे पार्सिंग कॉपीराइट उल्लंघन के बराबर हो गया है? - कोई नहीं। उल्लंघन हमें आदेश देने से है, और फिर आपकी साइट पर सामग्री डंप करें। साइट डालना एक अन्य लेख है। ”

मैक्सिम कुलीगिन, xmldatafeed.com