الصورة: Pexelsبالنسبة إلى مواقع مجمّعات التجارة الإلكترونية ، من الضروري الاحتفاظ بالمعلومات الحديثة. بخلاف ذلك ، تختفي ميزتها الرئيسية - القدرة على رؤية البيانات الأكثر صلة في مكان واحد.
لحل هذه المشكلة ، تحتاج إلى استخدام تقنية تجريد الويب. معناها أنه يتم إنشاء برنامج خاص - يقوم الزاحف ، الذي يتخطى المواقع الضرورية من القائمة ، بتوزيع المعلومات منها وتحميلها إلى موقع المجمع.
المشكلة هي أنه في كثير من الأحيان لا يرغب مالكو المواقع التي يأخذ منها هؤلاء المجمعون البيانات في الوصول إليها بسهولة. يمكن فهم ذلك - إذا وصلت معلومات السعر في المتجر عبر الإنترنت إلى موقع المجمع وتبين أنها أعلى من تلك الخاصة بالمنافسين المقدمين هناك ، فسوف تفقد الأعمال العملاء.
طرق مكافحة القشط
لذلك ، غالبًا ما يعارض أصحاب هذه المواقع إلغاء البيانات - أي تنزيل بياناتهم. يمكنهم تحديد الطلبات التي ترسلها برامج تتبع الزاحف بواسطة عنوان IP. عادةً ما يستخدم مثل هذا البرنامج ما يسمى بخادم IP ، والذي يسهل حسابه وحظره.
بالإضافة إلى ذلك ، بدلاً من حظر الطلبات ، يتم استخدام طريقة أخرى غالبًا - يتم عرض برامج الروبوت التي تم اكتشافها على معلومات غير ذات صلة. على سبيل المثال ، يبالغون أو يقللون من سعر السلع أو يغيروا أوصافهم.
مثال على ذلك غالبا ما يستشهد به في هذا الصدد هو السفر جوا. في الواقع ، في كثير من الأحيان يمكن أن تعرض شركات الطيران ووكالات السفر نتائج مختلفة لنفس الرحلات ، اعتمادًا على عنوان IP. الحالة الحقيقية: البحث عن رحلة جوية من ميامي إلى لندن في نفس التاريخ من عنوان IP في أوروبا الشرقية وآسيا يؤدي إلى نتائج مختلفة.
في حالة عنوان IP في أوروبا الشرقية ، يبدو السعر كما يلي:
وبالنسبة لعنوان IP من آسيا مثل هذا:
كما ترون ، يختلف سعر الرحلة نفسها بشكل كبير - الفرق هو 76 دولارًا ، وهو في الحقيقة كثير. بالنسبة لموقع التجميع ، لا يوجد شيء أسوأ من ذلك - إذا تم تقديم معلومات غير صحيحة عليه ، فلن يستخدمه المستخدمون. بالإضافة إلى ذلك ، إذا كان لمنتج معين سعر واحد على المجمع ، وعندما يتغير إلى موقع البائع ، فإنه يتغير - وهذا يؤثر سلبًا أيضًا على سمعة المشروع.
الحل: استخدام الوكلاء المقيمين
يمكنك تجنب المشاكل عند تفريغ البيانات لاحتياجات التجميع الخاصة بهم باستخدام الوكلاء المقيمين. يتم توفير عناوين IP للخوادم بواسطة موفري الاستضافة. من السهل جدًا تحديد العنوان الخاص بمجموعة موفر معين - كل عنوان IP له رقم ASN يحتوي على هذه المعلومات.
هناك العديد من الخدمات لتحليل أرقام ASN. غالبًا ما تتكامل مع أنظمة مكافحة الروبوت التي تمنع الوصول إلى برامج الزحف أو تقوم بتزييف البيانات التي يتم إرجاعها استجابة لطلباتها.
تساعد عناوين IP المقيمة على الالتفاف على مثل هذه الأنظمة. هؤلاء مقدمي IP نعطيه لأصحاب المنازل ، مع علامات المقابلة في جميع قواعد البيانات ذات الصلة. هناك خدمات خاصة من الوكلاء المقيمين تسمح لك باستخدام عناوين المقيمين.
Infatica هو مجرد مثل هذه الخدمة.
يبدو أن طلبات الزواحف من مواقع التجميع التي ترسل من عناوين IP مقيمة تبدو وكأنها قادمة من مستخدمين عاديين من منطقة معينة. ولا أحد يمنع الزوار العاديين - في حالة المتاجر عبر الإنترنت ، هؤلاء العملاء المحتملين.
نتيجة لذلك ، فإن استخدام الوكلاء المدورون من Infatica يتيح لمواقع التجميع تلقي بيانات دقيقة مضمونة وتجنب العوائق والصعوبات في التحليل.
مقالات أخرى حول استخدام الوكلاء المقيمين للعمل: