ما هو Bot Traffic؟ كيفية منع روبوتات المرور من التسبب في الخراب

حركة مرور الروبوت هي أي حركة مرور على الإنترنت تأتي من الروبوتات الآلية. يمكن لهذه الروبوتات أداء المهام بشكل أسرع من أي إنسان ، مما يجعلها فعالة وشائعة للغاية.

مع الكثير من سوء الفهم بشأن حركة مرور الروبوتات ، فإننا نلقي نظرة على الروبوتات المختلفة المعنية وما يعنيه ذلك لموقعك على الويب.

في عالم يتفاعل فيه مليارات المستخدمين مع بعضهم البعض عبر الإنترنت كل يوم ، يمكن أن يبدو الإنترنت مكانًا محمومًا. مع إعجاب المستخدمين بالصور ورسائل إعادة التغريد والتعليقات الإيجابية ، فإن مقدار حركة مرور الويب اليومية على الإنترنت في أعلى مستوياته على الإطلاق.

ولكن ما عدد هؤلاء الزوار الحقيقيين في الواقع؟

مع إطلاق المزيد والمزيد من برامج الروبوت على الإنترنت كل يوم ، هل يعد هذا أمرًا جيدًا لأصحاب مواقع الويب والمستخدمين ، أم مجرد مصدر إزعاج آخر؟

لفهم ما هي حركة مرور الروبوتات بشكل كامل ، يجب علينا أولاً استكشاف الأنواع المختلفة من الروبوتات الآلية الموجودة وماذا تفعل.

ما هو Bot Traffic؟

يمكن تعريف حركة مرور الروبوت على أنها أي حركة مرور عبر الإنترنت لم يتم إنشاؤها بواسطة إنسان . هذا يعني عادةً أن حركة المرور تأتي من نوع من البرامج النصية الآلية أو برامج الكمبيوتر التي تم إنشاؤها لتوفير وقت المستخدم للقيام بجميع المهام يدويًا. على الرغم من أن هذه الروبوتات تحاول تقليد السلوك البشري ، إلا أنها بالتأكيد ليست بشرًا.

يمكن لهذه الروبوتات الآلية القيام بأشياء بسيطة مثل النقر فوق الروابط وتنزيل الصور ، أو المهام المعقدة مثل كشط النماذج أو ملؤها. مهما كان ما تم صنعهم من أجله ، فإنهم عادة ما يفعلون ذلك على نطاق واسع ويعملون بدون توقف تقريبًا. إذا سبق لك أن نشرت صورة على وسائل التواصل الاجتماعي مثل Instagram أو Facebook وتلقيت مئات الإعجابات في ثوانٍ ، فمن المرجح أنهم روبوتات.

مع تقدير أن أكثر من 50٪ من الإنترنت عبارة عن حركة مرور روبوتات ، فمن الواضح أنه يمكن العثور على الروبوتات في كل مكان تقريبًا وفي كل موقع ويب تقريبًا.

لإعطائك فكرة عن الأنواع المختلفة من الروبوتات الموجودة هناك ، إليك تحليل سريع للروبوتات الجيدة وما تفعله ، بالإضافة إلى الروبوتات السيئة.

حركة بوت جيدة

على الرغم من أن حركة مرور الروبوت الآلية تحصل على سمعة سلبية من مشرفي المواقع ، إلا أن هناك في الواقع مجموعة من برامج الروبوت الشرعية التي تحاول المساعدة فقط.

محركات البحث

يجب أن تكون روبوتات محرك البحث هي النوع الأول والأكثر وضوحًا من حركة مرور الروبوتات الجيدة. تزحف روبوتات الإنترنت هذه بقدر الإمكان على الويب وتساعد مالكي مواقع الويب في إدراج مواقع الويب الخاصة بهم في محركات البحث مثل بحث Google و Yahoo و Bing. قد تكون طلباتهم تلقائية ويتم سردها كحركة مرور روبوت ، لكن هذه الروبوتات هي بالتأكيد روبوتات جيدة.

مراقبة الروبوتات

إذا كنت تمتلك موقعًا على الويب ، فإن التأكد من أن موقعك سليم ومتصل بالإنترنت دائمًا ما يكون أولوية للعديد من المالكين. لمساعدة المستخدمين على ضمان إمكانية الوصول إلى موقعهم دائمًا ، هناك مجموعة من برامج تتبع مواقع الويب التي ستعمل تلقائيًا على اختبار اتصال موقعك للتأكد من أنه لا يزال متصلاً بالإنترنت. إذا تعطل أي شيء ، أو توقف موقع الويب الخاص بك عن الاتصال بالإنترنت ، فسيتم إخطارك على الفور وستكون قادرًا على فعل شيء حيال ذلك.

الزواحف SEO

قد تكون محاولة جعل موقعك في المرتبة الأولى على محركات البحث أمرًا صعبًا للغاية ، خاصة عندما لا يكون لديك الكثير من المعلومات. لحسن الحظ ، هناك مجموعة من البرامج التي يمكن أن تساعد في تحسين جهود مُحسّنات محرّكات البحث عن طريق الزحف إلى موقعك ومنافسيك لمعرفة ما ترتيبه ومدى نجاحه. يمكن لمشرفي المواقع بعد ذلك استخدام هذه البيانات لتحسين رؤية البحث وتحسين حركة مرور الويب العضوية.

حقوق الطبع والنشر روبوتات

قد يكون التأكد من عدم قيام أي شخص بسرقة صورك واستخدامها على أنها صور خاصة به مهمة صعبة. مع وجود العديد من مواقع الويب التي يجب التحقق منها باستمرار ، فإن الحل المعقول الوحيد هو أن يكون لديك روبوت آلي يقوم بذلك. تزحف روبوتات الويب هذه إلى مسح الويب بحثًا عن صور معينة للتأكد من عدم استخدام أي شخص بشكل غير قانوني لأي محتوى محمي بحقوق الطبع والنشر دون إذن.

المرور السيئ بوت

على عكس الروبوتات الجيدة التي ذكرناها للتو ، فإن الروبوتات السيئة تقوم بأشياء سيئة حقًا على موقع الويب الخاص بك ويمكن أن تسبب الكثير من الضرر إذا تُركت للتجول مجانًا. يمكن أن يكون هذا أي نوع من هجمات الروبوت من إرسال حركة مرور وهمية وحركة مرور بريد عشوائي أو شيء أكثر إزعاجًا مثل الاحتيال في الإعلانات.

كاشطات الويب

كاشطات الويب هي روبوتات الإنترنت المزعجة التي تتخلص من مواقع الويب التي تبحث عن معلومات قيمة مثل عنوان البريد الإلكتروني وتفاصيل الاتصال. في حالات أخرى ، سوف يسرقون المحتوى والصور من مواقع الويب ويستخدمونها على مواقعهم الخاصة أو حسابات وسائل التواصل الاجتماعي دون إذن. إنهم لا يفيدون أي شخص باستثناء الشخص الذي يستخدمه لكشط البيانات.

روبوتات البريد العشوائي

إذا تلقيت يومًا ما بريدًا إلكترونيًا غريبًا أو تعليقًا على مدونة من شخص ما ، فمن المحتمل أن يكون روبوت البريد العشوائي قد تركه. تحب هذه الروبوتات ترك الرسائل المُنشأة (التي لا معنى لها غالبًا) على مدونة موقع الويب. يقومون أيضًا بملء نماذج الاتصال على مواقع الويب ومالكي البريد العشوائي برسائل ترويجية.

شبكات DDoS

يجب أن يكون برنامج DDoS من أقدم وأخطر الروبوتات السيئة. تُعرف هذه الروبوتات ، المعروفة باسم الرفض الموزع لروبوتات الخدمة ، غالبًا على أجهزة كمبيوتر الضحايا المطمئنة وتستخدم لاستهداف موقع ويب أو خادم معين بهدف جعلهم في وضع عدم الاتصال.

المعروف باسم هجوم DDoS ، كان هناك الكثير من التقارير في الماضي عن حدوث بعض الأضرار المالية الجسيمة للمواقع التي انتهى بها الأمر إلى عدم الاتصال بالإنترنت لعدة أيام.

ماسحات الضعف

قد تبدو هذه الروبوتات مثل روبوتات جيدة من سجلات خادم موقع الويب ، ولكن للأسف ليس هذا هو الحال. هناك مجموعة من الروبوتات الخبيثة التي ستقوم بمسح ملايين المواقع بحثًا عن نقاط الضعف وإبلاغ منشئها بها. على عكس الروبوتات الأصلية التي من شأنها إبلاغ مالك موقع الويب ، فإن هذه الروبوتات الضارة مصممة خصيصًا لإبلاغ شخص واحد على الأرجح سيبيع المعلومات أو يستخدمها بنفسه لاختراق مواقع الويب.

انقر فوق Fraud Bots

غير معروف للكثيرين ، هناك الكثير من الروبوتات المعقدة التي تنتج قدرًا هائلاً من حركة مرور الروبوتات الضارة التي تستهدف على وجه التحديد الإعلانات المدفوعة. على عكس الروبوتات التي تنتج حركة مرور غير مرغوب فيها على موقع الويب ، تشارك هذه الروبوتات في شيء يُعرف باسم الاحتيال في الإعلانات.

مسؤول عن النقر الاحتيالي على الإعلانات المدفوعة ، هذه الزيارات غير البشرية تكلف المعلنين مليارات كل عام وغالبًا ما يتم إخفاءها على أنها زيارات مشروعة. بدون برنامج جيد لاكتشاف الروبوتات ، يمكن أن يكلف نشاط الروبوت هذا المعلنين نسبة كبيرة من ميزانيتهم ​​الإعلانية.

كيف يمكن أن تكون روبوتات المرور ضارة لمواقع الويب؟

الآن أنت تعرف أنواعًا مختلفة من الروبوتات الجيدة والخبيثة الموجودة هناك ، كيف يمكن أن تكون حركة مرور bot ضارة لموقعك؟

الشيء المهم الذي يجب فهمه حول برامج الروبوت هو أن معظم النصوص والبرامج مصممة للقيام بعمل واحد عدة مرات. من الواضح أن منشئ الروبوت يريد إنجاز المهمة بأسرع ما يمكن ، ولكن هذا يمكن أن يثير العديد من المشاكل لموقعك.

تكمن المشكلة الأكبر في أنه إذا كان الروبوت يطلب باستمرار معلومات من موقعك ، فقد يؤدي ذلك إلى تباطؤ عام. هذا يعني أن الموقع سيكون بطيئًا بالنسبة لجميع الأشخاص الذين يصلون إليه ، مما قد يتسبب في حدوث مشكلات كبيرة ، على سبيل المثال ، إذا كنت متجرًا عبر الإنترنت.

يمكن أن تؤدي طلبات الكشط المتسقة أيضًا إلى تحريف بيانات مؤشرات الأداء الرئيسية الهامة وبيانات Google Analytics مثل معدل الارتداد.

في الحالات القصوى ، يمكن أن يؤدي عدد كبير جدًا من زيارات الروبوت إلى قطع موقع الويب بالكامل في وضع عدم الاتصال ، وهو أمر من الواضح أنه ليس جيدًا. لكن لحسن الحظ ، هذا فقط في الظروف القصوى ، في معظم الأحيان ، تكون تأثيرات حركة مرور الروبوتات على موقع الويب الخاص بك دقيقة للغاية.

عادةً ما يؤدي وجود الكثير من زيارات الروبوت على موقع الويب الخاص بك إلى أشياء مثل:

• المزيد من مشاهدات الصفحة
• استخدام عرض النطاق الترددي العالي
• تحليلات جوجل غير صحيحة
• جودة بيانات التسويق المنحرفة
• انخفاض في التحويلات
• رسائل البريد الإلكتروني غير المرغوب فيه
• أوقات تحميل أطول
• ارتفاع تكاليف الخادم
• زيادة معدل الارتداد
• زيادة الضغط على مراكز البيانات

كيفية اكتشاف حركة مرور الروبوت

إذا كنت تريد التحقق لمعرفة ما إذا كان موقع الويب الخاص بك يتأثر بحركة مرور الروبوت ، فإن أفضل مكان للبدء هو Google Analytics.

في Google Analytics ، ستتمكن من رؤية جميع مقاييس الموقع الأساسية ، مثل متوسط ​​الوقت على الصفحة ، ومعدل الارتداد ، وعدد مرات عرض الصفحة ، وبيانات التحليلات الأخرى. باستخدام هذه المعلومات ، يمكنك بسرعة تحديد ما إذا كانت بيانات تحليلات موقعك قد تم انحرافها بواسطة حركة مرور الروبوت وإلى أي مدى.

نظرًا لأنه لا يمكنك رؤية أي عناوين IP للمستخدمين في Google Analytics ، فسيتعين عليك مراجعة هذه المقاييس لمعرفة ما إذا كانت منطقية. يعد مقياس الوقت المنخفض جدًا في الموقع مؤشرًا واضحًا على أن معظم زوار موقعك يمكن أن يكونوا روبوتات. يستغرق روبوت الإنترنت بضع ثوانٍ فقط للزحف إلى صفحة ويب قبل مغادرتها والانتقال إلى هدفها التالي.

مكان آخر للتحقق في Google Analytics هو قسم الإحالات للتحقق من أنك لا تتلقى أي إحالة غير مرغوب فيها. تستهدف العديد من الشركات مواقع أخرى باستخدام برنامج روبوت مخصص يقوم بإرسال بريد عشوائي إلى عنوان URL لموقع الويب الخاص بهم.

عندما يتحقق مشرف الموقع من زيارات الإحالة الخاصة به في Google Analytics ، سيرى اسم موقع الويب ويميل إلى الزيارة. على الرغم من أن هذا يبدو فجًا ، إلا أنه يمكن أن يساعد في جذب عدد كبير جدًا من الزوار للموقع (بدافع الفضول بشكل أساسي!). قد لا يبدو الأمر وكأنهم يضرون بموقعك على الويب ، لكنهم في الواقع يفسدون جميع مقاييسك ، ويهدرون عرض النطاق الترددي الخاص بك ، ويسد خادمك بشكل عام.

كيفية إيقاف حركة مرور الروبوت

من الممكن تمامًا تصفية حركة مرور الروبوتات السيئة ومنع الروبوتات الآلية من إلحاق الضرر بموقع الويب الخاص بك ، ولكن الحل سيعتمد على نوع مصدر حركة المرور الذي يؤثر على موقعك. تذكر ، ليست كل حركة مرور الروبوت سيئة ، وحظر برامج الروبوت مثل برامج زحف محركات البحث ليست فكرة جيدة حقًا!

إذا كان موقع الويب الخاص بك عرضة للخدش بواسطة الروبوتات ، والماسحات الضوئية للثغرات الأمنية ، وروبوتات المرور الآلية ، فمن المحتمل أنك ستحتاج إلى بعض تصفية الروبوتات في شكل جدار حماية أو كابتشا. أفضل طريقة للقيام بذلك هي تثبيت خدمة تصفية روبوت مجانية على موقع الويب الخاص بك تسمى CloudFlare.

بصرف النظر عن كونها شبكة توصيل المحتوى (CDN) ، تعمل CloudFlare كجدار حماية للتطبيق بين موقع الويب والمستخدم ، مما يعني أنها ستسمح فقط للمستخدمين الشرعيين بالوصول إلى موقع الويب الخاص بك. لن يتمكن أي مستخدم مشبوه من تجاوزه ولن يتمكن من الوصول إلى موقعك. هذا يعني أنهم لن يضيعوا نطاقك الترددي أو يفسدوا تحليلاتك أو يُسرق المحتوى الخاص بك.

هناك طريقة أخرى مفيدة لحظر برامج الروبوت وهي استخدام ملف robots txt الخاص بموقعك عن طريق ملئه بوكلاء المستخدم أو الاسم الفعلي للروبوتات المعروفة. يمكنك معرفة المزيد حول حظر الروبوتات في ملف robots txt في هذا الدليل المفيد. بالطبع ، هذا لا يعمل إلا إذا كان الروبوت يحترم ملف robots.txt ، وهو ما تفعله معظم برامج الروبوت الأصلية. إذا كنت تحاول التخلص من روبوت سيئ مزعج ، فإن استخدام خيار CloudFlare المذكور أعلاه هو الأفضل.

ومع ذلك ، إذا كنت تبحث عن حماية موقع الويب الخاص بك من أشكال الروبوتات الأخرى مثل النقرات الاحتيالية والمتكررة على إعلاناتك ، فستحتاج إلى شيء آخر.

حماية إعلاناتك من حركة المرور السيئ بوت

يخضع أي شخص يقوم بتشغيل إعلانات الدفع لكل نقرة على Google لحركة مرور الروبوت. مع وجود العديد من برامج الزحف التي تقوم باستمرار بإلغاء Google ونتائجها ، فإن الأمر مجرد مسألة وقت قبل أن تنقر هذه الروبوتات على إعلاناتك وتدمر بيانات تحليلاتك وميزانيتك.

PPC Protect هي أداة آلية للكشف عن الاحتيال في الإعلانات والتي ستحدد أي نقرة احتيال على إعلانات الدفع لكل نقرة في الوقت الفعلي.

من خلال جمع الكثير من البيانات من كل نقرة ، سيكون البرنامج قادرًا على اكتشاف متى يكون عنوان IP مشبوهًا ويمنع هذا المستخدم بعينه من رؤية إعلاناتك في المستقبل.

يساعد هذا في مكافحة حركة مرور الروبوت من أدوات تحسين محركات البحث (SEO) التي تزحف إلى Google ومحركات البحث الأخرى التي تبحث عن إعلانات PPC. مع وجود الكثير من هذه الأدوات ، ستندهش من عدد المرات التي يزحفون فيها إلى نتائج البحث بحثًا عن إعلانات ومعلومات أخرى.

لحماية إعلاناتك من أمثال حركة مرور الروبوتات غير المرغوب فيها والكاشطات ، انقر أدناه للتسجيل للحصول على نسخة تجريبية مجانية من خدمتنا لمدة 14 يومًا.