ما هي ميزانية الزحف [وكيفية تحسينها]؟

ميزانية الزحف هي واحدة من مصطلحات تحسين محركات البحث (SEO) التي ربما سمعت يتحدث عنها الأشخاص التسويقيون.

ومع ذلك ، هل تعرف ماذا يعني ذلك وماذا يدور كل هذا؟

لا داعي للقلق ، لسنا هنا لاختبارك. على العكس من ذلك ، نحن هنا لمساعدتك في فهم كل ما يتعلق بميزانية الزحف ، وسبب أهميتها ، وكيف يمكنك التحقق منها وتحسينها.

بعد كل شيء ، عليك أن تتعلم الزحف قبل أن تتمكن من المشي ، أليس كذلك؟

ما هي ميزانية الزحف؟

ميزانية الزحف هي عدد الصفحات التي يمكن لـ Google الزحف إليها على موقع ويب خلال إطار زمني محدد.

كما ترى ، في كل مرة تنشر فيها صفحة على موقع الويب الخاص بك ، تحتاج إلى انتظار Google لفهرستها وترتيبها ، ولكي تتمكن من القيام بذلك ، تحتاج الروبوتات إلى الزحف إليها أولاً.

يمكن أن تحدث هذه العملية بشكل أسرع أو أبطأ اعتمادًا على ظروف مثل حجم موقع الويب الخاص بك ، ومدى شيوع الموضوعات ، ومقدار حركة المرور إلى صفحتك ، وما إلى ذلك.

لكن كيف يعمل الزحف بالفعل؟

هيا نكتشف.

كيف تعمل الزواحف؟

منذ أكثر من 10 سنوات ، أدركت Google أن لديها موارد محدودة ويمكنها فقط العثور على نسبة محدودة من المحتوى الذي لا ينتهي عبر الإنترنت والذي يتم نشره باستمرار عبر الإنترنت.

بعد ذلك ، في عام 2017 ، نشرت Google مقالتها الرسمية "ما تعنيه ميزانية الزحف لبرنامج Googlebot" ، والتي تشرح فيها تعريفها للزحف والتفاصيل الأخرى ذات الصلة.

فيما يلي الحقائق الأساسية:

• يكون الزحف فعالاً ، إلا إذا كان موقع الويب الخاص بك يحتوي على أكثر من بضعة آلاف من عناوين URL
• تزيد الصفحات سريعة الاستجابة من حد الزحف
• يمكنك تقليل معدل الزحف إلى موقع الويب الخاص بك عبر Google Search Console
• غالبًا ما يتم الزحف إلى عناوين URL الشائعة
• يمكن أن يكون لوفرة عناوين URL منخفضة القيمة (محتوى مكرر ، وصفحات أخطاء بسيطة ، وما إلى ذلك) تأثير سلبي على الفهرسة والزحف
• الزحف ليس عامل ترتيب مباشر

بشكل أساسي ، من أجل ضمان أقصى قدر من إمكانية الزحف إلى موقع الويب الخاص بك ، تحتاج إلى أوقات تحميل سريعة ، وتجنب المحتوى المكرر ومنخفض الجودة ، وجعل صفحاتك شائعة.

ومع ذلك ، من المهم ملاحظة أن غالبية مالكي مواقع الويب لا يحتاجون إلى القلق الشديد بشأن ميزانية الزحف. يجب الانتباه إلى مواقع الويب الكبيرة التي تحتوي على آلاف الصفحات ، مثل متاجر التجارة الإلكترونية والمنشورات الرقمية والمدونات الشعبية.

لماذا تعتبر ميزانية الزحف مهمة؟

تعتبر ميزانية الزحف مهمة جدًا لجهود تحسين محركات البحث ، خاصةً عندما يكون لديك آلاف الصفحات وتنشر باستمرار الكثير من المقالات الجديدة على أساس يومي. ستريد الروبوتات الزحف إلى المحتوى الجديد الخاص بك ، لكنها ستعيد زيارة بقية موقع الويب الخاص بك في نفس الوقت.

إذا واجهوا العديد من النكسات و / أو المشكلات التي تربكهم ، فسيكونون عالقين في إهدار ميزانية الزحف على الصفحات القديمة ، بدلاً من استثمارها في المحتوى الجديد الذي تريدهم أن يقوموا بفهرسته. يمكن أن يؤدي هذا ، على الأرجح ، إلى حدوث تأخيرات وجعل عناوين URL الخاصة بك غير متاحة مؤقتًا (أو حتى بشكل دائم) في SERPs.

على سبيل المثال ، أنت تنشر أخبارًا أو معلومات مهمة للحصول على رؤية في أسرع وقت ممكن.

لا تريد الانتظار لمدة أسبوع حتى تتم فهرسة منشورك ، أليس كذلك؟

بعد كل شيء ، لا يمكنك الترتيب لـ SERP إذا لم يتم فهرسة صفحتك. ولنفترض أنك تكتب عن حدث عالمي وقع اليوم ، ولكن يتم الزحف إلى صفحتك في غضون خمسة أيام. في هذه المرحلة ، فات الأوان لتحقيق هدفك الأولي ، لأن الحدث لم يعد ملائمًا وجديدًا بعد الآن. ناهيك عن أن الكثير من المواقع الأخرى قد كتبت عنها ، وستتم فهرستها في الوقت المناسب.

ليس من غير المألوف أن تستغرق برامج الزحف ما يصل إلى أسبوع لفهرسة صفحتك ، ولكن لكي نكون صادقين ، يجب أن يستغرق الأمر وقتًا أقل من ذلك.

علاوة على ذلك ، ستستمر في هذه الأثناء في نشر صفحات جديدة تحتاج إلى الزحف إليها وفهرستها وإتاحتها لجمهورك المستهدف في الوقت المناسب أيضًا. وهذه وصفة لعنق الزجاجة في الفهرسة.

بشكل عام ، إذا وصلت غالبًا إلى حدود ميزانية الزحف الخاصة بك ، فإنك تخاطر بأن تنزلق بعض صفحاتك بين الشقوق وتفشل في الوصول إلى SERPs. نتيجة لذلك ، لن تستفيد هذه من حركة المرور العضوية ، وستكون رؤيتها أقل بكثير من بقية المحتوى الخاص بك.

وإذا كنت تتساءل عن كيفية التحقق من ميزانية الزحف الخاصة بك - فهذا سهل. ما عليك سوى الانتقال إلى Google Search Console والتحقق من الزحف → إحصائيات الزحف.

تحسين ميزانية الزحف

من المهم أن تتذكر أن ميزانية الزحف تعتمد على ثلاثة عوامل رئيسية: حجم موقع الويب ، وصحة موقع الويب ، وشعبية موقع الويب.

هذا يعني أنه لا داعي للقلق بشأن هدر ميزانية الزحف ، إذا:

• موقع الويب الخاص بك صغير إلى حد ما ، أي أقل من بضعة آلاف من الصفحات.
• موقع الويب الخاص بك خالٍ من أخطاء رمز الحالة ، وله تحديد أساسي مناسب.
• يحظى موقع الويب الخاص بك بشعبية ، مما يعني أنك قمت بتطوير وسائط التواصل الاجتماعي وقنوات أخرى لمشاركة المحتوى الخاص بك وتوليد حركة المرور.

تعني تغطية هذه المعايير أن Googlebot يجب أن يكون قادرًا على الزحف إلى موقع الويب الخاص بك بكفاءة.

إذا كنت تفتقر إلى أي من هذه العوامل الثلاثة ، فهناك خطر يتمثل في أنك قد تواجه مستويات مختلفة من مشكلات الزحف وتفقد رؤية البحث العضوي لبعض صفحاتك.

فيما يلي بعض أفضل ممارسات ميزانية الزحف التي يجب اتباعها:

تحسين سرعة موقع الويب الخاص بك

كما ذكرنا أعلاه ، يمكن أن تؤثر سرعة موقع الويب ووقت تحميل الصفحة على حد الزحف. يعني موقع الويب الصحي والسريع أن Googlebot قادر على الزحف إلى المزيد من صفحاتك وفي وقت أقل.

من ناحية أخرى ، يؤدي التحميل البطيء للصفحات إلى تقليل معدل الزحف ، وقد يؤدي ذلك في موقع ويب كبير إلى حدوث مشكلات عامة في الفهرسة.

باختصار ، تأكد من تحسين سرعة موقعك. لن يؤدي ذلك إلى تسهيل الأمر على الروبوتات فحسب ، بل سيؤدي إلى تحسين تجربة المستخدم.

تطبيق الربط الداخلي

أفضل سيناريو هو أن يكون لديك روابط خلفية تشير إلى كل صفحة على موقعك. هذه ليست فقط ممارسة جيدة لتحسين محركات البحث لجلب الزوار إلى موقعك وإظهار محركات البحث أن المحتوى الخاص بك مهم ، ولكنها أيضًا تجذب Googlebot.

ببساطة ، الروابط الخلفية هي الفتى الذهبي لكبار المسئولين الاقتصاديين.

ولكن ها هي الصفقة.

بصرف النظر عن الروابط الخلفية ، تحب Google الارتباط الداخلي أيضًا. يساعدها في اكتشاف جميع صفحاتك وفهم كيفية ارتباطها بشكل أفضل. وعلى الرغم من صعوبة الحصول على الروابط الخلفية ، إلا أن لديك سيطرة كاملة على الروابط الداخلية ويمكنك إضافة ما تريد (فقط لا تفرط في ذلك).

سيضمن تطبيق تقنية التحسين هذه أن يتم الزحف إلى المزيد من صفحاتك.

استخدم هندسة الويب المسطحة

الشعبية مهمة جدًا في نظر Google. هذا هو السبب في أنه سيكون من المفيد استخدام بنية موقع ويب مسطحة. تسمح البنية المسطحة لسلطة الارتباط بأن يكون لها نسب متساوية في جميع صفحاتك.

سيساعد الروبوتات على متابعة كيفية اتصال الروابط الموجودة على موقع الويب الخاص بك بسهولة أكبر ، بالإضافة إلى أنه يتيح لك تجميع الصفحات ذات الصلة بشكل أفضل واكتساب السلطة الموضعية.

من الناحية العملية ، هذا يعني أنه يمكن لكل من المستخدمين ومحركات البحث الوصول إلى أي صفحة معينة على موقع الويب الخاص بك في غضون أربع نقرات.

تجنب الصفحات اليتيمة والمحتوى المكرر

الصفحة اليتيمة هي الصفحة التي لا تحتوي على رابط خارجي أو داخلي واحد. هذا يجعل هذه الأنواع من الصفحات معزولة عن باقي المحتوى الخاص بك ، ومنطقياً ، يصعب على Googlebot اكتشافها.

يمكنك بسهولة تجنب الصفحات اليتيمة عن طريق إضافة رابط داخلي واحد على الأقل لكل مقال وصفحة لديك.

إدارة المحتوى المكرر

المحتوى المكرر يسبب العديد من المشاكل. يعد وجود عناوين URL متعددة بمعلمات متشابهة أمرًا مربكًا لبرامج تتبع الزحف. سيؤدي هذا إلى إضاعة وقت Googlebot ، حيث سيتعين عليه معرفة الصفحة الرئيسية وأي نسخة مكررة ، وسيؤدي ذلك إلى عملية زحف أبطأ.

بالنسبة إلى مواقع مثل منصات التجارة الإلكترونية ، حيث من الشائع وجود عدة عناوين URL متشابهة ، نظرًا لوجود العديد من المنتجات المماثلة مع اختلافات صغيرة ، مثل الحجم واللون ، تأكد من استخدام العلامات الأساسية ، والتي ستوجه Googlebot إلى الصفحات التي تريد تحديد أولوياتها.

عدم السماح بالزحف لبعض الصفحات

يحتوي كل موقع على صفحات مثل تسجيل الدخول ونماذج الاتصال وعربات التسوق وما إلى ذلك. هذه لا تحتاج إلى الزحف إليها ، وفوق ذلك ، لا يمكن الزحف إليها. ومع ذلك ، ستحاول Google ، لذلك من الجيد السماح للروبوتات بمعرفة أنه يجب عليهم تخطيها وحفظ الموارد.

لتنفيذ هذا الإجراء ، استخدم ملف robots.txt لمنع الزحف إلى الصفحات التي تريدها.

تحديث قديم وكتابة محتوى جديد

هل ذكرنا أن Google يحب المحتوى الحديث؟ نعم هو كذلك.

قد يتوقف محرك بحث Google عن الزحف إلى صفحتك ، نظرًا لعدم وجود شيء جديد هناك في المرات القليلة الماضية التي تم الزحف فيها إلى صفحتك.

تخيل أن Googlebot يزور موقعك مرة كل يومين وفي كل مرة يجد محتوى جديدًا لفهرسته. ثم ، فجأة ، لسبب ما ، تتوقف عن تحديث موقع الويب الخاص بك. ومع ذلك ، يواصل Googlebot زيارته بنفس التردد. بعد فترة ، يلاحظ الروبوت عدم وجود محتوى جديد للفهرسة ، وفي النهاية ، يجعل الزيارات أقل تكرارًا.

في السيناريو المعاكس ، حيث تبدأ في تقديم محتوى جديد في كثير من الأحيان ، يمكن أن يبدأ Googlebot في زيارة موقع الويب الخاص بك في كثير من الأحيان.

مصدر

بشكل عام ، عند تحديد الصفحات التي تحتاج إلى تحديث ، لاحظ مدى الصلة بالموضوع - يمكن أن يكون عمر المقالة عامين ولا يزال يحتوي على معلومات قابلة للتطبيق (لا يزال يتعين عليك تحديثها ، على الرغم من ذلك). أو قد تكون مادة عمرها شهر فقدت بالفعل نضارتها.

تقليل صفحات الخطأ

هذا واحد سهل الفهم.

يضيع Googlebot الوقت عندما يحاول الزحف إلى الصفحات التي تحتوي على رموز خطأ 5xx (خطأ في الخادم) ، ورموز خطأ 4xx (لا يمكن العثور على خطأ) ، ورموز خطأ 3xx (عمليات إعادة توجيه) ، وما إلى ذلك ، ونتيجة لذلك ، يؤدي هذا إلى تقليل حد معدل الزحف.

مصدر

في الأساس ، كل صفحة ينتج عنها رمز مختلف عن 200 هي مضيعة للوقت والزحف إلى الموارد. من الناحية العملية ، ليست هناك حاجة لتوجيه انتباه Google إلى الصفحات التي قمت بحذفها أو إعادة توجيهها. بدلاً من ذلك ، أعط الأولوية لإصلاح عناوين URL الحية الخاصة بك.

تحسين ميزانية الزحف باختصار

دعنا نلخص خطوات تحسين ميزانية الزحف من Google:

1. تسريع موقع الويب الخاص بك
2. ضع الروابط الداخلية في جميع الصفحات
3. تطبيق هندسة موقع مسطحة
4. تجنب الصفحات اليتيمة والمحتوى المكرر
5. منع الزحف على صفحات معينة
6. تحديث القديم وكتابة محتوى جديد
7. تقليل صفحات الخطأ

نصيحة إضافية

يمكنك التحقق من عدد المرات التي يتم فيها الزحف إلى موقع الويب الخاص بك عن طريق إجراء تحليل ملف السجل. بهذه الطريقة ، يمكنك تحديد ما إذا كان يتم الزحف إلى صفحات معينة أكثر من غيرها.

بالإضافة إلى ذلك ، يمكن أن يساعدك تحليل ملف السجل في فهم ما إذا كانت هناك مشكلات في مناطق معينة من موقع الويب.

بالإضافة إلى ذلك ، يمكن أن يساعدك تحليل ملف السجل في فهم ما إذا كانت هناك مشكلات في مناطق معينة من موقع الويب.

الحد الأدنى

تعد ميزانية الزحف ضرورية للرؤية الشاملة لمحرك البحث لموقعك على الويب. إذا لم يتمكن Googlebot من الزحف إلى صفحاتك وفهرستها ، فأنت غير موجود عمليًا على الإنترنت.

تأكد من تطبيق جميع تقنيات تحسين ميزانية الزحف التي ناقشناها في المقالة ، وسوف تجني المكافآت.

ستتمكن Google من العثور على المحتوى الخاص بك وفهرسته بشكل أسرع ، وفي النهاية ، سيكون موقع الويب الخاص بك في صدارة المنافسة التي تفشل أو تتجاهل تنفيذ التحسين.

1: 0 من أجلك! أحسنت!