كايل لاركن– الزحف هو الخطوة الأولى في رحلة أيّ صفحة إلى صفحة النتائج. يجب أن تكتشف محركات البحث صفحتك قبل تقييمها وتحديد مكان وضعها في النتائج.
والزحف على الويب هو عملية كثيفة الاستخدام للموارد. تستمد محركات البحث مثل غوغل من مئات المليارات من صفحات الويب ومقاطع الفيديو والصور والمنتجات والمستندات والكتب وما إلى ذلك، لتقديم نتائج الاستعلام.
لذلك، فإنهم يعطون الأولوية لجهود الزحف للحفاظ على الموارد، وتقليل العبء على مواقع الويب التي يزورونها. هناك حدٌّ لمقدار الوقت الذي يمكن أن يقضيَه الزاحفون عليك.
يُطلق على مقدار الوقت الذي يخصّصه غوغل للزحف إلى موقع بميزانية الزحف الخاصة بالموقع. أي عوائق فنية تعيق قدرة غوغل على الزحف إلى موقعك تسمى أخطاء الزحف.
من غير المحتمل أن تتأثر المواقع الأصغر. عندما تصل إلى أكثر من بضعة آلاف من عناوين URL، يصبح من الضروري مساعدة Googlebot في اكتشاف المحتوى، وتحديد أولوياته للزحف، ومتى ومقدار موارد الخادم التي يجب تخصيصها.
نظرًا لأن هذه هي نقطة البداية، فقد تتساءل: هل يمكن لمحرك البحث غوغل الزحف إلى موقع الويب الخاص بي أن يمثّل عامل ترتيب؟
الادعاء: الزحف على الأخطاء والزحف بالميزانية كعوامل ترتيب
تقول كايل، إن تقليل أخطاء الزحف وتحسين ميزانية الزحف، هما محوران رئيسيان في تحسين محركات البحث التقنية، ولسبب هو في البداية! يمكنك استثمار عشرات أو مئات الآلاف من الدولارات سنويًا لإنشاء محتوًى عالي الجودة، ثم النشر، وكل ما يمكنك فعله هو انتظار ظهور عملك الشاقّ في نتائج البحث.
تكمن المشكلة في أنه إذا لم يزحف غوغل صفحة بسبب خطأ أو ميزانية زحف محدودة، فلن تتمكّن الصفحة من ترتيب أي شيء على الإطلاق. ولكي تظهر صفحة في نتائج بحث غوغل، يجب أولاً زحفُها بواسطة Googlebot.
هذا هو السبب في أنّ بعض المسوّقين يعتبرون ميزانية الزحف عاملاً في الترتيب. دعونا نرَ ما إذا كان هناك أي دليل يدعم هذا الادعاء.
الدليل: أخطاء الزحف والزحف إلى الميزانية كعوامل ترتيب
أضافت الكاتبة، أنه يعدّ فهم كيفية انتقال الصفحة من موقع ويب إلى صفحة نتيجة محرك البحث (SERP)، أمرًا ضروريًا لتحديد ما إذا كانت ميزانية الزحف يمكن أن تكون عامل ترتيب.
تتضمن العملية ثلاث خطوات، هي: الزحف والفهرسة والترتيب. وتقع ميزانية الزحف وأخطاء الزحف ضمن “الزحف”؛ تتبع الروبوتات الروابط لاكتشاف الصفحات.
الفهرسة هي تحليل صفحة وتخزينها في كتالوج لسهولة استرجاعها. بعد زحف الصفحة وفهرستها، فهي مؤهلة للعرض في نتائج البحث.
يسرد الترتيب بشكل أساسي صفحةَ الويب الأكثر صلة في أعلى نتائج البحث، تليها الصفحات الأخرى، بناءً على مدى اعتقاد غوغل بأن الصفحة تجيب على الاستفسار.
تتضمن مرحلة الترتيب معظم التحليلات التي أجرتها خوارزميات غوغل. لكي تعتبر عامل ترتيب، يجب إعطاء وزن لشيء ما خلال مرحلة الترتيب.
في حين أنّ الزحف مطلوب للترتيب بمجرد استيفائه، فإن هذا الشرط الأساسي لا يتم ترجيحه في أثناء الترتيب.
فقط في حال لم يحلّ هذا المشكلة بالكامل بالنسبة لك:
يتناول غوغل ما إذا كان الزحف هو عامل تصنيف مباشر في قسم «أهم الأسئلة»، في مدونة مركز بحث غوغل.
تُطمئن وثائق غوغل القراء، إلى أنه على الرغم من أن الزحف ضروري لوجوده في نتائج البحث، إلا أنه ليس عامل ترتيب.
الحكم: أخطاء الزحف وميزانية الزحف ليست عوامل ترتيب
وأضحت كايل، أن غوغل يحدد التصنيفات بعدة عوامل. ومع ذلك، فإن أخطاء الزحف وميزانيات الزحف ليست واحدة منها. فَكّر في الزحف كنقطة دخول إلى نتائج بحث غوغل.
يجب أن تكون محركات البحث قادرةً على الزحف إلى موقع الويب الخاص بك لفهرسة صفحاتك. الفهرسة مطلوبة للترتيب. لكن زيادة ميزانية الزحف ليست مسؤولة عن وظائف أفضل في نتائج البحث.
