فهم وحل مشكلة ” لم تتم فهرستها حتى الآن”

تركيز – إذا رأيت مشكلة “تم اكتشاف الصفحة – لم تتم فهرستها حتى الآن” في أدوات مشرفي محركات البحث غوغل او Google Search Console ، فهذا يعني أن غوغل على علم بعنوان URL ، ولكنه لم يقم بالزحف إليه وفهرسته حتى الآن.

هذا لا يعني بالضرورة أن الصفحة لن تتم معالجتها أبدًا. كما تقول وثائقهم، قد يعودون إليها لاحقًا دون أي جهد إضافي من جانبك.

لكن يمكن أن يمنع عوامل أخرى غوغل من الزحف وفهرسة الصفحة، بما في ذلك:

• مشكلات الخادم والمشكلات الفنية في الموقع التي تقيد أو يمنع قدرة غوغل على الزحف.
• المشكلات المتعلقة بالصفحة نفسها ، مثل الجودة.

يمكنك أيضًا استخدام أداة فحص عناوين API URL في أدوات مشرفي محركات البحث غوغل او  Google Search Console  لوضع عناوين URL في قائمة انتظار لحالتها coverageState (بالإضافة إلى نقاط البيانات المفيدة الأخرى) بشكل جماعي.

طلب الفهرسة عبر Google Search Console

هذا حل واضح وبالنسبة لغالبية الحالات، سيحل المشكلة. في بعض الأحيان، يكون غوغل ببساطة بطيئة في الزحف على عناوين URL الجديدة – يحدث ذلك. لكن في أحيان أخرى، تكون القضايا الأساسية هي الجاني.

عندما تطلب الفهرسة عبر Google Search Console، قد يحدث أحد شيئين:

• يصبح عنوان URL “تم اكتشاف الصفحة – لم تتم فهرستها حتى الآن”
• فهرسة مؤقتة

كلاهما من أعراض المشكلات الأساسية.

يحدث الثاني لأن طلب الفهرسة يعطي أحيانًا عنوان URL الخاص بك “دفعة حداثة” مؤقتة والتي يمكن أن تأخذ عنوان URL أعلى من عتبة الجودة المطلوبة ، وبالتالي تؤدي إلى فهرسة مؤقتة.

مشاكل جودة الصفحة

هذا هو المكان الذي يمكن أن تصبح فيه المفردات مربكة. لقد تم سؤالي ، “كيف يمكن لـ غوغل تحديد مشاكل جودة الصفحة إذا لم يتم الزحف إليها بعد؟”

هذا سؤال جيد، والإجابة هي أنه لا يمكنه ذلك.

يقوم غوغل بافتراض جودة الصفحة بناءً على صفحات أخرى على المجال. كما تستند تصنيفاتها إلى أنماط عنوان URL وهندسة مواقع الويب.

نتيجة لذلك ، يمكن إلغاء ترتيب أولويات نقل هذه الصفحات من “الوعي” إلى قائمة انتظار الزحف بناءً على نقص الجودة التي تم العثور عليها في الصفحات المماثلة.

من المحتمل أن الصفحات التي تحتوي على أنماط عناوين URL متشابهة أو تلك الموجودة في مناطق مماثلة من بنية الموقع لها عرض منخفض القيمة مقارنة بأجزاء أخرى من المحتوى تستهدف نفس أهداف المستخدم والكلمات الرئيسية.

تشمل الأسباب المحتملة ما يلي:

• عمق المحتوى الرئيسي.
• عرض تقديمي.
• مستوى المحتوى الداعم.
• تفرد المحتوى ووجهات النظر المقدمة.
• أو حتى المزيد من المشكلات المتعلقة بالتلاعب (على سبيل المثال ، المحتوى ذو جودة منخفضة ويتم إنشاؤه تلقائيًا أو نسجه أو تكرار المحتوى الذي تم إنشاؤه بالفعل).

يمكن أن يكون للعمل على تحسين جودة المحتوى داخل مجموعة الموقع والصفحات المحددة تأثير إيجابي على إعادة إشعال اهتمام غوغل بالزحف إلى المحتوى الخاص بك لغرض أكبر.

يمكنك أيضًا noindex الصفحات الأخرى على موقع الويب التي تقر بأنها ليست من أعلى مستويات الجودة لتحسين نسبة الصفحات ذات الجودة الجيدة إلى الصفحات ذات الجودة الرديئة على الموقع.

ميزانية الزحف والكفاءة

غالبًا ما تكون ميزانية الزحف آلية يساء فهمها في تحسين محرّكات البحث.  غالبية المواقع لا داعي للقلق بشأن هذا. في الواقع ، أعلن Gary Illyes من غوغل أنه ربما لا تحتاج 90٪ من مواقع الويب إلى التفكير في ميزانية الزحف. غالبًا ما يُنظر إليه على أنه مشكلة لمواقع الويب الخاصة بالمؤسسات.

من ناحية أخرى، يمكن أن تؤثر كفاءة الزحف على مواقع الويب من جميع الأحجام. بعد التغاضي عنه، يمكن أن يؤدي إلى مشكلات حول كيفية زحف غزغل إلى موقع الويب ومعالجته.

للتوضيح، إذا كان موقعك على الإنترنت:

• عناوين URL مكررة مع المعلمات.
• يحل مع وبدون خطوط مائلة لاحقة.
• متاح على HTTP و HTTPS.
• يقدم محتوى من نطاقات فرعية متعددة (على سبيل المثال ، https://website.com و https://www.website.com).

… ثم قد تواجه مشكلات ازدواجية تؤثر على افتراضات غوغل على أولوية الزحف بناءً على افتراضات الموقع الأوسع.

قد تقوم برفع ميزانية الزحف من غوغل باستخدام عناوين URL وطلبات غير ضرورية. نظرًا لأن بوت غوغل يزحف مواقع الويب في أجزاء، فقد يؤدي ذلك إلى عدم امتداد موارد غوغل بعيدًا بما يكفي لاكتشاف جميع عناوين URL المنشورة حديثًا بالسرعة التي تريدها.

تريد الزحف إلى موقع الويب الخاص بك بانتظام، والتأكد من ما يلي:

• يتم تصميم الصفحات على نطاق فرعي واحد (حسب الرغبة).
• يتم حل الصفحات إلى بروتوكول HTTP واحد.
• يتم تحويل عناوين URL التي تحتوي على معلمات إلى الجذر (حسب الرغبة).
• الروابط الداخلية لا تستخدم عمليات إعادة التوجيه دون داع.

إذا كان موقع الويب الخاص بك يستخدم معلمات ، مثل عوامل تصفية منتجات التجارة الإلكترونية ، فيمكنك كبح الزحف إلى مسارات URI هذه عن طريق عدم السماح لها في ملف robots.txt .

يمكن أن يكون الخادم الخاص بك مهمًا أيضًا في كيفية تخصيص غوغل للميزانية للزحف على موقع الويب الخاص بك.

إذا كان الخادم الخاص بك مثقلًا أكثر من اللازم ويستجيب ببطء شديد، فقد تظهر مشكلات الزحف. في هذه الحالة، لن يتمكن بوت غوغل من الوصول إلى الصفحة مما يؤدي إلى عدم زحف بعض المحتوى الخاص بك.

وبالتالي، سيحاول غوغل العودة لاحقًا لفهرسة موقع الويب، لكنها ستسبب بلا شك تأخيرًا في العملية برمتها.

الربط الداخلي

عندما يكون لديك موقع ويب، من المهم أن يكون لديك روابط داخلية من صفحة إلى أخرى. عادة ما يولي غوغل اهتمامًا أقل لعناوين URL التي ليس لها أي روابط داخلية أو كافية – وقد تستبعدها من فهرسها.

يمكنك التحقق من عدد الروابط الداخلية للصفحات من خلال الزواحف مثل Screaming Frog و Sitebulb. إن امتلاك هيكل موقع ويب منظم ومنطقي مع روابط داخلية هو أفضل طريقة للذهاب عندما يتعلق الأمر بتحسين موقع الويب الخاص بك.

ولكن إذا كنت تواجه مشكلة في هذا، فإن إحدى طرق التأكد من توصيل جميع صفحاتك الداخلية هي «اختراق» عمق الزحف باستخدام خرائط مواقع HTML.

هذه مصممة للمستخدمين وليس الآلات. على الرغم من أنه قد يُنظر إليها على أنها آثار الآن، إلا أنها لا تزال مفيدة. بالإضافة إلى ذلك، إذا كان موقع الويب الخاص بك يحتوي على العديد من عناوين URL، فمن الحكمة تقسيمها بين صفحات متعددة. أنت لا تريدهم جميعًا مرتبطين من صفحة واحدة.

تحتاج الروابط الداخلية أيضًا إلى استخدام علامة <a> للارتباطات الداخلية بدلاً من الاعتماد على وظائف جافا سكريبت مثل onClick().

إذا كنت تستخدم إطار عمل Jamstack أو جافا سكريبت ، فقم بالتحقيق في كيفية تعامله أو أي مكتبات ذات صلة مع الروابط الداخلية. يجب تقديمها على أنها < a > علامات.