التعريف
- بعد الزحف إلى الصفحة يحاول Google أن يفهم موضوعها: يحلل نصها ووسومها وسماتها المهمة، مثل
<title>وسماتalt، وصورها وفيديوهاتها. هذه المرحلة هي الفهرسة، ويسمّيها كثيرون الأرشفة. - في أثناء الفهرسة يجمع Google الصفحات المتشابهة ويختار منها الأكثر تمثيلاً لتكون الصفحة الأساسية (canonical)، وقد يحفظ ما جمعه في فهرس Google، وهو قاعدة بيانات ضخمة. والفهرسة غير مضمونة.
لماذا يهم
- الصفحة التي لا تُفهرس لا تظهر في نتائج البحث. ومن الأسباب التي يذكرها Google: ضعف جودة المحتوى، وقواعد
robotsفي وسمmetaتمنع الفهرسة، وتصميم للموقع يصعّب الفهرسة. - لا يلزم أن تُفهرس كل الروابط: قد يبقى رابط خارج الفهرس لسبب صحيح، كقاعدة مقصودة في robots.txt، أو
noindex، أو رابط مكرر، أو صفحة حذفتها ترد بالرمز404. - الصفحة المترجمة ليست نسخة مكررة من الأصل، أما نسخ البلدان بالنص العربي نفسه، كصفحتين للسعودية والإمارات، فمكررة. ويوصي Google فيها بنسخة مفضلة عبر
rel="canonical"، وبسمةhreflangليُعرض لكل باحث رابط بلده.
مثال
رسالتان في تقرير «فهرسة الصفحات» في Search Console تفرّقان بين الزحف والفهرسة:
- «تم اكتشاف الصفحة، ولكن لم تتم فهرستها حتى الآن»: وجد Google الرابط ولم يزحف إليه بعد، وفي العادة لأنه توقّع أن يثقل الزحف على الموقع فأجّله.
- «تم الزحف إلى الصفحة، ولم تتم فهرستها حتى الآن»: زحف إليها ولم يفهرسها، وقد يفهرسها لاحقاً أو لا يفعل، ولا حاجة إلى إرسالها من جديد.
أخطاء شائعة
- توقّع أن يُفهرس كل رابط: بعض الروابط مكرر أو بلا معلومات مفيدة.
- منع الصفحة في robots.txt لإخراجها من الفهرس: قد يُفهرس رابطها رغم ذلك، والطريقة الصحيحة
noindexمع ترك الصفحة مفتوحة للزحف. - العربية والإنجليزية جنباً إلى جنب في صفحة واحدة: يعرف Google لغة الصفحة من محتواها الظاهر، لا من سمة
langولا من الرابط، فاجعل لكل صفحة لغة واحدة.