كيف يعمل محرك بحث جوجل؟ الزحف والفهرسة والترتيب بلغة بسيطة

تكتب في جوجل «أفضل طريقة لتعلم البرمجة للأطفال»، فتظهر أمامك خلال جزء من الثانية قائمة مرتبة بصفحات من مواقع مختلفة. لكن كيف عرف جوجل بوجود هذه الصفحات أصلًا؟ ولماذا ظهرت صفحة معينة في المركز الأول وأخرى في الصفحة الثالثة؟ فهم هذه العملية هو الخطوة الأولى في تعلم تحسين محركات البحث (SEO)، لأنك لا تستطيع تحسين شيء لا تفهم طريقة عمله. في هذا المقال نشرح المراحل الثلاث التي تمر بها أي صفحة قبل أن تظهر في نتائج البحث: الزحف والفهرسة والترتيب، وما الذي يمكن أن يتعطل في كل مرحلة، وكيف تتحقق من حالة صفحاتك بنفسك.

الصورة الكاملة في ثلاث مراحل

توضح جوجل في وثائقها الرسمية أن البحث يعمل على ثلاث مراحل رئيسية، ولا تمر كل الصفحات بكل المراحل. هذه نقطة مهمة: وجود صفحتك على الإنترنت لا يعني أن جوجل سيعرضها تلقائيًا.

المرحلة الأولى: الزحف (Crawling)

لا توجد قائمة مركزية بكل صفحات الإنترنت. لذلك تستخدم جوجل برامج آلية تسمى الزواحف، وأشهرها Googlebot، تتنقل بين الصفحات عبر الروابط كما يتنقل الإنسان، وتكتشف الصفحات الجديدة والمحدثة. هناك طرق رئيسية يكتشف بها جوجل صفحتك: رابط إليها من صفحة يعرفها بالفعل، سواء في موقعك أو في موقع آخر، أو خريطة الموقع (Sitemap)، وهي ملف يسرد صفحات موقعك المهمة، أو أن تطلب ذلك بنفسك عبر Search Console.

ما الذي يعيق الزحف؟

• ملف robots.txt: ملف في جذر الموقع يخبر الزواحف بالمسارات التي لا ينبغي زيارتها. سطر خاطئ فيه قد يمنع زحف موقع كامل.
• صفحات يتيمة: صفحة لا يشير إليها أي رابط داخلي يصعب اكتشافها.
• أخطاء الخادم: إذا كان الموقع بطيئًا جدًا أو يعيد أخطاء متكررة، قد تقلل الزواحف زياراتها.
• محتوى يحتاج إلى تسجيل دخول: الزاحف لا يسجل الدخول، فلن يرى ما خلف كلمة المرور.

المرحلة الثانية: الفهرسة (Indexing)

بعد الزحف، يحاول جوجل أن يفهم الصفحة: موضوعها، ونصها، وعناوينها، وصورها، ووصف الصور، والفيديوهات فيها. ويعرض الصفحة كما يعرضها المتصفح، بما في ذلك تنفيذ جافاسكريبت، ليرى المحتوى الحقيقي. ثم يقرر هل يحفظها في الفهرس، وهو قاعدة بيانات ضخمة جدًا تُبحث فيها النتائج.

ومن المهام المهمة في هذه المرحلة التعامل مع المحتوى المكرر. إذا وجد جوجل عدة صفحات متشابهة جدًا، يختار واحدة منها لتكون «الصفحة الأساسية» (Canonical)، ويعرضها في النتائج غالبًا بدل الأخريات. يمكنك مساعدته في هذا الاختيار بوسم canonical في الصفحة.

ما الذي يمنع الفهرسة؟

• وسم noindex: تعليمات في الصفحة تطلب صراحة عدم فهرستها. مفيد لصفحات مثل سلة المشتريات، وكارثي إذا وُضع بالخطأ على صفحة مهمة.
• محتوى ضعيف أو مكرر: جوجل لا يفهرس كل ما يزحف إليه؛ الصفحات قليلة القيمة قد تُستبعد.
• مشكلات تقنية في العرض: محتوى لا يظهر إلا بعد تفاعل المستخدم قد لا يُرى.

المرحلة الثالثة: العرض والترتيب (Serving and Ranking)

عندما يكتب شخص عبارة بحث، تبحث أنظمة جوجل في الفهرس عن الصفحات المطابقة، وترتبها بحسب ما تراه الأنفع لهذا الباحث تحديدًا. لا تنشر جوجل وصفة الترتيب الكاملة، لكنها تشرح في وثائقها العامة المجموعات الكبرى من العوامل:

لاحظ أن معظم هذه العوامل تتعلق بخدمة الباحث، لا بخداع محرك البحث. لهذا كانت محاولات التلاعب، مثل حشو الكلمات المفتاحية أو شراء الروابط، تفشل على المدى البعيد، وقد تعرض الموقع لعقوبات.

يلخص الفيديو التالي من جوجل هذه المراحل في خمس دقائق، باللغة الإنجليزية:

ماذا عن المواقع متعددة اللغات؟

إذا كان موقعك بالعربية والإنجليزية، كموقع أكاديمية بدر التعليمية، فهناك سؤال إضافي: كيف يعرف جوجل أي نسخة يعرض لكل باحث؟ القاعدة الأولى أن تكون لكل لغة صفحة مستقلة بعنوان URL خاص بها، لا صفحة واحدة يتغير نصها بزر. والقاعدة الثانية أن تربط النسخ ببعضها بوسوم hreflang، وهي إشارات في كود الصفحة تقول لجوجل: «هذه الصفحة العربية، وهذه ترجمتها الإنجليزية». بهذا يرى الباحث بالعربية النسخة العربية في النتائج، ويرى الباحث بالإنجليزية النسخة الإنجليزية، ولا تُعامل الترجمتان كمحتوى مكرر. وتذكر أن الترجمة الآلية الحرفية دون مراجعة تنتج غالبًا نصًا ضعيفًا لا يخدم القارئ، مهما كانت الإشارات التقنية صحيحة.

كيف تتحقق من حالة صفحاتك؟

أداة Google Search Console المجانية هي نافذتك الرسمية على علاقة موقعك بجوجل. بعد التحقق من ملكية الموقع تستطيع:

• استخدام أداة فحص عنوان URL لمعرفة هل الصفحة مفهرسة، ومتى زحف إليها جوجل آخر مرة، وهل هناك مشكلة تمنع فهرستها.
• مراجعة تقرير الفهرسة الذي يوضح عدد الصفحات المفهرسة وأسباب استبعاد غيرها.
• إرسال خريطة الموقع ليكتشف جوجل صفحاتك بسهولة.
• متابعة تقرير الأداء الذي يعرض عبارات البحث التي ظهرت فيها صفحاتك وعدد النقرات.

نشرح استخدام هذه التقارير بالتفصيل في مقال قياس نتائج التسويق الرقمي.

أخطاء شائعة لدى أصحاب المواقع الجديدة

• انتظار الظهور فورًا: الزحف والفهرسة قد يستغرقان من أيام إلى أسابيع لموقع جديد، وهذا طبيعي.
• منع الزحف بالخطأ بعد الإطلاق: كثير من المواقع تُطوَّر وهي مخفية عن محركات البحث، ثم يُنسى رفع هذا المنع عند الإطلاق.
• الاعتقاد بأن الدفع لجوجل يحسن الترتيب الطبيعي: الإعلانات المدفوعة منفصلة تمامًا عن النتائج الطبيعية.
• إهمال الروابط الداخلية: الروابط بين صفحاتك تساعد الزواحف على اكتشافها، والقراء على التنقل بينها.

قائمة فحص سريعة لموقعك

1. ابحث في جوجل عن site: متبوعة باسم نطاقك لترى تقديرًا تقريبيًا للصفحات المفهرسة.
2. افتح ملف robots.txt في موقعك وتأكد أنه لا يمنع الصفحات المهمة.
3. تأكد من وجود خريطة موقع وأرسلها في Search Console.
4. افحص أهم خمس صفحات بأداة فحص عنوان URL.
5. تأكد أن كل صفحة مهمة يصل إليها رابط داخلي واحد على الأقل.

بعد أن تفهم طريقة عمل محرك البحث، الخطوة التالية هي فهم ما هو السيو بأركانه المختلفة، ثم تعلم بحث الكلمات المفتاحية. وفي كورس التسويق الرقمي وتحسين محركات البحث في أكاديمية بدر التعليمية نطبق كل ذلك على مواقع حقيقية. ولمصادر إضافية زر المكتبة التعليمية، ولخطة تعلم مرتبة جرّب أداة اكتشف مسارك.