يمكن النظر إلى محركات البحث على أنها أدوات أو أجهزة استجابة تماماً كأجهزة الاستجابة التي يتم وصلها بالهاتف. وجدت هذه المحركات لاكتشاف وفهم وتنظيم محتوى الإنترنت بغرض تقديم النتائج المثلى والأقرب لطلبات الباحثين.
لكي يظهر أي موقع من ضمن نتائج البحث، يجب أن يكون محتوى هذا الموقع مرئي أو معروف بالنسبة لمحرك البحث أولاً. إن هذا الأمر هو الأمر الأهم في معركة السيو SEO، حيث أن كل طرق السيو المتبعة وقواعدها التي يطبقها كتاب المحتوى، تصبح عديمة الفائدة إذا لم يتمكن محرك البحث من إيجاد الموقع من الأساس، وعندها لن يظهر الموقع في صفحة نتائج البحث أو ما يعرف اختصاراً بـ SERP.
كيف تعمل محركات البحث؟
تعمل محركات البحث من خلال ثلاث طرق رئيسية:
- الزحف Crawling: تجوب الزواحف (برمجيات خاصة) الإنترنت بحثاً عن المحتوى، وتقوم باستكشاف الأجزاء البرمجية والمحتوى لكل عنوان موقع URL تجده.
- الفهرسة: وهي عملية فهرسة وتنظيم المحتوى الذي تم إيجاده خلال عملية الزحف. حالما تصبح صفحة الويب في الفهرس، تصبح في طريقها نحو الظهور كواحدة من نتائج البحث التي تستهدف نفس المحتوى.
- التصنيف: وهي عملية تقديم أفضل أجزاء من المحتوى تناسب المعلومات التي يتم البحث عنها، بمعنى آخر، القيام بترتيب النتائج من الأكثر ملائمة إلى الأقل ملائمة.
اطلع على خدمة أرشفة المواقع في موقع marhbaa.com
1- ما هي عملية الزحف Crawling التي تقوم بها محركات البحث؟
إن عملية الزحف ما هي إلا عملية استكشاف تقوم بها محركات البحث تتضمن إرسال مجموعة من الروبوتات البرمجية (يطلق عليها أيضاً بالزواحف أو العناكب) لإيجاد محتوى جديد أو تحديث لمحتوى موجود. يختلف المحتوى من موقع لآخر، إذ قد يكون صفحة ويب أو صورة أو فيديو أو ملف نصي، إلخ. لكن بغض النظر عن صيغة وطبيعة هذه الأجزاء من المحتوى، فإن المحتوى يتم استكشافه من خلال الروابط Links.
محركات البحث
روبوتات جوجل
لنأخذ جوجل كمثال، تبدأ روبوتات جوجل البحث من خلال البدء بإحضار بعض صفحات الويب، ومن ثم تكمل مسارها من خلال اتباع الروابط الموجودة في هذه الصفحات للوصول إلى عناوين URLs جديدة. تعمل هذه الزواحف من خلال التنقل عبر هذه الروابط لإيجاد محتوى جديد وإضافته إلى فهرسهم الذي يسمى Caffeine، والذي هو عبارة عن قاعدة معطيات عملاقة من عناوين المواقع المكتشفة URLs، ليتم بعد ذلك عرضها ضمن نتائج البحث في حال تطابق محتوى هذه العناوين مع ما يبحث عنه مستخدم محرك البحث.
2- ما هو فهرس محرك البحث؟
تقوم محركات البحث بمعالجة المعطيات التي تجدها وتخزنها في فهرس index، والذي هو عبارة عن قاعدة معطيات ضخمة يضم كل المحتوى الذي تم استكشافه ويصلح ليقدم كنتائج مفيدة لعمليات البحث التي يقوم بها الباحثون.
3- ما هي عملية التصنيف التي تقوم بها محركات البحث؟
عندما يقوم أحد ما بالبحث عن كلمات معينة باستخدام محرك البحث، يبحث هذا المحرك في فهرسه عن أكثر النتائج توافقاً مع المحتوى المطلوب، ويرتب هذه المحتوى بالشكل الذي يمكن أن يكون الأفضل بالنسبة للطلب المقدم. عملية الترتيب هذه تسمى بالتصنيف Ranking. يمكننا القول بأنه كلما زاد مستوى التصنيف في موقع الويب، كلما اعتبره محرك البحث أكثر توافقاً مع نتائج البحث، وبالتالي زادت إمكانية ظهور هذا الموقع في نتائج البحث الأولى.
من الممكن منع زواحف محرك البحث من أرشفة أو تصنيف بعض الأجزاء أو حتى كل الموقع الإلكتروني، أو حتى من الممكن توجيه محرك البحث لتجنب تخزين بعض الأجزاء من المحتوى في فهرسه. بالرغم من وجود بعض الأسباب التي تدعو أصحاب المواقع من إخفاء بعض الأجزاء من المحتوى، لكن إذا أردت أن يجدك الآخرون وأن يظهر موقعك في نتائج البحث، فعليك أن تحرص بأن يكون الموقع مرئياً لهذه الزواحف ويمكن تصنيفه بسهولة، وإلا سيكون موقعاً غير خفي بالمعنى الحرفي.
الزواحف: هل يمكن لمحركات البحث إيجاد صفحاتك؟
كما أسلفنا الذكر، جعل الموقع مرئي للزواحف وقابل للتصنيف هو الأساس نحو ظهور هذه الموقع في صفحات نتائج البحث SERPs. إذا كان لديك موقع إلكتروني، فمن المجدي البدء بالتأكد من عدد الصفحات التي تم فهرستها. ستظهر هذه العملية فيما إذا كان جوجل قد مرر زواحفه على كل صفحات موقعك وإذا كان قد وجدها، وسيظهر أيضاً إذا كان قد تجنب بعض الصفحات التي فعلاً لا تريد تصنيفها.
معامل البحث المتقدم
واحدة من طرق التأكد من فهرسة صفحاتك هي استخدام معامل البحث المتقدم advanced search operator site:yourdomain.com. إذهب إلى صفحة جوجل Google.com، واكتب النطاق الخاص بك على الشكل التالي “site:yourdomain.com” في مربع البحث. سترجع عملية البحث هذه النتائج الموجودة في فهرس جوجل عن الموقع المطلوب والمذكور في معامل البحث.
إن الرقم الذي يظهره جوجل غير دقيق تماماً، لكنه سيعطي فكرة جيدة عن الصفحات التي فعلاً تم أرشفتها من موقعك الإلكتروني وكيف يظهرون الآن ضمن نتائج البحث.
لوحة بحث جوجل Google Search Console
للحصول على نتائج أكثر دقة، راقب واستخدم تقرير تغطية الفهرسة في لوحة بحث جوجل Google Search Console. يمكنك التسجيل بشكل مجاني في لوحة بحث جوجل من خلال إنشاء حساب مجاني هناك. باستخدام هذه الأداة المهمة، يمكنك وضع خرائط مواقع لموقعك ومراقبة عدد الصفحات التي تمت إضافتها بالفعل إلى فهرس جوجل، بالإضافة إلى أشياء أخرى.
لماذا لا يظهر موقعك في عمليات البحث
إذا لم يظهر موقعك في أي من عمليات البحث، فقد يعود ذلك لعدد من الأسباب المحتملة:
- قد يكون موقعك لازال جديداً ولم تتم أرشفته بعد.
- قد لا يحوي موقعك روابط خارجية لمواقع أخرى.
- هناك احتمال أن التنقل Navigation في موقعك صعب قليلاً، ويتعذر على الروبوت الزحف إليه بشكل فعال.
- يحتوي موقعك على بعض التعليمات البرمجية الأساسية التي تسمى توجيهات الزاحف التي تحظر محركات البحث.
- هنالك احتمال أن جوجل قد حظر موقعك على الويب بسبب استخدام بعض الأساليب غير المرغوب فيها Spamming.
اطلع على خدمة أرشفة المواقع في موقعنا
أخطاء التنقل Navigation الشائعة التي يمكن أن تمنع برامج الزحف من رؤية موقعك بالكامل
- أي نوع من التنقل ذو عناصر قائمة ليست في HTML، مثل التنقلات التي تدعم JavaScript. بالرغم من أن قوة جوجل قد تحسنت كثيراً في الزحف إلى أكواد جافا سكريبت Java Script وفهمها، لكنها لا تزال عملية غير مثالية. الطريقة الأكثر ضماناً لضمان العثور على شيء ما وفهمه وفهرسته بواسطة جوجل هي وضعه في HTML.
- قد يبدو التخصيص (وهو عرض محتوى فريد لنوع معين من الزائرين بخلاف ما يظهر لزائرين آخرين) وكأنه إخفاء الهوية عن زاحف محرك البحث.
- نسيان الربط مع صفحة أساسية على موقع الويب الخاص بك من خلال التنقل – تذكر أن الروابط هي المسارات التي تتبعها برامج الزحف للوصول إلى صفحات جديدة.
هل يمكنني رؤية كيف يرى زاحف جوجل Googlebot صفحاتي؟
نعم، ستعكس النسخة المخبأة لصفحتك Cached Version لقطة من آخر مرة زحف فيها روبوت جوجل إليها.
يزحف محرك بحث جوجل إلى صفحات الويب ويخزنها مؤقتاً بترددات مختلفة. ويكون الزحف إلى المواقع الأكثر رسوخاً والمعروفة جيداً التي تنشر بشكل متكرر أكثر من مواقع الويب الأقل شهرة ذات النشاط الخفيف.
طبعاً يمكنك عرض الشكل الذي تبدو عليه النسخة المخبأة من صفحتك من خلال النقر على السهم المنسدل بجوار عنوان URL في صفحة نتائج محرك البحث واختيار “نسخة مخبأة”. كما يمكنك أيضاً عرض الإصدار النصي فقط من موقعك لتحديد ما إذا كان يتم الزحف إلى المحتوى المهم الخاص بك وتخزينه مؤقتاً بشكل فعال.
محركات البحث
وهكذا يظهر لنا من الشرح السابق بأن عملية بناء وتصنيف مواقع الويب هي عملية مهمة ذات أولوية، ذلك أنها تحدد فيما إذا كان هذا الموقع سيظهر في محركات البحث أو لا، وفي أي صفحة من صفحات النتائج سيكون هذا الموقع.
