إذا إتبعت المقالات المتعلقة إلي سيو فواجهت إلي إسم روبوت قوقل. يعمل روبوت قوقل كزاحف الويب أو باللغة الإنجليزية (Crawler) و يقوم بفهرسة صفحات الويب لمحرك بحث قوقل. نستهدف هنا إلي تقديم روبوت قوقل أو نفس (Googlebot) و كيفية تشغيل و إستخدامه.
كيف يعمل روبوت قوقل؟
كما ذكرناها، يكون روبوت قوقل نوعاً من زاحف الويب الذي يحقق من المواقع المختلفة و يلعب دوراً بارزاً في نجاح المواقع من جهة سيو. جوجل بوت يقوم بإجراء مهنته بمساعدة الروابط. عندما يصل جوجل بوت إلي موقع، يبدأ إلي فهرسة بمساعدة الروابط و يقوم بتجمع نماذج من صفحاته كوصفة الذاكرة المخبأة (Cache) و يتمتع عنها للأبحاث المتعلقة إلي قوقل.
إذا اردنا إلقاء نظرة تفصيلية إلي كيفية عمل روبوت قوقل من الأفضل أن نقوم بتحقق من حضوره في موقع خطوة بخطوة. عندما تدخل زاحف الويب أو بعبارة العنكبوت (Spider) قوقل إلي موقع فإنه يرجع إلي ملف robots.txt في المرحلة الأولي لتحديد إطار أنشطته (في القسم الأخير، سنشرح المزيد حول ملف robots.txt) . ثمّ يحصل المساعدة من خريطة الموقع (Sitemap) و معلوماته السابقة حول الموقع لتسهيل التنقل في صفحات الموقع. إذا واجه هذا الروبوت إلي رابط جديد فستجعله في قائمة روابط يمكن مشاهدتها. كذلك، يراقب التغييرات المحتملة على الروابط من خلال البحث عن الروابط التي تمت حفظهم في قاعدة بيانات قوقل سابقاً، وإذا شاهد تغيير، يقوم بالتغييرات اللازمة فيهم.
إذا قمت بتغيير في عناوين و أوصاف (description) محتويات مدونتكم أو ميتا تاغ من الأفضل عدم إنتظار هذا التغيير على صفحة نتائج قوقل فوراً. لا ينتقل جوجل بوت إلي موقعكم أثناء تحميل الروابط الخاصة بكم و قد يعود إلي موقعكم بعد أيام. لا يحدد الوقت اللازم لوصول زاحف ويب قوقل إلي موقع الويب الخاص بكم و هذا يعد من معلومات سرية يطلعها شركة قوقل فقط.
كيف يمكنني تحسين موقع الويب الخاص بي لروبوت قوقل؟
إذا لم يتم تحسين موقعكم لجوجل بوت فيقلل إحتمال فهرسة صفحات موقع الويب في قوقل. هذه القضية يمكن أن يؤدي إلي فشل موقع الويب الخاص بكم في شأن التسويق و جذب الجمهور. ولكن كيف قمنا بتحسين موقعنا لزيارات روبوت قوقل؟ للحصول على هذه النتيجة، قم بأخذ إعتبار هذه الشؤون و إتباعها:
- لا تملأ صفحة موقع الويب الخاص بكم مع أداة مثل جافا سكريبت و فلش و DHTML، Ajax لإن يحقق روبوت قوقل من HTML بسرعة ولكنه يمكن أن يعمل في تحقق الشفرات الأخري بطيئة.
- إذا تزداد المشاركات الجديدة إلي موقع الويب الخاص بكم دائماً، فيدخل جوجل بوت إلي موقعكم في أقل الوقت. إذا مرت من تحديث موقع الويب الخاص بكم الأيام الكثيرة و الآن قمت بتغيير فيه فمن الأفضل أن تدخل إلي أدواة مشرفي المواقع و تقم بتسجيل طلب لجوجل بوت لزيارة موقعكم في أقل الوقت.
- إستخدم الروابط الخلفية الداخلية. هذه القضية تسبب إلي تحرك زاحف ويب قوقل إلي موقعكم جيداًً. يكون قسم Links Report في أدوات مشرفي المواقع أحد من أفضل أدوات الروابط الخلفية الداخلية.
- قم بإنشاء ملفّ sitemap.xml لموقعكم. كما ذكرناها، يعتبر خريطة الموقع إحدي من أدوات جوجل بوت للتواصل مع موقعكم.
- هناك الأدوات الكثيرة يساعدكم لتحقق من إجراء جوجل بوت. أدوات مشرفي المواقع (Google Search Console) و مكون إضافي يواست سيو هما أدوات يساعدكم في هذه الطريقة. على سبيل المثال، يمكنكم إستخدام إدوات مشرفي المواقع و الووصل إلي قائمة من هذه الأخطاء لمشاهدة أخطاء يواجهها روبوت قوقل أثناء الزحف في موقعكم.
- أسلوب آخر لإدارة كيفية عمل جوجل بوت في موقعكم هو الحصول على مساعدة ملفّ robots.txt نحقق منه في التالي.
ملفّ robots.txt
ملف robots.txt ملف نص يحقق منه من خلال زواحف ويب محركات البحث. عندما يصل جوجل بوت إلي موقع الويب، فإنه يتحرك إلي ملف robots.txt و سوف يكتشف الصفحات التي يمكنه الوصول إليها من خلال قراءتها. في الواقع، يمكنك أن تقول إلي روبوت قوقل أن يدخل إلي صفحات تريدها و صفحات يجب التجاهل عنها و عدم فهرستهم. يتم ذلم من خلال كتابة أمر «Allow» للمسموح به و كتابة أمر «Disallow» لعدم المسموح به.
User-agent: *
Disallow: /the-address/
إستخدم الشفرة أعلاه لقطع وصول جميع الروبوتات إلي أحد من صفحات الموقع. قم بوضع عنوان الصفحة المطلوبة عوضاً ل the-address.
أهمية هذا الملفً للتحسين والسيو هو أن يمنع عن مضيعة الوقت للتحرك بين الصفحات التالفة في موقعكم و يقوم روبوت قوقل إلي زحف صفحات موقع الويب الخاص بكم في أقل الوقت.
هل قمت بتحسين موقعك لروبوت قوقل؟ أواجهت إلي مشاكل في مجال زاحف ويب صفحات الموقع حتي الآن؟ أترك تعليقات في قسم التعليقات و إشترك خبراتكم بنا.
