الطريقة الصحيحة لإضافة ملف robots.txt وتصدر محركات البحث
العديد من الأشخاص يبحثون على الطريقة الصحيحة والمثالية لأرشفة مواضيعهم أو مقالاتهم على مستوى المدونة الخاصة بهم إلا أنهم رغم كتابة العديد من المقالات المميزة في مدونة blogger لا يظهرون في محركات البحث خصوصا google وحتى إن ظهروا يكونون في مراتب جد متأخرة مما يجعل النقرات جد مستحيلة فيا ترى ما هي الطريقة المناسبة لتصدر نتائج البحث هذا السؤال يطرح نفسه بقوة والأمر يرجع بصفة عامة إلى ملف الروبوت أو المعروف ب Robots.txt الذي تحتاجه مباشرة بعد إضافة ملفات sitemap أو المعروفة بخريطة الموقع وذالك في المنصة الخاصة بالمطورين التي تمنحها لك شركة جوجل google المعروفة بإسم Google Search Console الذي تخول لك الحق الكامل في أرشفة وفهرسة جميع المقالات المتواجدة في موقعك أو مدونتك إذا كيف يمكنك إستغلال هذه الأداة أو المنصة لتصدر محركات البحث.
أولا وقبل كل شيء :
العمل المستمر بصفة منتظمة يساعدك كثيرا في تصدر محركات البحث وذالك بكتابة مقالات إحترافية متجاوبة مع جميع أنواع الأجهزة وبالإعتماد على google adwords من أجل الحصول على الكلمات الدلالية الأكثر بحتا على مستوى محركات البحث في المكان الذي تريد إستهدافه بالمقال ودائرة الإهتمامات لمتابعيك أو للزوار بصفة عامة.
ثانيا إضافة ملفات sitemap (خريطة الموقع):
من أجل تعرف محركات البحث على موقعكم أو مدونتكم يجب عليكم أن تقوموا بإضافة ملفات sitemap أو المعروفة بخريطة الموقع أو المدونة من أجل تسهيل عملية الفهرسة و الزحف إلى موقعكم وذالك عبر موقع Google Search Console بعد إتبات ملكيتكم للموقعكم أو مدونتكم من أجل التسجيل فيه ومباشرة تقومون بالذهاب إلى أقصى أسفل يمين الصفحة وتختارون خانت الزحف ومن ثم ملفات sitemap وتقومون بإضافتها مثلما موجودة بأسفل المقال.
تالثا وضع واختبار ملف robots.txt بالطريقة الصحيحة:
لعل العديد من أصحاب المواقع والمدونات أصبحوا يبدعون في أجراء الأكواد البرمجية لملف robots.txt من أجل تطوير مواقعهم ومدوناتهم وتصدرهم في محركات البحث أو نتائج محركات البحث من الأجل التدقيق فقط لذالك بعد بحث من فريق عمل المدونة وجدنا أن أضمن طريقة للحصول على نتائج جد جيدة هي إضافة ملفات sitemap.xml بالطريقة التي سوف نتركها لكم في أسفل التدوينة مع تعديلات جد مهمة في ملف robots.txt يجعلك مع المدة ومع العمل الجاد تصبح من أهم المدونات أو المواقع بحثا على محرك البحث الأشهر في العالم .
إضافة ملفات sitemap
/atom.xml /atom.xml?redirect=false&start-index=1&max-results=500 /feeds/posts/default /rss.xml /sitemap.xml
إضافة ملف Robots.txt
User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /search Disallow: /contact.html Disallow: /error-page.html Disallow: /about.html Disallow: /search/label/?updated-min= Disallow: /search/label/?updated-max= Allow: / User-agent: * Disallow: /*.html Allow: /*.html$ Sitemap:http://www.thegeniuspro.com/atom.xml?redirect=false&start-index=1&max-results=500
ملاحظة : يجب عليك تغير الصفحات المسمات contact.html,error-page.html,... على حسب أسماء صفحاتكم وتبديل إسم موقعكم أو مدونتكم في السطر الإخير
فيديو توضيحي بالتفصيل حول إضافة ملفات sitemap وrobot.txt بالشكل الصحيح