مشكلة في المنتدى تمنع محركات البحث من فهرسته

أهل - الحديث - حديث شريف - محمد - صلى الله عليه وسلم - قرأن كريم


السلام عليكم ورحمة الله وبركاته

كنت وضعت هذا الموضوع في قسم البرمجيات الاسلامية وتم حذفه، أضن أن السبب هو أنه كان في القسم الغير مناسب، سأعيد نشره في هذا القسم للأهمية وليتفضل المشرف بحذفه مشكورا إن كان مخالفا للقوانين

ملف robots.txt الموجود على كل المواقع مسؤول عن تحديد الأشياء التي يمكن لمحركات البحث فهرستها. بالنسبة للملتقى هو موجود على هذا الرابط:
http://ahlalhdeeth.com/robots.txt
نلاحظ أنه يمنع أي محرك بحث من فهرسة الملتقى باستثناء غوغل، حتى موقع أرشيف أصبح ممنوعا من حفظ صفحات الملتقى، وأصبح الوصول الى ما حفظه في السنوات الاخيرة غير ممكن
اصلاح المشكلة سهل، يكفي ان نجعل هذا الملف مثلا هكذا:

كود:
User-agent: *
Allow: /