فحص الجاهزية · مسار تمكين · الوزن 5

نُشر robots.txt

يعيد /robots.txt ملفًا نصيًا عاديًا.

تم رصده على: 79%
أفضل ألف موقع: 76%
شريحة أفضل مليون موقع: 81%
لم يُقَس: 10,885

أهمية ذلك

robots.txt هو أول موضع تبحث فيه برامج الزحف عن قواعد الزحف ومواقع خرائط الموقع. وبدونه، تفترض أن كل شيء متاح.

كيفية الإصلاح

انشر /robots.txt مع أي قواعد زحف تحتاج إليها، وسطر Sitemap: يشير إلى خريطة موقعك بصيغة XML.

كيف نفحص

يعيد /robots.txt ملفًا نصيًا عاديًا.

رُصد: عُثر على robots.txt.

لم يُرصد: لم يُعثر على robots.txt.

حدود الفحص: طُلب الموقع القياسي فقط، مرة واحدة، وقت الفحص.

حسب شريحة الشعبية

نطاق Chrome UX Report	مرصود	مقاس
أعلى 1 ألف	76%	240
أعلى 5 آلاف	75%	1,628
أعلى 10 آلاف	75%	2,419
أعلى 50 ألفًا	74%	17,917
أعلى 100 ألف	76%	15,669
أعلى 500 ألف	78%	46,516
أعلى 1 مليون	81%	90,782

الفئات الأكثر احتمالًا لتطبيق ذلك

الفئات الأقل احتمالًا

حسب الحزمة التقنية

حسب مزوّد الخدمة

مواقع شائعة رصدنا فيها ذلك

المصادر والأدلة

دليل: دليل robots.txt: التحكم في الزحف دون إخفاء الأخطاء افحص موقعك