तत्परता जाँच · सक्षम करें लेन · भार 5

robots.txt प्रकाशित है

/robots.txt एक सादा टेक्स्ट फ़ाइल लौटाता है।

इन पर देखा गया: 79%
शीर्ष 1K साइटें: 76%
शीर्ष 1M समूह: 81%
मापा नहीं गया: 10,885

यह क्यों महत्वपूर्ण है

क्रॉलर सबसे पहले robots.txt में क्रॉल नियम और साइटमैप के स्थान खोजते हैं। इसके बिना, वे मानते हैं कि सब कुछ खुला है।

इसमें सुधार कैसे करें

अपनी ज़रूरत के क्रॉल नियमों और अपने XML साइटमैप की ओर निर्देशित करने वाली Sitemap: पंक्ति के साथ /robots.txt प्रकाशित करें।

हम कैसे जाँचते हैं

/robots.txt एक सादा टेक्स्ट फ़ाइल लौटाता है।

पाया गया: robots.txt मिला।

नहीं पाया गया: कोई robots.txt नहीं मिला।

सीमा: जाँच के समय केवल मानक स्थान का अनुरोध किया गया था, वह भी एक बार।

लोकप्रियता समूह के अनुसार

Chrome UX Report श्रेणी	देखा गया	मापा गया
शीर्ष 1K	76%	240
शीर्ष 5K	75%	1,628
शीर्ष 10K	75%	2,419
शीर्ष 50K	74%	17,917
शीर्ष 100K	76%	15,669
शीर्ष 500K	78%	46,516
शीर्ष 1M	81%	90,782

ऐसा करने की सबसे अधिक संभावना वाली श्रेणियाँ

सबसे कम संभावना वाली श्रेणियाँ

स्टैक के अनुसार

प्रदाता के अनुसार

लोकप्रिय साइटें जहाँ हमने यह देखा

स्रोत और मार्गदर्शिकाएँ

मार्गदर्शिका: Robots.txt गाइड: गलतियों को छिपाए बिना क्रॉलिंग नियंत्रित करें अपनी साइट जाँचें