Pagsusuri ng kahandaan · Lane na Payagan · bigat 5
Nailathala ang robots.txt
Nagbabalik ang /robots.txt ng isang plain-text na file.
- Nakita sa
- 79%
- Nangungunang 1K site
- 76%
- Pangkat ng nangungunang 1M
- 81%
- Hindi nasukat
- 10,885
sa 175,171 nasukat na site
240 nasukat
90,782 nasukat
hinarangan, hiningan ng karagdagang pagpapatunay o hindi naaangkop
Bakit ito mahalaga
Sa robots.txt unang naghahanap ang mga crawler ng mga tuntunin sa pag-crawl at lokasyon ng mga sitemap. Kung wala ito, ipinapalagay nilang bukas ang lahat.
Paano ito ayusin
Mag-publish ng /robots.txt na may anumang tuntunin sa pag-crawl na kailangan mo at isang linyang Sitemap: na tumuturo sa iyong XML sitemap.
Paano namin sinusuri
Nagbabalik ang /robots.txt ng isang plain-text na file.
Naobserbahan: Natagpuan ang robots.txt.
Hindi naobserbahan: Walang natagpuang robots.txt.
Limitasyon: Ang karaniwang lokasyon lamang ang hiniling, nang isang beses, sa oras ng pagsusuri.
Ayon sa pangkat ng popularidad
| Saklaw ng Chrome UX Report | Naobserbahan | Nasukat |
|---|---|---|
| Nangungunang 1K | 76% | 240 |
| Nangungunang 5K | 75% | 1,628 |
| Nangungunang 10K | 75% | 2,419 |
| Nangungunang 50K | 74% | 17,917 |
| Nangungunang 100K | 76% | 15,669 |
| Nangungunang 500K | 78% | 46,516 |
| Nangungunang 1M | 81% | 90,782 |
Mga kategoryang pinakamalamang na gumawa nito
Mga kategoryang pinakamaliit ang posibilidad
Ayon sa stack
- PrestaShop on Cloudflare>99%
- BigCommerce>99%
- WordPress on Fastly99%
- Drupal on Cloudflare98%
- Drupal on Fastly98%
- Next.js on Fastly98%
- Tilda98%
- Next.js on Netlify98%
- Wix98%
- PrestaShop97%
- WordPress on Cloudflare97%
- Sitecore on Azure Front Door/CDN97%
- Squarespace97%
- Drupal97%
- Magento / Adobe Commerce on Cloudflare97%
- Drupal on Amazon CloudFront97%
- Bitrix97%
- WordPress on Google edge96%
- WordPress on Vercel96%
- Drupal on Akamai96%
- Astro on Cloudflare96%
- WordPress96%
- Sitecore on Cloudflare96%
- Gatsby on Amazon CloudFront95%
- Shopify95%
- Adobe Experience Manager on Cloudflare95%
- WordPress on Amazon CloudFront95%
- HubSpot CMS95%
- Next.js on Akamai95%
- WordPress on Sucuri95%
- Adobe Experience Manager on Akamai94%
- Angular on Cloudflare94%
- Magento / Adobe Commerce94%
- Sitecore94%
- Next.js on Azure Front Door/CDN94%
- Adobe Experience Manager on Amazon CloudFront94%
- Adobe Experience Manager93%
- Next.js on Cloudflare93%
- Astro93%
- Angular on Amazon CloudFront92%
- Next.js on Amazon CloudFront92%
- Joomla91%
- Next.js on Vercel91%
- Next.js on Google edge91%
- Angular91%
- Webflow90%
- Next.js90%
- WordPress on Imperva89%
- Astro on Amazon CloudFront89%
- Nuxt on Google edge89%
- Nuxt on Cloudflare87%
- Blogger87%
- Gatsby86%
- Nuxt86%
- Nuxt on Amazon CloudFront85%
- GoDaddy Website Builder83%
Ayon sa provider
- Bunny CDN93%
- Cloudflare92%
- Akamai91%
- Fastly89%
- Google edge88%
- Azure Front Door/CDN87%
- Amazon CloudFront86%
- Sucuri85%
- Netlify83%
- Vercel81%
- Alibaba Cloud CDN72%
- Imperva70%
Mga sikat na site kung saan namin ito naobserbahan
Mga sanggunian at gabay
Gabay: Patnubay sa robots.txt: Kontrolin ang Crawling nang Hindi Tinatakpan ang mga PagkakamaliSuriin ang sarili mong site