STATUS IS UPGOTOWOŚĆ WITRYN
Polski
Obszar właściciela
Odkryj SIU

Test gotowości · ścieżka Włącz · waga 5

robots.txt opublikowane

/robots.txt zwraca plik w formacie zwykłego tekstu.

Zaobserwowano w
79%

spośród 175,171 witryn objętych pomiarem

Pierwszy tysiąc witryn
76%

240 objętych pomiarem

Przedział pierwszego miliona
81%

90,782 objętych pomiarem

Nie zmierzono
10,885

zablokowano, wymagano dodatkowej weryfikacji lub test nie ma zastosowania

Dlaczego to ważne

robots.txt to pierwsze miejsce, w którym roboty indeksujące szukają reguł skanowania i lokalizacji map witryny. Bez tego pliku zakładają, że wszystko jest dostępne.

Jak rozwiązać problem

Opublikuj /robots.txt z potrzebnymi regułami skanowania i wierszem Sitemap: wskazującym mapę witryny XML.

Jak testujemy

/robots.txt zwraca plik w formacie zwykłego tekstu.

Zaobserwowano: Znaleziono robots.txt.

Nie zaobserwowano: Nie znaleziono robots.txt.

Ograniczenie: W momencie sprawdzania wysłano tylko jedno żądanie, wyłącznie do standardowej lokalizacji.

Według przedziału popularności

Przedział Chrome UX ReportZaobserwowanoZmierzono
Pierwszy 1 tys.76%240
Pierwsze 5 tys.75%1,628
Pierwsze 10 tys.75%2,419
Pierwsze 50 tys.74%17,917
Pierwsze 100 tys.76%15,669
Pierwsze 500 tys.78%46,516
Pierwszy 1 mln81%90,782

Kategorie, w których jest to najbardziej prawdopodobne

Kategorie, w których jest to najmniej prawdopodobne

Według stosu technologicznego

Według dostawcy

Popularne witryny, w których to zaobserwowaliśmy

Źródła i poradniki

Poradnik: Przewodnik robots.txt: kontroluj pobieranie (crawling) bez ukrywania błędówSprawdź własną witrynę