準備状況チェック · 有効化レーン · 重み 5

robots.txtを公開

/robots.txt がプレーンテキストファイルを返します。

重要である理由

robots.txt は、クローラーがクロールルールとサイトマップの場所を最初に確認する場所です。これがない場合、クローラーはすべてが公開されているとみなします。

必要なクロールルールと、XML サイトマップを指す Sitemap: 行を記載した /robots.txt を公開してください。

/robots.txt がプレーンテキストファイルを返します。

確認済み： robots.txt が見つかりました。

未確認： robots.txt は見つかりませんでした。

制約：チェック時点で、標準の配置場所に対して1回だけリクエストを行いました。