「robots.txt により URL が制限されています」というエラーが出た場合の対処法 | リスティング広告相談所  

This page has found a new home

Blogger 301 Redirect Plugin
このエントリーをはてなブックマークに追加

2010年12月13日月曜日

「robots.txt により URL が制限されています」というエラーが出た場合の対処法

Googleウェブマスターツールでクロールエラー「robots.txt により URL が制限されています」が出ている場合の対処法ですが、robots.txtを設置していないのにこのようなエラーが出た場合はとりあえずクロールされるか様子を見た方がよさそうです。


クロールが順調にされていくと自然にクロールエラーのメッセージは消えるようです。


こちらのページが参考になりました。



同じような症状が出ている場合は参考にどうぞ