サーバー接続エラーの対処方法 誤って Google のクローラがブロックされていないことを確認する

誤って Google のクローラがブロックされていないことを確認する
DNS 設定の問題、ファイアウォール、DoS 対策保護システムの設定ミス、コンテンツ管理システムの設定等、システム レベルの問題が起因して クローラがブロックされる場合が利ます。
保護システムは優れたホスティングを実現する重要な要素である一方、異例の大量サーバー リクエストを自動的にブロックする設定をしています。

Googlebot からのリクエストは人が手動でおこなうリクエストより多くなる場合が多いため、保護システムが作動し、 Googlebot をブロックし、Googlebot がサイトをクロールで出来ない場合があります。
これを解決する為には、ウェブサイトのどの部分で Googlebot がブロックされているのかを特定し、ブロックを解除する必要があります。
ファイアウォールの設定を変更する場合は、ホスティング プロバイダに連絡を取ることが必要となる場合もあります。