クロールエラーが発生して困っています。

質問

googleの検索エンジンにサイトを登録したのですが、クロールに失敗しているようで何度もエラーメッセージがきて困っています。

エラーメッセージの内容は日本語に訳しますと

場所誤差割合が100%である場合:
?
ウェブ・ブラウザ(http://○○○○○○/robots.txtにアクセスする試み)の使用。
あなたがブラウザからそれにアクセスすることができれば、あなたのサイトがgooglebotへのアクセスを否定するように構成されるかもしれません。
googlebotへのアクセスを否定していないことを保証するためにファイアウォールとサイトの構成をチェックしてください。
?
あなたのrobots.txtが静的なページである場合は、あなたのウェブサービスがファイルにアクセスする適切な許可を持っていることを確認してください。
?
あなたのrobots.txtがダイナミックに生成される場合は、robots.txtを生成するスクリプトが適切に形成され走る許可を持っていることを確認してください。
あなたのウェブサイトがあなたのスクリプトが失敗しているかどうか確かめるためにログをチェックする、そして、場合、したがって、失敗の原因を分析する試み。
場所誤差割合が100%未満である場合:
?
ウェブマスター・ツールを使用して、高いエラー率の一日を見つけて、その日の間ウェブサーバのためのログを検査してください。
その日の間ログ中のrobots.txtにアクセスするエラーを捜して、それらのエラーの原因を固定してください。
?
最も有望な説明は、あなたのサイトが過負荷をかけられるということです。
集合供給者に連絡して、あなたのウェブサーバを再構成するかより多くの資源をあなたのウェブサイトに加えることについて議論してください。
?
あなたのサイトが転送する場合、別のホスト名に、別の可能な説明は、あなたのサイト上のURLがホスト名に転送しているということです、そのrobots.txtファイルの給仕は誰のを示しているか、これらの問題の1つ以上。

とのことです。

さくらサーバを使用しており、初期ドメインではきちんと登録されてたのに、独自ドメインを取得し、新たなサイトで検索エンジン登録を行ったところ、このような問題に直面しました。2つのサイトは同じさくらサーバからUPしています。

サーバにUPされているファイルをみたところrobots.txtというファイルは見当たらなかったんですけど初期ドメインのサイトはきちんと登録されているため、なにがどういうことなのはさっぱりわかりません。

どうすれば問題が解決されるか教えてください。お願いします！

回答No.1

naokita · ベストアンサー

http://○○○○○○/robots.txtにアクセスしてみましょう。

ファイルが無いのに、登録したとか、
404になっているとかの話じゃないのかな・・・

または、
サーバーが落ちてGoogleがクロールできなかった為のエラーとか。

正しく、robots.txtをアップしたとしても、
すぐにはエラーが消えない場合もあります。
自分で表示確認できれば、OKでしょう。
※ 但し、.htaccessなどでアクセスをdenyにしない事。

お礼

お礼が遅くなってしまってすみません。

robots.textをUPしたところ、ちゃんとクロールされている様です。
まだエラーは消えてはいませんが、表示はされているので大丈夫だと思います。
こんなに簡単なことだったんですね！

本当にありがとうございました。