サイトの子ページがインデックスされない

質問

こんにちわ
当方のサイトはヤフーのカテゴリに登録されているのですが、サイトINDEX以下のページURLで検索したらインデックスされていない状態が半年以上たっています。

考えられる原因はなんでしょうか？

回答No.2

grizzlycat · ベストアンサー

＃１さんの回答の項目の追加のようなものですがまったく見当違いの回答でしたらすみません。

まず、該当のページやサイトのトップページのmetaタグに
<meta name="robots" content="noindex,nofollow" />
などのロボット型検索エンジンの登録拒否の記述はないでしょうか。

次に、Yahoo！などのカテゴリに登録するのはサイトのトップページ等であって、そのページが登録されたからといって子ページ(リンク先)が拾われるとは限らないです。もちろん登録されたトップページからリンクされていればロボット型の検索エンジンが定期的に拾っていくので、コンテンツの中身にあったキーワードで検索をかければヒットする確率は上がります。

ひとつ気になるのは、検索する際に
「サイトINDEX以下のページURLで検索したら」
とあるのですが、URLを検索欄に入力して検索をかけたと言う事でしょうか？

通常はキーワードで検索をかけるのでURLでと言うのはあまり無いのですが(google等でサイトを限定する為の [site:～.com] は別として)、試しにYahoo!に登録してある私の作っているサイトで子ページのURLで検索したらヒットされるものとされないものがありました。ちなみにそのページにしかない人名やイベント名で検索するとヒットしました。

上記のような点、確認してみてください。

お礼

アドバイスありがとうございます。
metaタグの件は全ページにて使っていません。また、robot.txtもおいていません。

> ひとつ気になるのは、検索する際に「サイトINDEX以下のページURLで検索したら」
> とあるのですが、URLを> 検索欄に入力して検索をかけたと言う事でしょうか？

該当のページのURLにて検索結果が出てこない場合、検索対象になっていないためサイト内の子ページのurlを直接検索してみました。
[site:～.com]と同じことだと思っていましたが違ったのでしょうか？

また、最近行った事なのですが、
もともと、[www]ありなしで同じページが表示されるサーバ仕様だったので
.htaccess　にてRewriteEngine on
RewriteCond %{HTTP_HOST} ^hogehoge\.com
RewriteRule (.*) http://www.hogehoge.com/$1 [R=301,L]

ErrorDocument 404 /error/404.shtml
ErrorDocument 403 /error/403.shtml
ErrorDocument 500 /error/500.shtml

としてあるのですが、www無しで[site:～.com]を検索すると過去の子ページはヒットするのですが、このあたりが災いしているのでしょうか？

回答No.1

kaiwarepon

スクリプト等の使用でロボットがINDEXからのリンクで子ページにアクセスできない。
INDEX以下のページにインデックスするに相当するコンテンツが含まれていない。
検索エンジンスパムと判断された。
などなど、色々な原因が考えられますが、特定はできません。
念のため、もう一度、「検索エンジン用ロボットの巡回先への推薦」を行ってみてはどうでしょう。

お礼

アドバイスありがとうございます。
サイトのページは全て静的ページになっていてテキスト量も十分にあります。私もスパム扱いなのかとも疑いましたが、ヤフー掲載のタイトル、紹介文には含まれない単語で20万件中の1位を半年以上維持しているのでスパムではないのかと考えています。また、サイトTOPのキャッシュは週に二度ほどキャッシュされているのでTOPにはくローラーは確実に着てるものと思います。JAVAスクリプトはgoogleの広告のみになっていて子ページへのリンクにもJAVAスクリプトは使っていません。