- ベストアンサー
CGIとgooglebot
- みんなの回答 （1）
- 専門家の回答
質問者が選んだベストアンサー
こんにちは、じゃんぬねっと です。 Googlebot は、テキストブラウザを表示しているような状態の情報を収集します。 ですから、info.log の内容を直接みているわけじゃないです。 動的に生成された "後の" ページをテキストブラウザで見ているというわけです。
関連するQ&A
- googlebotについて
自分でHPを作っていて、アクセスログを取っています。 誰か新しい人が踏んだページのすぐ後に必ずgooglebot.comというログが残るようになりました。 私は素人なのでよくわからないので友人に聞いたところ、googleのサーチロボットだから気にすること無いよ、という事でしたが、なんとなくストーカーっぽくて気持ち悪いんですよね・・。 こういうものなんでしょうか？ これが普通ならもう気にしないようにします。 いまいちどういう仕組みになっているのかわからないので不安なのです。 簡単でいいのでgooglebotについて説明いただければと思います。 宜しくお願いいたします。
- ベストアンサー
- その他（インターネット・Webサービス）
- 拡張子がcgiのページについて
検索エンジンは動的なページを読みたがらないと聞いたことがありますが、googleで検索すると拡張子がcgiのページを検索できることがあります。そこで質問です。 1.実際は拡張子がcgiのページでもgoogleはデータを拾っているのでしょうか。拾われるには何か条件があるのでしょうか。 2.もし拾われたくない場合はロボット除けのmetaタグを入れたほうがよいのでしょうか。 3.ロボットはURLの？以降が違っても別のページと解釈するのでしょうか。 4.普通の人にcgiのページを見られたくない場合、検索エンジンだけ気をつければ大丈夫なのでしょうか。（特に重要なことが書かれているわけではありません。無理やりみたければみれば程度の内容です。私の覚書のようなもので他人が見ても全く意味をなさいものを私が別の場所のPCや携帯で見たい時に使います。） たくさんあってすみませんが教えてください。
- ベストアンサー
- CGI
- アクセス解析
現在アクセス解析をしているのですが、下記のアクセスを良く見かけます。 crawl-66-249-70-188.googlebot.com crawl-66-249-70-193.googlebot.com crawl-66-249-70-198.googlebot.com crawl-66-249-72-114.googlebot.com これはgoogleの検索エンジンロボット？が徘徊した跡でしょうか? それともスパム類のものでしょうか? 検索ロボットの場合、ヤフーのロボットはあるのでしょうか? アクセス解析では初心者ですので、何かいい無料のツールなどがございましたらご紹介頂ければ幸いです。
- ベストアンサー
- その他（ITシステム運用・管理）
- ? & インデックス化されやすい・・？
とあるレンタル掲示板の質疑応答に以下の内容のものがありました。 【質問】CGIやPHPで作成したページは、グーグルなどロボット検索エンジンでは内容を認識してくれないと聞いているんですが、こういったBBSの内容をロボット検索エンジンにも認識出来るようにする方法はあるんでしょうか？ 【答え】当サイトではURLに「?」や「&」をなるべく使わないようにしてインデックス化されやすいようにしております。 「？」「＆」を含まない掲示板のほうが認識されやすいのですか？ 人の質問だったので、割り込みにくかったのでこちらへ質問しました。
- ベストアンサー
- その他（インターネット接続・通信）
- CGIで表示させるページを、
初心者です、市販ソフトを使用して部品の検索ページを作っています。ロボット型の検索エンジンにCGIで表示させるページをヒットさせることは可能なのでしょうか、TOPページはMETAタグの記入方法がわかったのですが？ちなみに検索結果は変化してしまう可能性があるので無理だと思うのですが、各部品のページは固定のアドレスだと認識しております。宜しくお願いいたします。
- 締切済み
- CGI
- ＣＧＩのログの閲覧について
ＣＧＩのログのパーミッションが６６６の場合、ログが丸見えになってしまします。 そこでログ名を変えて設置した場合、他の人には探したいと思った場合でもログは探せなくなるのでしょうか？ それからロボット検索などにひっかかったりはしないでしょうか？ もし引っかかるとしたらどうすれば回避できるでしょうか？ どなたかわかりましたらよろしくおねがいします。
- ベストアンサー
- CGI
- .googlebot.comは，検索エンジンが閲覧しているということですか?
ログをとってみると*.googlebot.comがあります。これは，検索エンジンが閲覧しているということですか?
- 締切済み
- Windows XP
- ロボット検索にCGIのページってひっかかりますか？
ホームページ超初心者です。 よく、CGIを使った買い物のページで個人情報を入力することってありますよね。(中には鍵マークがでないものもありますよね。) いつも疑問に思うのですが、このCGIのページはロボット検索にひっかかることはないのですか？ もし、検索にひっかかって、個人情報がキャッシュに残って、公に出てしまうようなことがあったらどうしよう！と不安になるのですが・・・。
- ベストアンサー
- その他（インターネット・Webサービス）
- 検索エンジンの検索結果について
GoogleやYahoo、MSNをはじめとする大手検索エンジンは、検索エンジンロボットにより、個人の作成したホームページや画像などを収集し、検索結果に表示しています。 検索エンジンにおける検索結果についてですが、検索エンジンロボットが勝手に収集した内容を勝手に公開していることについて、法律にふれることはないのでしょうか？ 例えば、Aさんが作成したイメージを、Bさんが勝手にホームページに使ったら著作権違反になりますよね？ 上記は、考え方によっては、検索エンジンのイメージ検索にも当てはまり、ロボットが取得したイメージを勝手に公開しているというようにも考えることができると思いますが、どうなのでしょうか？ 考え方によっては、検索エンジンは、作成者の許諾を得て、掲載しているわけではないので、著作権違反にあたるのではないでしょうか？ 検索エンジンの検索結果を制限するrobots.txtなどもありますが、これは検索エンジンが勝手に作った規則ですよね？ ホームページの作成者は、そんなの知らないし、理解もしなければ、完全に検索エンジンの検索結果は、著作権違反ということになるとも思えるのですが。 疑問に思いました。よかったら教えてください。
- ベストアンサー
- インターネットビジネス
- ロボット型検索エンジンからの削除
Yahoo!（Google）やその他のロボット型検索エンジンに 登録されたくないページが登録されてしまっています。 レンタル日記なので自分でMATAタグ等を入れることができず、 削除できなくて困っています。 ロボット型検索エンジンに登録されているページを MATAタグ等を使わずに削除する方法があれば教えてください。 とくにGoogleに登録されているのを削除したいのですが、 Googleに載っている方法がよくわからず困っています。
- 締切済み
- その他（インターネット接続・通信）
お礼
ありがとうございますっ。 そういうことならば、CGIでコンテンツを作成しまくれます。