• 締切済み

検索エンジンについて

世界中のホームページ(サーバーかな?)の中から、 任意のテキストを収集する方法について教えてください。 Google等の検索エンジンのように、サーバーを廻って、情報を収集するプログラミングですが、 ASPやVBScript等を用いて作ることはできますか?

みんなの回答

  • Mizyu
  • ベストアンサー率41% (245/593)
回答No.1

> 世界中のホームページ(サーバーかな?)の中から、 > 任意のテキストを収集する方法について教えてください。 ASPからソケット通信を用い、任意のサーバに対し、リクエストを投げて、レスポンスを受け取ることは可能です。 もしくはFTPを用い、FTPサーバ上にあるファイルを任意にダウンロードすることもできます。 どちらもBASP21というフリーウェアを使えば実装は楽です。 ※下記URL参照 > Google等の検索エンジンのように、サーバーを廻って、情報を収集するプログラミングですが、 > ASPやVBScript等を用いて作ることはできますか? 元来、ASPというのは、HTTPなどのリクエストを受けて、レスポンスを返すことに特化したプログラムです。 なので、情報収集を行うのには向いていないと思います。 やはり、Cを使うのがベターかと。

参考URL:
http://www.hi-ho.ne.jp/babaq/basp21.html
quick-nono
質問者

お礼

Mizyuさん、こんにちは。 参考URLで勉強します。 ありがとうございました。

関連するQ&A

  • ホームページ内の検索エンジン

    最近、ホームページを作りました。いわゆる情報系のホームページで1000近くのリンク集とその紹介文を掲載しています。 リンク集は3段くらいの深さを持つリンク集となっています。今はそのカテゴリーを辿ってもらい、必要な情報を得てもらう形になっています。 ただ、やはりそれだけでは利便性がよくないので、ホームページ内を検索できる検索エンジンを挿入しようと考えています。 はじめはGoogleの検索エンジンがよいかなと思っていたのですが、キーワードを入れて検索すると、Googleのページに飛んでしまうような形になってしまうようで、正直あんまりかなと思っています。 そこで、もし私のような情報系のサイト内を検索する検索エンジンで使いやすそうなものがあったら、教えていただきたいのですが。 よろしくお願いします。

  • 検索エンジンからホームページを削除したい

    ホームページに間違った情報を掲載してしまいました。 暫くたってから、指摘をうけて間違いに気付きました。 すぐサーバから情報を削除したのですが、検索結果一覧には 表示されてしまい、内容を閲覧できてしまいます。 (Yahooで一番上) 検索エンジンでの登録を削除する方法はありませんか? yahooには削除依頼を出しておりますが、 早急に対応することはできないのでしょうか? yahooの次の情報収集のタイミングを待つしかないのでしょうか?

  • 検索エンジンの検索結果について

    GoogleやYahoo、MSNをはじめとする大手検索エンジンは、検索エンジンロボットにより、個人の作成したホームページや画像などを収集し、検索結果に表示しています。 検索エンジンにおける検索結果についてですが、検索エンジンロボットが勝手に収集した内容を勝手に公開していることについて、法律にふれることはないのでしょうか? 例えば、Aさんが作成したイメージを、Bさんが勝手にホームページに使ったら著作権違反になりますよね? 上記は、考え方によっては、検索エンジンのイメージ検索にも当てはまり、ロボットが取得したイメージを勝手に公開しているというようにも考えることができると思いますが、どうなのでしょうか? 考え方によっては、検索エンジンは、作成者の許諾を得て、掲載しているわけではないので、著作権違反にあたるのではないでしょうか? 検索エンジンの検索結果を制限するrobots.txtなどもありますが、これは検索エンジンが勝手に作った規則ですよね? ホームページの作成者は、そんなの知らないし、理解もしなければ、完全に検索エンジンの検索結果は、著作権違反ということになるとも思えるのですが。 疑問に思いました。よかったら教えてください。

  • 検索エンジン検索結果から削除する方法を教えて下さい。

    YahooやGoogleなどの検索結果から登録を削除したいのですが 出来なくて困っています。 ホームページを制作したプログラムはJIMDOと言う、簡易CMSのASPです。 既に、ASPからアカウントは削除してしまいました。 検索結果から ホームページ自体は表示されなくなったのですが、インデックスが残ってしまい、そのインデックスを削除したく困っています。 対策として、再度、同じ名前(URL)のアカウントを取り直し、ホームページを作成しても、検索エンジン側はIPアドレスで管理しているのか? 削除したアカウントを見に行ってしまいます。 検索エンジンの検索結果から、旧インデックスを削除する方法はないでしょうか? 宜しく、御願い致します。

  • 独自の検索エンジンを作るには!?

    難しいと思いますが独自の検索エンジンを作成してみたいと思っています。 検索エンジンといっても自分のWebサイト内を検索するものではなくGoogleやYahoo!、A9のように全世界のWebを対象にした検索を行う検索エンジンのことです。 検索エンジンに関しては知識がないのですがDBと相性がいいPHPで作成できるのではないのかなと思っています。 そこで質問です。 PHPやPerlなどで検索エンジンを作成することは可能でしょうか? 個人が運営している検索エンジンサイトなどはあるでしょうか? もし検索エンジンを運営することになった場合はどの位のスペックがあるサーバーが必要になってくるでしょうか? です。どうぞよろしくお願いいたします。

    • ベストアンサー
    • PHP
  • 検索エンジンへの反映

    ひと月以上前にホームページを制作し、webサーバにアップロードしたのですが、検索エンジン(goo,yahoo.google等)で検索してもそのページが出てきません。 因みに、HTML内のmetaタグにrobots,keywords,descriptionを入れています。あとトップページ内にテキストでその会社名を入れています。 すぐに反映されないというのは聞いていましたが、ひと月以上もかかるのでしょうか?それとも何かしないと検索結果に出ないのでしょうか? 教えて下さい。 よろしくお願いします。

    • ベストアンサー
    • HTML
  • 検索エンジンgoogleについて

    数ある検索エンジンの中で、googleの人気が日本でも、また世界的にみても高いのはなぜなんでしょうか?ご存知の方、お願いします。

  • 検索エンジンについて

    ホームページを解説しましたが、Googleなどの検索エンジンでヒットしないのですが、ページのキーワードに関連するキーワードをたくさん入れていますが、検索エンジンでヒットできるものではないのでしょうか。 無料の検索エンジンに登録するべきなのでしょうか。 よろしくお願いします。

  • 検索エンジンにヒットさせたいです

    ホームページを初めて作ったのですが、検索エンジン(googleに登録しています)にヒットしやすくなるようなタグやら方法があったら教えて下さい。

  • .htaccessで、検索エンジンをシャットアウトする方法

    .htaccessを使用して、検索エンジンのURL収集からサイトをシャットアウトする方法ってありますでしょうか? land.toのサーバを使用しているのですが、検索エンジンには引っかかりたくないのです。 .htaccessを使用すれば、可能という記事はあったのですが、具体的にどのようなタグを.htaccessファイルに書けばいいのか判りません。 Googleや、yahoo、Gooなどから、サイトを隠す方法なら「.htaccess」以外の方法でも構わないのですが…… お詳しい方、よろしくお願いいたします。

専門家に質問してみよう