- 締切済み
WEBサイトの仕組みについて。
http://www.aucfan.com/search 上記のようなサイトで、自動的にweb上のデーターを集めてくる仕組みとはいったいどういうものなのでしょうか? 使われている技術、考え方や、必要なソフトや機材、それを実行するための手間(何人ぐらいで、どのくらいの期間がかかるのか?)といったことを、わかる方がいましたら、教えてください。 また、web上のデーターを自動的に収集して、データーベースを作るような技術というのは、一般にどう呼ばれていてるのでしょうか?(呼び名みたいなもの) ついでに、 http://www.amazon.co.jp/ 上記のような、大規模な商用サイトが、どういう技術や仕組みによって、できているのか?また、どういう職種のスタッフによって作られているのか?というのを、わかる方がおられましたら、できるだけ、具体的にわかりやすく教えてください。
- haisoudesu
- お礼率41% (49/118)
- その他(インターネット・Webサービス)
- 回答数2
- ありがとう数0
- みんなの回答 (2)
- 専門家の回答
みんなの回答
- natsuki_tk
- ベストアンサー率35% (99/279)
質問の意図をつかみきれないので、 的確なレスになっていないかもしれませんが、 上記サイト同様のものを低コストで作りたい それにはどのようにすればいいか ・・ということでよろしいでしょうか? 端的に申し上げて、 作る技術があるかどうかが一番重要です。 このレベルのもので、実用に足るものを作るのはかなり大変ですので。 (ただし、発注すれば数十万~数百万がかかるでしょう) もしそれなりの技術をもったスタッフがいるのであれば、 作成することもできなくは無いと思いますが、 数人のスタッフで一ヶ月程度はかかると思います。 (スタッフの技術次第で変わるのは言うまでもありません) プログラム部分と表示部分(HTML)でスタッフが別れる場合が多いですね。 今回の場合はプログラムが主ですので、他は考えていないかもしれませんが。 技術的には、ロボットに近いと言えるんじゃないでしょうか。 (この言葉も定義が結構広いですが) 小中規模であればPerlでプログラム組むのが一番手軽ではあると思います。 大規模以上なら、JAVAなりASPなり他のものを考えた方が無難でしょう・・ (自分の手元のサーバにデータがある場合はまた別の技術も色々ありますが)
- basil
- ベストアンサー率35% (148/420)
自サーバ内のデータ検索と、internet上の他サーバのデータ検索とでは技術が変わってくるでしょう。 自サーバなど、単一システム内でのデータ交換ではあらゆる手段が利用できますが、ネットを介してのデータ交換ではサーバ側で提供しているサービスでしかデータ交換できません。 言い換えるなら、データ交換には送り手と受け手とで同じ手段で会話する必要があり、両方の管理権限があるような単一システム内などでは最適な手段が選べますが、送り手のサーバで提供する手段が選択できないような場合は、提供しているサービスを使うしか方法がありません。 質問内のwww.aucfan.comやwww.amazon.co.jpで行われている検索などは自サイト内での検索のようですが(そう見受けますが)この場合、システムの組み方次第でいろんな方法があり、表面的に見ただけでは裏側でどのような技術が採用されているかは分かりません。 また、サーチエンジンなどではhttpなどのプロトコルで、通常ブラウザからアクセスするのと同様の通信方法でデータを取得し、取得したデータから次なるアドレスを拾いまたアクセスするということを繰り返してデータを蓄積します。一般にロボットと呼ばれる技術です。ネットサーフィンを自動的にする仕組みといえば分かりやすいでしょうか。
関連するQ&A
- WEBサイトの仕組みを説明する本を探しています。
私は、10年以上前にHTMLでサイトの作成をした事があります。その時はテキストを装飾したり、背景の色を変えたり、リンクを張る、写真を埋め込むといった事くらいでしたが昨今のサイトは驚くほど進化しており、その仕組みや技術には目を見張るばかりです。 そこで、WEBサイトの進化の歴史を総括的に勉強し現在の技術に追いつきたいのですが良いお勧め本はありますでしょうか。 特定の技術やトピックに絞った本が多すぎ、目当てとなる本が探せませんのでどなたか教えて頂けますと幸いです。 技術深く掘り下げて知ろうとは思いません。時系列にどのような技術が生まれ、それはどのような仕組みで動くのか。また、どのような事を可能にし、どのような目的で実際にインターネットユーザに使用されているのか等分かれば十分です。 例えば、XML、CSS、API、CMSによるサイトの仕組み、等どのような仕組みで動くのかさっぱり分かっていません。 私は本職がWEB作成ではないので素人が読んで分かるような本をどなたか推薦して頂けますでしょうか。どうぞよろしくお願いいたします。
- 締切済み
- その他([技術者向] コンピューター)
- yomi-search の仕組みは??
自サイトに yomi-search(perl版)を設置しようかと思っています。 yomi-searchを設置する際に データベースって必要なのでしょうか?? 不勉強の為 いまひとつその仕組みを理解しできません。 yomi-searchってどのような仕組みで サイトの登録がなされ 検索結果として表示されるのでしょうか??
- 締切済み
- Perl
- WEBサイト上の情報を自動収集するプログラム
WEBサイト上の情報を自動収集して自分のホームページの内容を更新するプログラムを組みたいです。 ロボット型検索エンジンとかの単語を見るのですが、何も知らない初心者が一から学べて作れるようなサイト、または本などの知識を教えてほしいです。 FC2のホームページスペースとかなら借りれそうですがそういうのでもできるんでしょうか? データベースとかそういう大きなものは必要ありません。2サイトくらいの情報で十分ですので。 どうか、ご教授宜しくお願いします。
- ベストアンサー
- その他(プログラミング・開発)
- 複数のサイトをまとめて検索するサービスについて
いくつかのサイトのデータをまとめて検索できるサービスを 提供しているサイトがあります。 例)モノリス(5つの宿泊サイトを一度に検索) http://www.monol.net/ オークファン(6つのオークションサイトを一度に検索) http://www.aucfan.com/search こういったサイトを運営するにはそれぞれのサイトの許可など がいるのでしょうか。 また作成するとすればかなりの技術が必要になるのでしょうか。 外注するとすれば「○○万円ぐらいじゃないかな~」といった 目安もわかれば併せて教えてください。
- ベストアンサー
- その他(プログラミング・開発)
- webカレンダー
WEBサイトで使えるカレンダーを探しております。 スケジュールを公開してサイトを訪問された方にお知らせしたいと思っています。 商用になるのですがなるべくメンテナンスに手間がかからないようなものがあれば教えていただけないでしょうか。 どうぞよろしくお願い致します。
- ベストアンサー
- その他([技術者向] コンピューター)
- PHPを使ったwebサイトを作るにあたって必要なスキル
こんにちは。新高2です。 今、私の趣味のひとつにwebサイトの製作があります。 CMSを用いてコミュニティサイトを運営している傍ら、デザインやプログラミングについて日々勉強中です。 そんな中、最近こんなサイトと出会いました。 ttp://dmvault.ath.cx/ 子供向けのカードゲームのポータルサイトのようなものです。 これを見てシステムの凄さにびっくりしました。 製作者の方は大人の方のようですが、私もいずれかはこのような大掛かりなwebサイトを作りたいと考えています。 こちらがやりたいこととしては ・上記のwebサイトのようにデータを検索できるシステムを実装する。 ・会員登録制にする。(個々のマイページを実装して、データ管理できるようなイメージ) の以上のふたつです。 ですが、まだ知識・技術・経験において全てが乏しい現状です。 現段階で最低限できることはXHTMLとCSSのコーディング、javascriptとAJAXとPHPを少しかじった程度です。 これから上記のようなwebサイトを製作していく上で必須となる知識や技術などありますか? おそらくPHPは必須となるかと思うのですが、どういった点から煮詰めるのがよいのでしょうか? できれば20歳までにはなにか形あるものとして完成させたいです。 おそらくデータベース管理についても必須となるかと思います。 サーバーの運営なども考えなければいけないのかもしれません。 なにから手をつけたらよいのか分からない現状です。 オススメの書籍やwebサイトなどありましたら、紹介していただけると嬉しいです。 莫大な質問なような気がしますが、なにかと助言等いただけるとありがたいです。よろしくおねがいします。
- 締切済み
- PHP
- あるWebサイトにいくと、自動的に別のWebサイトにリンクされる機能はどのでWebサイトも設定可能?Webサーバーによる?
Webサイトのアドレスが変更になった場合などで使用される方法で、あるWebサイトにいくと、自動的に別のWebサイトにリンクされる機能はどのWebサイトでも設定できるの?そのWebサイトの内容をアップして、使用しているWebサーバーによるの? 商用利用のホームページをつくりました。最初は無料のホームページスペースを使いWebサイトを開設しようと思います。でもお客さんが増えてきたら有料サービスのWebサーバーに変更しようと思っています。(有料の方がその方がしっかりしてそうだから。)そのときに問題になるのが、しばらくはお客さんには無料のWebサーバーでのアドレスを通知してしまうことです。新しいアドレスに変更になった後もそれまでのお客さんは逃したくありません。だけれども、古いアドレスを入れると自動で新しいアドレスにリンクしてくれるのだったら問題ありません。
- ベストアンサー
- その他(インターネット・Webサービス)
- Webサイトのデータベース
Webサイトで、商品を検索するデータベースを設置したいと考えています。 選択肢は3種類ぐらい、データは数百件。画像と説明文を表示させたいと考えています。 CGI/Perlの勉強をしようと思いましたが、挫折しました。 有償のもので、もちろん構いませんので、素人でもあつかえる、Webサイト上のデータベースを作成することができるソフトがあれば、ご紹介下さい。 よろしくお願いします。
- ベストアンサー
- その他(ソフトウェア)
- 究極のWebサイトとはどのようなサイトなのでしょう
究極又は最新のWebサイトとはどのようなものでしょうか。 * Webサーバ:Apache、Apache Tomcat * プログラム言語:Java * データベース:XML * マークアップ:XML * メディアファイル:Flash、PNG、SVG、JPG、MP3 * スタイルシート:XSLT、CSS 私は以上の技術を使用したサイトが究極又は最新であると考えていますが、皆さんはどのような技術の使用されているサイトが究極又は最新だと思いますか。 様々な意見をお聞かせいただきたいと思います。よろしくお願いします。
- ベストアンサー
- その他([技術者向] コンピューター)
- このサイトの仕組みを教えてください。
このサイトの仕組みを教えてください。 ttp://affisearch.com/ googleアドセンスのIDを入力すると、 その人の運営しているサイトリストが表示されます。 同じようなものを作りたいのです。 仕組みを教えて下さい。 PHP, PERLどちらでも構いません。 グーグルアドセンスの場合、javascriptです。 <script type="text/javascript"><!-- google_ad_client = "pub-XXXXXXXXXXX"; google_ad_width = 728; google_ad_height = 90; //--> </script> <script type="text/javascript" src="http://pagead2.googlesyndication.com/pagead/show_ads.js"> </script> </div> javascriptだとサーチエンジンで引っかかりません。 上記のサイトはどうやって作っているのでしょうか。
- ベストアンサー
- PHP
補足
ちょっと質問の意図が伝わりにくかったみたいですので、補足いたします。 http://www.aucfan.com/search こっちのほうは、ヤフーオークションとかの、オークションサイトから、出品物、価格のデーターや、出品ページのアドレスなどを自動的に収集して、データーベースにして、表示しているサイトです。主なものだけでも、いくつかやり方があるのはわかりますが、もし、皆さんが同じような機能を持ったサイトを、できるだけ低コストで作るとするなら、どういうやり方で、作りますか?という質問と同じ意味だと思ってもらってかまいません。