複数のサイトをまとめて検索するサービスについて

質問

いくつかのサイトのデータをまとめて検索できるサービスを
提供しているサイトがあります。

例）モノリス（５つの宿泊サイトを一度に検索）
　　http://www.monol.net/

　　オークファン（６つのオークションサイトを一度に検索）
　　http://www.aucfan.com/search

こういったサイトを運営するにはそれぞれのサイトの許可など
がいるのでしょうか。
また作成するとすればかなりの技術が必要になるのでしょうか。
外注するとすれば「○○万円ぐらいじゃないかな～」といった
目安もわかれば併せて教えてください。

回答No.1

popesyu · ベストアンサー

・サイトの許可
インターネットに公開されているデータなどで法的にはそういう義務はないです。但し、ロボット検索で相手サーバーに突っ込むことになるのですから、おそらく相手は嫌がりますし、話を通していないと対策をされるかもしれませんし、最悪のケースでは負荷をかけすぎると業務妨害で訴えられることもあるかもしれません（その前に警告ぐらいはあるでしょうが）。まぁ個人が自分専用に作った自動収集プログラム程度でしたら黙認してくれるでしょう。

モノリスの方はおそらく相手に話しを通しているというかちゃんと契約をしているかと思います（広告も一切ないですし）。モノリス経由での購入にはバックがあるのかも。
オークファンは良く分かりませんが、許可ぐらいは得ているかもしれません。

・作成
単純に特定サイトから特定条件に見合うデータを引っ張ってきて、それを見れる形に成形するというだけなら簡単にできます。まさしくCGIで良く使われるPerlなどはそのための言語とも言えますし。なれた人なら数時間で作っちゃうでしょう。それだけなら詳しい知り合いに昼飯一回おごるからという程度のもので可能です。
でそういったシステムをWeb上に公開してある程度のアクセスがあるというものにするならこれはまた全く別問題で、サーバーを用意して、回線も確保して、また自前でDBも構築する必要もあるでしょうし、作る部分よりもそちらのメンテナンス維持管理の方が大変かと思います（参照するサイトが増えたり、あるいはサイト側の仕様が変わったりしたらその都度修正する必要もありますし）。
この場合でしたらどの程度の規模を想定されているのかということで大きく料金は異なります。上記のメンテナンスやそれ以外の費用を含めて数十万から数百万といったものになるかと思います。

回答No.2

notnot

そういうサイトが無ければ、利用者は個別に検索するだけなので、検索されるサイト側の負荷は変わりません。
普通に考えると許可は要らないと思いますが、通常のブラウザがアクセスするのと異なるやり方でアクセスすると、不法行為とみなされる可能性があります。

技術はcgiでちょっとした掲示板を作れる程度のスキルがあればあとは労力だけでしょう。相手サイトのデザイン変更があると、情報を取ってくる部分作り直しだし。

とりあえず動けば良いなら学生バイトで100万くらい。継続して運用するなら上記修正がしやすいように設計を工夫したりあとドキュメント作成も必要なので数百万の上のほうでしょうか。自分のサイトのデザインには凝らないという前提で。