cakephpで大量データ取得と設計

質問

現在simple_html_dom.phpを使いデータを取得しているのですが、このデータを使ってcakephpで
サイト作成を考えており、普通ならどういうディレクトリ構成になるのか知りたい次第です。

疑問に感じていることを書かせていただきますのでお答えいただけますと幸いです。

(1)データ取得用ファイルはどこに置き、どこに書くべきか

例えばsimple_html_dom.phpを読み込んだファイルをsample.phpとします。
その場合、この2つのファイルはインストールしたcakeファイルのどこにおいておくものなのでしょうか？

現在のディレクトリ例：/var/www/html/cake/app/...

基本的にsample.phpをデータ取得、データベースに保存用
cakeをデータベースから取得して、表示用という風に考えておりますが、これで問題ないでしょうか？

また、素朴な疑問なのですが、上記sample.phpを使わずにControllerに直接書いたりすること
はあるのでしょうか?

(2)取得したいサイトが複数ある場合

例えば、取得したいサイトが10個ある場合、その場合１つのファイル（例えばsample.php)の中に書くものでしょうか？cronを使って更新していきたいと考えておりますので、管理しやすい方法をご教授いただきたい次第です。

以上になりますが、何卒宜しくお願い申し上げます。

回答No.1

hogehoge78

Simple Html Dom Parserをどのように実行しようとお考えなのでしょうか。

simple_html_dom.phpを読み込ませたsimple.phpとはどのようなものですか？

単純に、simple.phpの中に、DOMパーサで何らかのデータを取得する一連の処理内容が書かれているということですか？

通常であれば、
app/Console/Command/
ディレクトリの中に、Shellを書きます。

■TestShell.php
<?php

App::uses('AppShell', 'Console/Command');

class TestShell extends AppShell{
public function main(){
$this->out('hello world');
}
}

?>
上記の内容は、
/path/to/cake/lib/Cake/Console/cake test
などのように、コマンドラインで呼び出すことができます。
WindowsでもLinux系でも呼び出しは試せるので一度お試しいただければ。

詳しい内容は、英語ですが、
http://book.cakephp.org/2.0/ja/console-and-shells.html
にCake2.x用のマニュアルがあります。

Cake ShellあたりでGoogleで検索すると、1.2系の話とかで書き方とか資料は出てきます。
今回コレを記述するにあたり、
http://yuheikagaya.hatenablog.jp/entry/20080730/1217421386
こちらを参考にさせていただきました。

あとは上記のような規定の範囲に、simple.phpの中で記述した内容を書き、cronにでも登録スレばよいのではないかと思います。