- ベストアンサー
ほかのサイトのデータの取得方法
CGIで扱うデータの一部が不定期で不規則に変化します。 たとえばあるときには'a','b'というのを使っていたのに、 その次の日には'a','c'というのを使わないといけないようなものです。 現在は扱うデータの一覧をファイルに保存し、変更があるたびサイト管理者にそのファイルをアップデートしてもらっているのですが、ファイルの変更日時がわかりにくいので変更されているのに気づかないことがある、また毎回変更するのが大変などのデメリットがあります。 よって、自分の所有するサイト使用するデータを保存したファイルを置き、CGIは更新されているかチェックし、変更があるようなら現在のファイルと置き換えるような仕様にしたいと思うのですが、ほかのサイトに保存されているデータの取得方法がわかりません。 たとえば、サーバーの違うhttp://aaa.bb.cc/ddd.datに必要なファイルがあるとして、./eee/ff.datと置き換えるプログラムはどのように作成すればいいのでしょうか？
- shirousa01
- お礼率47% (71/148)
- Perl
- 回答数2
- ありがとう数2
- みんなの回答 （2）
- 専門家の回答
質問者が選んだベストアンサー
perlのメジャーなパッケージで、libwww-perl(LWP)というのがあります。 ActivePerlだと、標準配布なのですが、他のperlだと、自分で導入する必要が あるかも知れません。 LWPの同梱されたスクリプトに、lwp-downloadというのがあります。 これは、httpプロトコルでファイルを取得し、ローカルに書き出すスクリプトですが これをそのまま使うなり、参考にして自分の使いやすいようなものを作るのが 良いかと思います。 perlに拘らなければ、curlなど同じような単独プログラムも存在しますけども、 perlの勉強を兼ねて、手作りするのも良いかと思います。
その他の回答 (1)
- zebedeer
- ベストアンサー率66% (80/121)
perl内で行うほうがエラー制御等は行いやすいですが、面倒だったらwgetでもいいのでは？ こんな感じで。 `wget -q -O ./eee/ff.dat http://www.example.com/ddd.dat`; サーバに入ってなかったら入れる必要ありますが、メジャーな環境ならバイナリあるし。
お礼
解答ありがとうございます。 ですが、今回はPerlの練習とWWWサーバーへの仕様の安易さからLWPで実装しようと思います。
関連するQ&A
- CSVデータをツリー表示させたい
業務で、WEBサイトにCSVデータを表示させたいと考えています。 CSVデータは、毎日更新されるもので、行数も日々変更されます。 項目の中に「レベル」という項目があり、この「レベル」の値を使って、 ツリー表示出来ないかと考えています。 希望としては、決められたフォルダに決められたファイル名で、 CSVデータを置けば、自動的にWEB上にツリー表示されるという ことです。 J-query等で、これを実現出来るプラグインが無いか探しているのですが、 なかなか希望に合うものが見つからず、困っています。 （CSVをWEB表示するものは見つかるのですが、ツリー表示出来る ものが見つかりません） 何か、良い方法があれば、ご教示頂けませんでしょうか？ 例 コード レベル 品名 規格 ・・・・ コード レベル 品名 規格 ・・・・ 1234 1 AAA aaa -1234 1 AAA aaa 2345 2 BBB ｂｂｂ ∟2345 2 ＢＢＢ ｂｂｂ 3456 3 CCC ｃｃｃ ∟3456 3 ＣＣＣ ｃｃｃ 4567 3 DDD ｄｄｄ ∟4567 3 ＤＤＤ ｄｄｄ 5678 3 EEE ｅｅｅ ∟5678 3 ＥＥＥ ｅｅｅ 6789 4 ＦＦＦ ｆｆｆ ∟6789 4 ＦＦＦ ｆｆｆ 7890 3 ＧＧＧ ｇｇｇ ∟7890 3 ＧＧＧ ｇｇｇ
- ベストアンサー
- JavaScript
- エクセルで列にあるユニークなデータの個数が知りたい
おはようございます。 エクセルでA列に以下のようなデータがあるとします。 この中で何種類のデータがあるのかを知りたいのです。 この場合は、AAA,BBB,CCC,DDD,EEEの5種類なので5という答えが欲しいのです。 ただし、A列に入るデータは非常に多岐（800種類以上）に渡ります。 また、印刷を前提としてるためソートなどはできません。 さらに1枚のシートにこのようなデータがいくつかあるので、その決まった範囲内で個数を抽出する必要があります。 なにとぞ皆様のお知恵をお貸しくださいませ。 よろしくお願いします。 AAA AAA BBB CCC AAA DDD DDD BBB DDD DDD EEE EEE
- ベストアンサー
- オフィス系ソフト
- Excelで同一のデータを抽出して横並びに
A B C D 商品コード 注文数 商品コード 注文数 aaa 15 ccc 4 bbb 12 ddd 6 ccc 10 aaa 22 ddd 6 eee 10 eee 5 bbb 7 fff 8 kkk 9 kkk 7 lll 4 上記のようなデータを 以下のように同じ商品コードを横並びに表示させたいのですが どういったcountifとかで試したのですが上手くいかず、どのような関数を使えば可能でしょうか？ A B C D 商品コード 注文数 商品コード 注文数 aaa 15 aaa 22 bbb 12 bbb 7 ccc 10 ccc 4 ddd 6 ddd 6 eee 5 eee 10 fff 8 kkk 7 kkk 9 lll 4 宜しくお願い致します。
- ベストアンサー
- Excel（エクセル）
- Excelの関数に詳しい方、お願いします。
わかりづらい説明かもしれませんが、よろしくお願いします。 例として、 AAA*BBB*CCC*DDD*EEE*FFF AAA*BBB*CCC*DDD*EEE*FFF AAA*BBB*CCC*DDD*EEE*FFF AAA*BBB*CCC*DDD*EEE*FFF AAA*BBB*CCC*DDD*EEE*FFF ・ ・ ・ といった文字列がエクセルの先頭列Ａ１～Ａ100までずらりと並んでいるとします。 各アルファベットには任意の数字（日付など）が入るとして、この並んだ百件のデータからＣＣＣの部分の最大値を表示するための適切な関数があれば教えていただけないでしょうか？ 現在少々急いでいるため言葉足らずで申し訳ありませんが、よろしくお願いいたします.
- ベストアンサー
- オフィス系ソフト
- SQLで○○の値以外を持っているレコードを抽出しないという条件を作りた
SQLで○○の値以外を持っているレコードを抽出しないという条件を作りたいのですが・・・ 例えばこんな感じのテーブルがあったとします。 A1 A2 A3 -- -- -- AAA AA 111 AAA AB 111 AAA BB 222 BBB BB 111 CCC AA 111 CCC AC 555 DDD BB 222 EEE AA 111 EEE AC 333 EEE BB 777 A2の列に「BB」の値"しか"持っていないレコードを抽出したいのです このテーブルで言えば返りは BBB BB 111 DDD BB 222 と期待しています。 値BBのみしか持ってない条件の作り方を御教示願えませんでしょうか。 また、A2の値も文字数以外は規則性があるわけではないので無限パターンです。 詳しい方よろしくお願いします。
- ベストアンサー
- その他(データベース)
- EXCELのVBAで空白列を削除して左づめにできますか？
いつも参考にしています。まだ、マクロの記録にチョット手を加えて自動化？している程度の腕前ですが？ 仕事の都合で下記の問題を解決しなくてはならなくなり、皆様のお知恵をお借りしたいと思い質問させて頂きます。 エクセルのワークシートに空白のセルがランダムに入っているデータがあります。これを、ある列まで（例ではD列までの左の空白セルをなくして左づめのデータとしたいのです。 （例） | A | B | C | D | E | 1|AAA|BBB|CCC|DDD|EEE| 2| |BBB|CCC|DDD|EEE| 3|AAA| |CCC|DDD|EEE| 4|AAA| |CCC| |EEE| 5| | | |DDD|EEE| ↓ | A | B | C | D | E | 1|AAA|BBB|CCC|DDD|EEE| 2|BBB|CCC|DDD| |EEE| 3|AAA|CCC|DDD| |EEE| 4|AAA|CCC| | |EEE| 5|DDD| | | |EEE| ここで、E列以降は詰めないでほしいのです。 できれば、VBAで実現したいのですが、どのような考えで、どのようなコード？を書けばよいのか教えてください。 質問の仕方も用途を得ないで、失礼な質問になっていると思いますが、よろしくお願いします。
- ベストアンサー
- オフィス系ソフト
- VBAでCSVファイルを分割したい
VBAを利用して、あるCSVファイルを一定のレコード数ごとに新しいファイルにファイル分割したいです。 やりたいことは、以下のようなイメージです。 関連サイトなどを参考に自分なりに取り組んでみましたが、なかなかうまくいきません。 VBAでなくても実現できそうですが、ここまでやったので勉強のためにもVBAでやりたいです。 サンプルコードなど教えていただけるとうれしいです。 ヒントでも結構ですので、よろしくおねがいします。 （2レコードずつ分割する例） sample.csv ヘッダ１,ヘッダ2,ヘッダ3,ヘッダ4 aaa@aa.aa,123,あいうえ,111-111 bbb@bb.bb,456,かきくけ,222-222 ccc@cc.cc,789,さしすせ,333-333 ddd@dd.dd,012,たちつて,444-444 eee@ee.ee,345,なにぬね,555-555 fff@ff.ff,678,たちつて,666-666 ↓↓↓ ☆sample_1.csv ヘッダ１,ヘッダ2,ヘッダ3,ヘッダ4 →各ファイルにヘッダも入れたいです。 aaa@aa.aa,123,あいうえ,111-111 bbb@bb.bb,456,かきくけ,222-222 ☆sample_2.csv ヘッダ１,ヘッダ2,ヘッダ3,ヘッダ4 ccc@cc.cc,789,さしすせ,333-333 ddd@dd.dd,012,たちつて,444-444 ☆sample_3.csv ヘッダ１,ヘッダ2,ヘッダ3,ヘッダ4 eee@ee.ee,345,なにぬね,555-555 fff@ff.ff,678,たちつて,666-666
- ベストアンサー
- Visual Basic
- CSVに外部テキストファイルを列として追加する方法
こんにちは。 CSVファイル(base.csv)の先頭列に、別のテキストファイル(add.txt)の中身を新規の列として挿入したいと考えているのですが、よい方法がわかりません。。。 どうのような方法を使えば対応することができるでしょうか？ どうぞよろしくお願いいたします。 ■CSVファイル(master.csv) title,developer_name,seller_name,primary_genre_name,application_url AAA,BBB,CCC,DDD,EEE AAA,BBB,CCC,DDD,EEE AAA,BBB,CCC,DDD,EEE AAA,BBB,CCC,DDD,EEE ■テキストファイル(add.txt) id 000 111 222 333 ↓ ■目標としたファイル(master.csv) id,title,developer_name,seller_name,primary_genre_name,application_url 000,AAA,BBB,CCC,DDD,EEE 111,AAA,BBB,CCC,DDD,EEE 222,AAA,BBB,CCC,DDD,EEE 333,AAA,BBB,CCC,DDD,EEE
- 締切済み
- Ruby
- awkで検索し、特定のフィールドを抽出する方法
UNIX初心者です。 以下のようなデータファイル（AA.dat）から、条件を満たすデータの特定フィールドを別のファイル（BB.dat)に出力したいのです。 どのようにしたら良いのでしょうか？ AA.dat(CSV形式） aaa,22,33,44,55,66,77,88,1,1,0,0,1001 bbb,22,33,44,55,66,77,88,1,1,0,0,1002 ccc,22,33,44,55,66,77,88,1,0,0,0,1001 ddd,22,33,44,55,66,77,88,1,1,0,0,1002 抽出条件（フィールド＝$1～$13) $9==1 かつ $10==1 かつ $11==0 かつ $12==0 かつ $13==1002 出力するフィールド $1,$2,$4,$7,$8 出力結果 BB.dat(CSV形式） bbb,22,44,77,88 ddd,22,44,77,88
- ベストアンサー
- その他（プログラミング・開発）
- 特定データの取り出しについて
どうしても処理がわからなかったのでご教授頂けたら幸いです。 掲示板にて特定記事の上位表示固定の処理をしたいのです。 参考データ ----------------- No Name Date ----------------- 1 aaa 111 2 bbb 222 3 ccc 333 4 ddd 444 5 eee 555 ----------------- というテーブルデータがあったとして、 例えば、2番の記事を上位に表示したい場合は 掲示板上の表示で下記のようにしたいのです。 2.bbb > 222 1.aaa > 111 3.ccc > 333 4.ddd > 444 5.eee > 555 といったように2をきちんと切り抜いた状態です。 よろしくお願いいたします
- ベストアンサー
- MySQL
お礼
LWPを使用して実装しようと思います。 解答有り難うございました。