- ベストアンサー
Perl複数ファイルから一行ずつ読み込んで比較
shiren2の回答
- shiren2
- ベストアンサー率47% (139/295)
ファイルが2000000個あるわけですから、推定所用時間はちゃんと計算した方がいいですよ。 それほどの規模なら、データベースに放り込んでSQLで片付けるのが早いです。 現実的な時間で処理してくれると思います。
関連するQ&A
- 二つのファイルから一行ずつ取り出して計算
aaa.txt と bbb.txtというファイルがあり、それぞれ 1.1 0.1 -0.2 0.9 … といった感じで一行ずつ数値が入っています。 シェルスクリプトを用いて、 この二つのファイルから一行ずつ取り出して足し算を行いたい (例えばaaa.txtの一行目が1.1、bbb.txtの一行目が0.9なら1.1+0.9=2.0) のですが、どうすれば良いでしょうか。
- ベストアンサー
- Linux系OS
- 二つのファイルから一行ずつ取り出して計算
aaa.txt と bbb.txtというファイルがあり、それぞれ 1.1 0.1 -0.2 0.9 … といった感じで一行ずつ数値が入っています。 C言語を用いて、上記ファイルを読み込み、 この二つのファイルから一行ずつ取り出して足し算を行いたい (例えばaaa.txtの一行目が1.1、bbb.txtの一行目が0.9なら1.1+0.9=2.0) のですが、どうすれば良いでしょうか。
- ベストアンサー
- C・C++・C#
- perlをコマンドラインで実行したい
今はperlをコマンドプロンプト上でファイルをコンパイルして実行結果を別のテキストファイルに出力しています。(printなど) ただ、こまごまとした置換え・変換などいちいちテキストファイルにperlを書いてコンパイルして出力ファイルを開いて取り出すというやり方にわずらわしさを感じてきました。 簡単なスクリプトであれば、使い捨ての方がよく感じており、 コマンドプロンプトで試してみたのですが、長い文章やソースなどを変数にいれることができず、（改行がEnterにとられてしまう？？）また、一行にずらずらとかかなくてはならないので、うまくいきません。 なにか、テキストエディタのような感じで、このようなperlスクリプトをコンパイルできるようなものはあるのでしょうか。 copalというものを使ってみたのですが、 ファイルハンドルなどが使えなかったのでだめでした。 どなたかご協力お願いします。
- ベストアンサー
- Perl
- テキスト比較コマンドのdiffについて
unixコマンドにdiffというのがありますね。２つのテキストファイルを比較してその違いを出力するというものです。このコマンドの意味がわからないところがあります。 テキストＡとＢの比較とは、 １ 両者が全く同じかどうかを比較するということなのか、 ２ テキストAとBに含まれている各行を取り出してどこかに一致する行があるかどうかをチェックするということなのか ３ あるいはそれ以外の意味 どのようなことを意味するのでしょうか。 １だったら、１行付け加わっただけでそれ以降が同じものであったとしても全部検索対象となり出力されます。 ２だったら、何をしたことになるのでしょうか。全く同じ内容で行構成を入れ替えたら検索に引っかからないことになります。 私の希望としては１なのですが、そうするとわけがわかなないぐらい多くの出力結果となることが多いはずです。オプションなどで対応するとは思いますが、基本的には何をするコマンドなのでしょうか。 よろしくお願いします。
- 締切済み
- Linux系OS
- 【FLASH】テキストファイルを一行ずつ表示させたい
まだまだFLASH初心者のものです。 不可能な質問かもしれませんが、もしご存知の方がいらっしゃいましたら教えてください。 まず、私が実行したいことをいかに記載いたします。 ------------------------------------ 入力フォームより50文字程度のお知らせを投稿 ↓ ログファイル（log.txt）に一行ずつ投稿されたデータが記録される（最大10記録されます。） ↓ ログファイルのデータを一行ずつフラッシュで表示 （横に流れるニュースのようなかんじで） ------------------------------------ ログファイルの各行の最初に news1=書き込んだデータ1 &news2=書き込んだデータ2 というように変数を入れてあげれば、フラッシュで同じ変数を設定したテキストフィールドに反映させることはできるのですが、フォームから投稿したデータの場合、 書き込んだデータ1 書き込んだデータ2 と変数を頭につけることができません。 （フォームのスクリプト（php）で変数をつけて出力する方法も考えてみましたが常に最新の記事をnews1、ひとつ前の記事をnews2に変更して出力する方法がわからなかったので・・） もし、変数なしで一行ずつを表示させる方法をご存知の方がいらっしゃいましたら教えていただけますでしょうか。 また、ほかに良い方法がございましたらそちらも教えて頂ければと思います。
- ベストアンサー
- Flash
- ファイルの処理について
数百行のテキストファイルを５行づつ取り込んで処理をしたいのですが。。 どうすればいいのでしょうか？ 一行づつは可能なんですが。。。 While(<FILEHANDL>){ 処理 } ヘルプ～。。。。
- ベストアンサー
- Perl
- ファイルを行ごとに比較するシェルスクリプトについて
ファイルを行ごとに比較するシェルスクリプトをご教授ください。 例えば(master.txt)(a.txt)(b.txt)(c.txt)(ok.txt)(ng.txt)と4つのファイルがあり、 (master.txt)と(a.txt)の行を比較し(a.txt)の中のある行が(master.txt)の行と一致した場合(ok.txt)に (master.txt)の行と一致しなかった場合(ng.txt)に入れる。 その後(master.txt)と(b.txt)の比較し(a.txt)が使用したものと同じ(ok.txt)or(ng.txt)に入れる・・・ といったように繰り返していくシェルスクリプトはどのようにして作成するのでしょうか？ txtファイルの中の行はランダムに入っており、x.txtの一行一行ををmaster.txtの全行と比較する必要があります。 自分で作ってみたものは、while文を2重で使い一行ずつ取り出しcase文で行が一致した物を(ok.txt)に入れる 所までは成功しているのですが、複数回繰り返す時にどのようなロジックで不一致行を(ng.txt)に入れる ことができるのかが考え付きませんでした。 よろしくお願いいたします。
- ベストアンサー
- Solaris系OS
- C++で、テキストファイルを一行ずつ読み込んで配列に入れたいのですが、
C++で、テキストファイルを一行ずつ読み込んで配列に入れたいのですが、うまくできません！ テキストには -3.0 1.0 2.0 ・・・などのように一行に一つの数値が入って縦に並んでいます。 それをひとつずつ読み込み、新しい配列（たとえばa[]）に順番にいれたいのです。 a[1]=-3.0,a[2]=1.0、・・・と なるように。 どうか、この初心者にご指導お願いいたします。
- ベストアンサー
- C・C++・C#
- バッチでテキストを出力したときに改行ができない
バッチファイルでテキストを出力するのですが、改行ができません echo 一行目 > C:\temp.txt ？ echo 二行目 >> C:\temp.txt として結果C:\temp.txtファイル内に 一行目 二行目 ではなく 一行目 二行目 としたいのですが、、 ？にはいるものがわかりません。 echo " " >> C:\temp.txt としても""が入ってしまうし echo >> C:\temp.txt （全角スペース）を入れても"ECHO は <ON> です。"とメッセージが出てしまいます。 わかる方お願い致します。
- ベストアンサー
- その他（プログラミング・開発）
- ファイルのパターンマッチ処理の書き方
現在Perlを勉強中です。 あるところからhtmlファイルをダウンロードした後、リンクを抽出する というスクリプトを、以下のように書いてみました。 (ファイルの各行について、「href="」と「"」の間にある、「"」以外が連続する部分を抽出する。 という考えです。) ----ここから------------------------------------------------- #!/usr/bin/perl ##################################################### #ここに、あるところから temp.htm をとってくる処理がある。# ##################################################### # temp.htm 中、 href でリンクされているページを出力 open ( FILE, "temp.htm"); while (<FILE>){ print ("$1\n") if /.*href="([^"]*.html)".*/; } ---ここまで-------------------------------------------------- この抽出部分はもっと簡潔に書けるものでしょうか? と言いますのは、これでも、Cに比べれば簡単なのですが、sedなら、 sed -n 's/.*href="\([^"]*.html\)".*/\1/p' temp.htm の1行で済むところなので、 一々ファイルを開いてwhileでまわすという書き方をするのが面倒だな と思いましたので質問させて頂きました。 (もっとも、sedはそのために特化したコマンドなので さすがにそれと同等に簡単に書けることを望むのが間違いなのかもしれませんが、 「簡単なことは簡単に...」がモットーのようなので、ひょっとしてという期待がありまして。。。) これは、私の書き方が冗長なのか、それとも、perlではこう書くのが普通なのか、 perlの勉強を始めたばかりで判断がつきません。 どちらなのかご教授いただけると幸です。 また、他にもこう書けるまたは私ならこう書くという御意見もお伺いできたら嬉しいです。 宜しくお願いします。
- ベストアンサー
- Perl
お礼
お返事ありがとうございます。excelのRなら、微々たるものですが、なんとか理解できるのですが、SQLというのはほぼ初耳でした。今後、こうした数千万行の処理を行う機会が増えそうなので、回答者様方に一歩でも近づけるように、日々努力を続けたいと思います。 参考というか、すごく役に立ちました！