巨大なCSVファイル編集の方法とは？

質問

• 巨大なCSVファイルを編集するためのエディタやプログラムの選択肢は？
• 巨大なCSVファイルを扱うためにはExcelでは不十分なので、他の方法を探す必要があります。
• 列の絞り込みや行の分割などの作業を簡単にこなすためには、専用のツールやプログラムが必要です。

回答No.6

doara_2011 · ベストアンサー

そりゃExcelのワークシートには読み込める行数の制限はありますが、
VBAでファイルの読み書きをする分には問題ないはず。(ただ、3GB位のテキスト
ファイルを読んだことがあるだけで、大容量のファイルの書き出しは
したことはないのだけれど。この時のExcelのバージョンは2000です。)
以下、VBAのサンプル。
Sub 列を絞る()
fno1 = FreeFile
Open "入力ファイル名" For Input As fno1
fno2 = FreeFile
Open "出力ファイル名" For Output As fno2

Do While Not EOF(fno1)
Input #fno1, a1, a2, a3, a4, a5
Write #fno2, a1, a3, a5
' a1 の前後に"(ダブルコーテーション)が挿入されます。
' 都合が悪ければ以下を使用のこと。
' Print #fno2, CStr(a1); ","; CStr(a3); ","; CStr(a5)
Loop

Close fno1
Close fno2
End Sub

Sub 行を分割()
fno1 = FreeFile
Open "入力ファイル名" For Input As fno1
fno2 = FreeFile
Open "出力ファイル名" For Output As fno2

Do While Not EOF(fno1)
Input #fno1, a1, a2, a3, a4, a5
If a1 = "a001" Then
Write #fno2, a1, a2, a3, a4, a5
End If
Loop

Close fno1
Close fno2
End Sub

フリーウェアを使用するのに制限がないのなら、No.1さんのgrep, awkを使用するのが
お勧めです。特にプログラムを書かなくても(書いても1行程度)実行可能なのが魅力です。
列を絞る場合：
　　awk -F, '{ OFS=","; print $1, $3, $5; }' 入力ファイル名 > 出力ファイル名

行を分割する場合：
　　grep "a001" 入力ファイル名 > 出力ファイル名

以上

お礼

大変丁寧に説明してくださって、ありがとうございます。
無事に目的を達成することができました。