容量の大きいCSVファイルの読み込みについて

質問

容量の大きいCSVファイルの読み込みについて

23メガバイトあるCSVファイルに格納し、datファイルに書き込みを行いたいのですが、実行してみるとセグメンテーション違反が表示され上手くいきません。どなたか具体的に教えてください。 環境はMacOSです。

下にファイルを格納し標準出力するまでのプログラムとCSVファイルの内容を記述します。

//********************************************************************************//
#include <stdio.h>
#include <string.h>
#include <stdlib.h>
#define D_LENGTH 10000000000000

struct Data{

double voltage;
double pressure;
double trigger;

};

int main(int argc, char *argv[])
{

FILE* fp; // ファイルポインタ用
double ret;
int n, i = 0;

struct Data *dt;

fp = fopen("p37-e1.csv","r");
if (fp == NULL) {
printf( "file open error\n" );
exit(EXIT_FAILURE);
}

dt = (struct Data*)malloc(sizeof(struct Data)*D_LENGTH);

while( ( ret = fscanf( fp, "%[^,],%[^,],%[^,],%lf",dt[i].voltage,dt[i].pressure,dt[i].trigger) ) != EOF ){

i++;
}

printf("\n");
printf("Read File*******************\n");

for (n = 0; n < i; n++)
printf("%lf,%lf,%lf\n",dt[n].voltage,dt[n].pressure,dt[n].trigger);

free(dt);

return(0);
}

//***************************************************************************//

p37-e1.csv
//***************************************************************************//

2.329595,0.001373,-4.861982
2.325628,0.001984,-4.744793
2.320745,0.001678,-4.659953
2.319829,0.002289,-4.707866
2.319219,0.002289,-4.699321
2.317082,0.002594,-4.532387
2.312505,0.001984,-4.575723
.
.
.
.
//*********************************************//

回答No.1

ICE_FALCON · ベストアンサー

fscanf( fp, "%[^,],%[^,],%[^,],%lf",dt[i].voltage,dt[i].pressure,dt[i].trigger)
が変ですね。

１．[^,]は文字列読み込みなんでdouble型には渡せません。
２．%が４つあるのに後に続く変数が３つなのも変。

double型に読み込ませたいのなら
fscanf( fp, "%lf,%lf,%lf\n",&dt[i].voltage,&dt[i].pressure,&dt[i].trigger)

補足

ご指摘ありがとうございます。
早速、問題の部分を変更しましたが、実行してみると"Bus error"と表示され上手くいきません。
　度々すみませんが、御指南おねがいします。

回答No.4

ICE_FALCON

#1です。
bus errorね

"&"付け忘れてない？
&dt[n].voltage,&dt[n].pressure,&dt[n].trigger
もしくはmalloc失敗とか

回答No.3

和泉 博（@hiroshi09s）

なんで cp や mv や more を使わないのかと思ったら MacOS ですか。

/* Gcc on Mac OSX */
#include <stdio.h>
#include <string.h>
#include <stdlib.h>
#define SIZE 64
#define FILE_NAME "p37-e1.csv"

struct Data{
double voltage;
double pressure;
double trigger;
};

int main(int argc, char *argv[]) {
FILE* fp; // ファイルポインタ用
int n, i, file_size;
struct Data *dat;
char buff[SIZE];

if ((fp = fopen(FILE_NAME,"r")) == NULL) {
printf( "file open error\n" );
exit(EXIT_FAILURE);
}

/* 理由：3×8=24 bytes < 「2.329595,0.001373,-4.861982」=27 bytes */
fseek(fp, 0, SEEK_END);
file_size = ftell(fp);
dat = (struct Data*)malloc(file_size);
printf("malloc address= %p, file size= %d\n", dat, file_size);

fseek(fp, 0, SEEK_SET);
i = 0;
while(fgets( buff, SIZE, fp) != NULL ){
dat[i].voltage = atof(strtok(buff, ","));
dat[i].pressure = atof(strtok(NULL, ","));
dat[i].trigger = atof(strtok(NULL, "\n"));
i++;
}
fclose(fp);

printf("\n");
printf("Read File (%d lines) *******************\n", i);
for (n = 0; n < i; n++)
printf("%lf,%lf,%lf\n",dat[n].voltage,dat[n].pressure,dat[n].trigger);

free(dat);

return 0;
}

回答No.2

titokani

>dt = (struct Data*)malloc(sizeof(struct Data)*D_LENGTH);
>while( ( ret = fscanf( fp, "%[^,],%[^,],%[^,],%lf",dt[i].voltage,dt[i].pressure,dt[i].trigger) ) != EOF ){

mallocが成功したかどうかチェックしていませんよ。