处理非常大的matlab文件

Question

我在 WINDOWS 7 上有一个无法更改的旧版 Matlab 代码。

它读取格式为 CSV 的输入文件：

SNo    Date         Qty 
1      41640        100 
2      41641        150

并做它需要做的任何事情。

但我有一个新版本的 CSV 文件，它有格式：

SNo    Date            Qty  
1      1/1/2013        100  
2      1/2/2013        150

CSV 文件很大，因此无法通过在 Excel 中打开 CSV 文件将日期列更改为数字格式。所以，我正在考虑使用 Matlab 生成一个修改后的第二列作为 excel 编号的文件，并使其对遗留代码可读。

那么，我如何完成上述生成的新 CSV 文件以读取到旧代码中。

Answer 1

修改塞巴斯蒂安的答案以“一次性”完成：

fin = fopen('csv_input.csv');
fout = fopen('csv_out.csv', 'w');

rawData = textscan(fin, "%d %i/%i/%i %i', Inf); % <<< read all at once
matlabDates = datenum(rawData(:,[4 3 2])); % <<< check that this works as expected
excelDates = m2xdate(matlabDates);
outputArray = [rawData[:,1] excelDates rawData(:,5)];
fprintf(fout, '%i %i %i\n", outputArray);  % <<< check that this works as expected

fclose(fin);
fclose(fout);

我无法对此进行测试 - 因此请注意带有 <<< 的三行的结果，以确保格式符合预期（例如 - rawData 是单元格数组吗？）

这可能比 Sebastian 的回答更有效，但代价是一次性将整个数组存储在内存中。

Answer 2

你可以例如执行以下操作；

fin = fopen('csv_input.csv');
fout = fopen('csv_out.csv', 'w+');

offset = datenum([2013,1,1,0,0,0]) - 41640;

dvec = zeros(1,6);
while ~feof(fid)
    l = fgetl(fidn);
    % parse line by line
    nums = sscanf(l, '%i %i/%i/%i %i')';
    dvec(1:3) = nums([4,2,3]);
    % convert to datenum using the calculated offset
    date = datenum(dvec) - offset;
    fprintf(fout, '%i %i %i\n', nums(1), date, nums(5));
end

fclose(fin);
fclose(fout);

免责声明：未经测试；）