Gscripts 获取大型 CSV

Question

这可能很容易，但我一直在苦苦挣扎。我正在获取 CSV 并将其写入谷歌表格。 CSV 每天更新，最近对我来说太大了，无法继续使用 ImportData。 Max Mahkrov 下面的代码几乎可以工作，但数据仍然太大，我无法在工作表中写入。如何编写列的选择（例如 1-8）？

对我来说更好的是根据日期过滤行，但我看到有一个 ArrayLib 库曾经具有该功能，现在已经不存在了。

javascript：

function getBigCsv() {
  var url = 'https:URL.csv';
  var csv = UrlFetchApp.fetch(url);
  var data = Utilities.parseCsv(csv);
  SpreadsheetApp.getActive().getSheetByName('Sheet1').getRange(2, 1, data.length, data[0].length).setValues(data);
}

Answer 1

Utilities.parseCsv 返回您可以过滤的二维数组，例如与map()

示例：

function getBigCsv() {
  var url = 'https:URL.csv';
  var csv = UrlFetchApp.fetch(url);
  var data = Utilities.parseCsv(csv);
  data = data.map(function(row){return [row[0], row[1], row[2], row[3], row[4], row[5], row[6], row[7]]});
  SpreadsheetApp.getActive().getSheetByName('Sheet1').getRange(2, 1, data.length, data[0].length).setValues(data);
}

Answer 2

将数据限制为 Date().valueOf() 大于 dtv。我可能会使用自定义对话框来准确选择您希望显示的天数。但我不想写，所以我会留给你。

function getSmallerCsv() {
  const dt = new Date();
  const dtv = new Date(dt.getFullYear(),dt.getMonth(),dt.getDate()).valueOf();
  var url = 'https:URL.csv';
  var csv = UrlFetchApp.fetch(url);
  var data = Utilities.parseCsv(csv);
  data = data.map(function(row){return [row[0], row[1], row[2], row[3], row[4], row[5], row[6], row[7]]}).filter(r => new Date(r[?]).valueOf() > dtv);
  SpreadsheetApp.getActive().getSheetByName('Sheet1').getRange(2, 1, data.length, data[0].length).setValues(data);
}