对 CSV 文件中的记录进行排序

Question

告诉我如何使用 typescript + node js 对 CSV 文件中的记录进行排序。按 ID 排序。 文件中的记录数最多可达 100 万条。

这是一个文件条目示例：

Blockquote

Answer 1

这是一个概念性的解决方案：

1. 创建一个新的 SQLite 数据库，其中的表具有适合您的列的架构

2. 从源 CSV 文件流式传输数据，一次读取一行：解析该行中的数据并将其插入上一步的 db 表中

3. 创建输出 CSV 文件并附加标题行

4. 以所需的排序顺序遍历 db 表条目，一次一个：将每个条目以正确的列顺序转换回 CSV 行，然后在上一步中将该行附加到 CSV 文件中

5. 清理：（可选地验证您的新 CSV 文件，然后）删除 SQLite db

如果您可以一次将整个已解析的 CSV 数据放入内存中，则可以将每一行推送到一个数组中，而不是使用 db。然后，您只需对数组进行就地排序并迭代其元素。