使用 aws s3 命​​令获取 zip 文件中的记录数（行数）的有效和最快方法是什么？

Question

我想获取 s3 存储桶中存在的 zip 文件中的记录数。你能告诉我得到结果的最快方法是什么吗？

我在命令下运行，但这不起作用。如果我做错了什么，请纠正我。

aws s3 cp s3://itx-agu-lake/raw/vs-1/load-1619/data/phd_admsrc.txt.gz - | wc -l

上面的命令给了我 0。但实际计数是 24。

Answer 1

你需要解压.gz文件：

aws s3 cp s3://bucket/object.gz - | zcat | wc -l

这会将 S3 对象复制到 stdout，通过zcat 将其发送到解压缩，然后将输出发送到wc 以计算行数。