在 shell 脚本中包含 awk 会使输出为空？

Question

我制作了一个 shell 脚本，可以用来制作 MPD 的播放列表。我可以按照我想要的那样按文件夹和艺术家写歌曲，但是当我尝试使用 awk 在脚本末尾删除重复项时，输出变为空。

脚本如下：

(
mpc search artist 'Black Coast' &&
mpc search artist 'ASTR' &&
ls ~/music/HDD/Chill | awk '$0="HDD/Chill/"$0'
) | tee testi.txt;
awk '!v[$0]++' testi.txt | tee testi.txt

上面的 awk 正确地为字符串添加了前缀，但是如果我在输出下方添加 awk，则输出是一个空文件。但是，当超出脚本文件时，该行仍然有效。

编辑：它适用于

(
mpc search artist 'Black Coast' &&
mpc search artist 'ASTR' &&
ls ~/music/HDD/Chill | awk '$0="HDD/Chill/"$0'
) | awk '!v[$0]++' | tee testi.txt

所以我的问题变成了为什么上面的例子不起作用？

Answer 1

您正在写入您正在阅读的同一个文件。永远不要这样做，因为 shell 可以在读取它之前编写它。你想要这样的东西（未经测试）：

(awk '!v[$0]++' testi.txt | tee tmp.txt) && mv tmp.txt testi.txt

Answer 2

我想这里的问题是您的输入和输出文件是相同的。这将导致它在 awk 可以读取之前被截断以进行写入。

我建议这样做：

(
    mpc search artist 'Black Coast' &&
    mpc search artist 'ASTR' &&
    ls ~/music/HDD/Chill | awk '$0="HDD/Chill/"$0'
) | awk '!v[$0]++' | tee testi.txt

这样，输出文件只被触摸一次。

另外，我不太喜欢 ls 行的外观 - 我建议使用这样的东西：

( cd ~/music && printf '%s\n' HDD/Chill/* )

这会创建一个额外的子shell，但不需要外部子shell，因此您可以将命令更改为：

{
    mpc search artist 'Black Coast' &&
    mpc search artist 'ASTR' &&
    ( cd ~/music && printf '%s\n' HDD/Chill/* )
} | awk '!v[$0]++' | tee testi.txt

如果您的文件名包含换行符，这将失败（但同样，您的原始方法也是如此）。