在 bash 中连接文本文件

Question

我在一个文件夹中有许多文本文件，其中只有一行浮点值，我想在 bash 中将它们连接起来，例如：file_1.txt、file_2.txt ...file_N.txt。我想将它们按从 1 到 N 的顺序放在一个 txt 文件中。有人可以帮我吗？这是我拥有的代码，但它只是以随机方式连接它们。谢谢

for file in *.txt
do 
  cat ${file} >>  output.txt  
done 

Answer 1

这对我有用...

for i in $(seq 0 $N); do [[ -f file_$i.txt ]] && cat file_$i.txt; done > newfile

或者，更简洁

for i in $(seq 0 $N); do cat file_$i.txt 2> /dev/null ;done > newfile

Answer 2

• Glenn Jackman 's answer 是适用于 GNU/Linux 系统的简单解决方案。
• David W. 's answer 是一种便携替代品。

两种解决方案都适用于当前的特定案例，但不是一般，因为它们会用嵌入空格或其他元字符的文件名打断（这些字符在使用时不加引号，对shell具有特殊意义）。

这里是使用带有嵌入空格等的文件名的解决方案。：

---

首选解决方案适用于支持sort -z 和xargs -0 的系统（例如，Linux、OSX、*BSD）：

printf "%s\0" file_*.txt | sort -z -t_ -k2,2n  | xargs -0 cat > out.txt

使用 NUL（空字符，0x0）分隔文件名，从而安全地保留它们的边界。

这是最强大的解决方案，因为它甚至可以正确处理嵌入了 newlines 的文件名（尽管这样的文件名在实践中非常罕见）。不幸的是，sort -z 和 xargs -0不符合 POSIX。

---

POSIX 兼容解决方案，使用xargs -I：

printf "%s\n" file_*.txt | sort -t_ -k2,2n  | xargs -I % cat % > out.txt

处理是基于行的，由于使用-I，cat每个输入文件名调用一次，这使得该方法比上述方法慢.

Answer 3

for file in *.txt
do 
  cat ${file} >>  output.txt  
done 

这对我也有效：

for file in *.txt
do 
  cat $file >>  output.txt  
done

你不需要{}

但更简单的还是：

cat file*.txt > output.txt

因此，如果评论中建议的文件超过 9 个，则可以执行以下操作之一：

files=$(ls file*txt | sort -t"_" -k2g)
files=$(find . -name "file*txt" | sort -t "_" -k2g)
files=$(printf "%s\n" file_*.txt | sort -k1.6n) # Thanks to glenn jackman

然后：

cat $files

或

cat $(find . -name "file*txt" | sort -t "_" -k2g)

最好还是正确编号文件，如果文件少于 100 个则为 file_01.txt，少于 1000 个则为 file_001.txt，依此类推。

---

示例：

ls file*txt
file_1.txt  file_2.txt  file_3.txt  file_4.txt  file_5.txt  file_10.txt

它们只包含相应的编号。

$ cat $files
1
2
3
4
5
10

Answer 4

正如其他人指出的那样，如果您有文件 file_1、file_2、file_3...file_123283，这些文件的内部 BASH 排序会将 file_11 放在 file_2 之前，因为它们'按文本而非数字重新排序。

您可以使用sort 获取您想要的订单。假设你的文件是file_#...

cat $(ls -1 file_* | sort -t_ -k2,2n)

• ls -1 每行列出一个文件。
• sort -t_ 表示用下划线分解排序字段。这使得第二个排序字段成为文件名的数字部分。
• -k2,2n 表示按数字按第二个字段排序。

然后，将所有文件连接在一起。

一个问题是，如果您有大量文件，您最终可能会填满命令行缓冲区。在cat 获取文件名之前，$(...) 必须先展开。

Answer 5

尽管我建议不要解析 ls 的输出，但我们开始吧。

ls 有一个“版本排序”选项，可以根据需要对编号文件进行排序。请参阅下面的演示。

要连接，您需要：

ls -v file*.txt | xargs cat > output

$ touch file{1..20}.txt
$ ls
file1.txt   file12.txt  file15.txt  file18.txt  file20.txt  file5.txt  file8.txt
file10.txt  file13.txt  file16.txt  file19.txt  file3.txt   file6.txt  file9.txt
file11.txt  file14.txt  file17.txt  file2.txt   file4.txt   file7.txt
$ ls -1
file1.txt
file10.txt
file11.txt
file12.txt
file13.txt
file14.txt
file15.txt
file16.txt
file17.txt
file18.txt
file19.txt
file2.txt
file20.txt
file3.txt
file4.txt
file5.txt
file6.txt
file7.txt
file8.txt
file9.txt
$ ls -1v
file1.txt
file2.txt
file3.txt
file4.txt
file5.txt
file6.txt
file7.txt
file8.txt
file9.txt
file10.txt
file11.txt
file12.txt
file13.txt
file14.txt
file15.txt
file16.txt
file17.txt
file18.txt
file19.txt
file20.txt

Answer 6

使用这个：

find . -type f -name "file*.txt" | sort -V | xargs cat -- >final_file

如果文件被编号，那么排序就不会以我们人类期望的自然方式发生。为此，您必须将 -V 选项与 sort 命令一起使用。

Answer 7

您可以使用 ls 列出文件：

for file in `ls *.txt`
do·
  cat ${file} >>  output
done

这里讨论了一些排序技术：Unix's 'ls' sort by name