awk 使用 shell 参数或 shell 变量将输出打印到目录

Question

如何使用 shell 参数或命令参数将输出打印到 awk 中的目录？

Shell 程序调用并将参数传递给 awk 程序：

testshell.sh

shelloutputdir="./ouputdir/"
./testawk inputfile.txt ./outputdir/

awk 程序：

testawk

#!/usr/bin/awk -f
{
    print FILENAME > "./outputdir/outputfile1.txt"
    fn2="outputfile2.txt"
    fn3="outputfile3.txt"
    fn4="outputfile4.txt"
    print FILENAME > ARGV[2]"/"fn2
    print FILENAME > ARGV[2]"subdir/"fn3
    print FILENAME > $shelloutputdir"subdir/"fn4
}

注意：

inputfile.txt

只是一个示例，因为 shell 和 awk 程序将处理其他参数。

输出目录已经存在。

./outputdir/
./outputdir/subdir/

输出：

./outputdir/outputfile1.txt
./outputdir/outputfile2.txt
./outputdir/subdir/outputfile3.txt

outputfile4.txt 未创建

错误：

awk: ./testawk:9: (FILENAME=inputfile.txt FNR=1) fatal: can't redirect to `input text filesubdir/outputfile4.txt' (No such file or directory)

问题总结：

1. 如何在 awk 中显式设置输出目录？

2. 如何在awk中使用命令行参数设置输出目录？

3. 如果awk中不存在目录，如何创建？

4. 如何将 shell 变量传递给 awk 变量以设置输出目录？

感谢帮助和任何示例方法

Answer 1

使用 shebang 执行 awk 脚本只会让你的生活变得更艰难，不要这样做。如果你摆脱 shebang 并将“testawk”写为：

odir="$1"
shift
/usr/bin/awk -v odir="$odir" '
{
    print FILENAME > (odir "outputfile1.txt")
    fn2="outputfile2.txt"
    fn3="outputfile3.txt"
    fn4="outputfile4.txt"
    print FILENAME > (odir fn2)
    print FILENAME > (odir "subdir/" fn3)
    print FILENAME > (odir "subdir/" fn4)
}
' "$@"

那么你可以这样称呼它：

shelloutputdir="./outputdir/"
./testawk "$shelloutputdir" inputfile.txt

或者做任何你喜欢的事情。关键是不使用 shebang 可以让您将 awk 与 shell args 以及 awk 文件名与 awk 变量初始值分开。

您可以创建一个目录，其名称存储变量foo with

system("mkdir -p \047" foo "\047")

Answer 2

<sup>注意：
* 此答案根据使用 shebang 行 (#!/usr/bin/awk -f) 的独立awk 脚本解决了所提出的问题。
* Ed Morton's helpful answer 展示了如何从 shell 脚本调用 awk 作为替代方案，这有其优势。</sup>

所有传递给awk的操作数在脚本操作数之后（在这种情况下是独立脚本本身）是默认解释为输入文件。

鉴于./outputdir/ 根据定义是一个目录，它不能作为输入文件，这就是您收到警告的原因。

但是，Awk 提供 伪文件名操作数语法 <var>=<value>，它不是传递 文件名，而是 定义一个 Awk 变量，类似于 pre-script -v <var>=<value> option 语法（并且假设您的调用是由 shebang行，-v-基于选项的变量赋值是不是一个选项）。

请注意，这些赋值发生在它们遇到时在后置脚本操作数列表中，因此您需要将它们放置在之前实际输入文件其处理依赖于它们：

shelloutputdir="./outputdir/"
./testawk odir="$shelloutputdir" inputfile.txt # Note the definition of variable `odir`

^{您可以通过这种方式定义的变量数量没有限制，但是，至少假设您受到命令行的最大总长度的限制，该值接近但小于getconf ARG_MAX 报告了什么。}

上面定义了Awk变量odir，所以你的脚本需要引用那个：

#!/usr/bin/awk -f
{
    fn3="outputfile3.txt"
    print FILENAME > (odir "subdir/" fn3)
}

^{正如Ed Morton 指出的那样，如果输出文件名是从表达式 计算出来的，那么为了稳健，该表达式应该包含在(...) 中；虽然它在 一些 Awk 实现（例如 GNU Awk 和 Mawk）中也可以在没有括号的情况下工作，但它会在其他实现（例如 BSD/macOS Awk）中中断。
Awk POSIX spec 不规范这种情况下的行为。}

---

1. 如何在 awk 中显式设置输出目录？

没有Awk-internal机制，但是你可以使用shell到cd到输出目录beforehand。

1. 如何使用命令行参数在 awk 中设置输出目录？

参见上面的解决方案。 Awk 中没有特殊的 output-directory 参数，但是您可以将 output-directory 路径作为 Awk variable 传递。

1. 如果 awk 中不存在目录，我该如何创建？

没有 awk 内部机制，但是 - 如果创建目录。不能提前在 shell 中使用 - 您可以使用 system() 函数调用 mkdir；例如：

# If the dir. name never contains ' (single quotes):
awk -v odir="out-dir" 'BEGIN { system("mkdir \047" odir "\047") }'

# *From inside your stand-alone Awk script only*, you don't need \047 to represent
# ' chars - see below.
system("mkdir '" odir "'")

# Otherwise, more work is needed:
awk -v odir="out'dir" '
   function shellQuote(s) { gsub("\047", "\047\\\047\047", s); return "\047" s "\047" }
   BEGIN { system("mkdir " shellQuote(odir)) }
'

\047 是一个表示' 的八进制转义序列，必须在从 shell 显式调用awk 时使用它，因为'...' 已经被用来包围整个脚本，防止使用嵌入 ' 字符。完全是因为单引号的 shell 字符串不支持它。

这是 独立 awk 脚本优于从 shell 显式调用 awk 的一个方面：您可以在独立脚本 - 不需要\047。

4. 如何将 shell 变量传递给 awk 变量以设置输出目录？

查看问题 #2 的答案。