如何在使用带有管道的“tee”时将 stderr 写入文件？

Question

我知道如何使用tee 将aaa.sh 的输出（STDOUT）写入bbb.out，同时仍然在终端中显示：

./aaa.sh | tee bbb.out

我现在如何将STDERR 写入名为ccc.out 的文件，同时仍然显示它？

Answer 1

我假设您仍然希望在终端上看到 STDERR 和 STDOUT。您可以寻求 Josh Kelley 的回答，但我发现在后台保留一个 tail，它会输出您的日志文件非常笨拙和笨拙。请注意您需要如何保留一个额外的 FD，然后通过杀死它来进行清理，从技术上讲，应该在 trap '...' EXIT 中这样做。

有一种更好的方法可以做到这一点，您已经发现了它：tee。

只有，而不是仅仅将它用于您的标准输出，有一个用于标准输出的三通和一个用于标准错误。你将如何做到这一点？进程替换和文件重定向：

command > >(tee -a stdout.log) 2> >(tee -a stderr.log >&2)

让我们分解并解释一下：

> >(..)

>(...)（进程替换）创建一个 FIFO 并让tee 监听它。然后，它使用>（文件重定向）将command 的STDOUT 重定向到您的第一个tee 正在侦听的FIFO。

第二个也是这样：

2> >(tee -a stderr.log >&2)

我们再次使用进程替换来创建一个tee 进程，该进程从 STDIN 读取并将其转储到 stderr.log。 tee 将其输入输出回 STDOUT，但由于它的输入是我们的 STDERR，我们想再次将 tee 的 STDOUT 重定向到我们的 STDERR。然后我们使用文件重定向将command的STDERR重定向到FIFO的输入（tee的STDIN）。

见http://mywiki.wooledge.org/BashGuide/InputAndOutput

进程替换是您选择bash而不是sh（POSIX或Bourne）作为shell的额外好处之一。

---

在sh 中，您必须手动执行操作：

out="${TMPDIR:-/tmp}/out.$$" err="${TMPDIR:-/tmp}/err.$$"
mkfifo "$out" "$err"
trap 'rm "$out" "$err"' EXIT
tee -a stdout.log < "$out" &
tee -a stderr.log < "$err" >&2 &
command >"$out" 2>"$err"

Answer 2

为什么不简单：

./aaa.sh 2>&1 | tee -a log

这只是将stderr 重定向到stdout，因此 tee 回显到日志和屏幕。也许我遗漏了一些东西，因为其他一些解决方案看起来真的很复杂。

注意：从 bash 版本 4 开始，您可以使用 |& 作为 2>&1 | 的缩写：

./aaa.sh |& tee -a log

Answer 3

这对于通过 google 找到此内容的人可能很有用。只需取消注释您想尝试的示例。当然，您可以随意重命名输出文件。

#!/bin/bash

STATUSFILE=x.out
LOGFILE=x.log

### All output to screen
### Do nothing, this is the default


### All Output to one file, nothing to the screen
#exec > ${LOGFILE} 2>&1


### All output to one file and all output to the screen
#exec > >(tee ${LOGFILE}) 2>&1


### All output to one file, STDOUT to the screen
#exec > >(tee -a ${LOGFILE}) 2> >(tee -a ${LOGFILE} >/dev/null)


### All output to one file, STDERR to the screen
### Note you need both of these lines for this to work
#exec 3>&1
#exec > >(tee -a ${LOGFILE} >/dev/null) 2> >(tee -a ${LOGFILE} >&3)


### STDOUT to STATUSFILE, stderr to LOGFILE, nothing to the screen
#exec > ${STATUSFILE} 2>${LOGFILE}


### STDOUT to STATUSFILE, stderr to LOGFILE and all output to the screen
#exec > >(tee ${STATUSFILE}) 2> >(tee ${LOGFILE} >&2)


### STDOUT to STATUSFILE and screen, STDERR to LOGFILE
#exec > >(tee ${STATUSFILE}) 2>${LOGFILE}


### STDOUT to STATUSFILE, STDERR to LOGFILE and screen
#exec > ${STATUSFILE} 2> >(tee ${LOGFILE} >&2)


echo "This is a test"
ls -l sdgshgswogswghthb_this_file_will_not_exist_so_we_get_output_to_stderr_aronkjegralhfaff
ls -l ${0}

Answer 4

要将 stderr 重定向到文件，将 stdout 显示到屏幕，并将 stdout 保存到文件：

./aaa.sh 2>ccc.out | tee ./bbb.out

编辑：要将 stderr 和 stdout 都显示到屏幕并将两者保存到文件中，您可以使用 bash 的 I/O redirection：

#!/bin/bash

# Create a new file descriptor 4, pointed at the file
# which will receive stderr.
exec 4<>ccc.out

# Also print the contents of this file to screen.
tail -f ccc.out &

# Run the command; tee stdout as normal, and send stderr
# to our file descriptor 4.
./aaa.sh 2>&4 | tee bbb.out

# Clean up: Close file descriptor 4 and kill tail -f.
exec 4>&-
kill %1

Answer 5

换句话说，您希望将 stdout 输送到一个过滤器 (tee bbb.out) 并将 stderr 输送到另一个过滤器 (tee ccc.out)。除了标准输出之外，没有标准的方法可以将任何内容通过管道传输到另一个命令中，但是您可以通过处理文件描述符来解决这个问题。

{ { ./aaa.sh | tee bbb.out; } 2>&1 1>&3 | tee ccc.out; } 3>&1 1>&2

另请参阅How to grep standard error stream (stderr)? 和 When would you use an additional file descriptor?

在 bash（以及 ksh 和 zsh）中，但不能在 dash 等其他 POSIX shell 中，您可以使用process substitution：

./aaa.sh > >(tee bbb.out) 2> >(tee ccc.out)

请注意，在 bash 中，此命令会在 ./aaa.sh 完成后立即返回，即使 tee 命令仍在执行（ksh 和 zsh 会等待子进程）。如果您执行./aaa.sh > >(tee bbb.out) 2> >(tee ccc.out); process_logs bbb.out ccc.out 之类的操作，这可能是个问题。在这种情况下，请改用文件描述符杂耍或 ksh/zsh。

Answer 6

如果使用 bash：

# Redirect standard out and standard error separately
% cmd >stdout-redirect 2>stderr-redirect

# Redirect standard error and out together
% cmd >stdout-redirect 2>&1

# Merge standard error with standard out and pipe
% cmd 2>&1 |cmd2

信用（不是从我的头顶回答）在这里：http://www.cygwin.com/ml/cygwin/2003-06/msg00772.html

Answer 7

如果你使用zsh，你可以使用多个重定向，所以你甚至不需要tee：

./cmd 1>&1 2>&2 1>out_file 2>err_file

在这里，您只是将每个流重定向到自身和目标文件。

---

完整示例

% (echo "out"; echo "err">/dev/stderr) 1>&1 2>&2 1>/tmp/out_file 2>/tmp/err_file
out
err
% cat /tmp/out_file
out
% cat /tmp/err_file
err

请注意，这需要设置 MULTIOS 选项（这是默认设置）。

MULTIOS

在尝试多次重定向时执行隐式tees 或cats（请参阅Redirection）。

Answer 8

在我的例子中，一个脚本正在运行命令，同时将 stdout 和 stderr 都重定向到一个文件，类似于：

cmd > log 2>&1

我需要对其进行更新，以便在出现故障时根据错误消息采取一些措施。我当然可以删除 dup 2>&1 并从脚本中捕获 stderr，但是错误消息不会进入日志文件以供参考。虽然@lhunath 接受的答案应该做同样的事情，但它将stdout 和stderr 重定向到不同的文件，这不是我想要的，但它帮助我想出了我需要的确切解决方案：

(cmd 2> >(tee /dev/stderr)) > log

通过以上内容，日志将包含stdout 和stderr 的副本，我可以从我的脚本中捕获stderr，而不必担心stdout。

Answer 9

以下内容适用于进程替换不可用的 KornShell(ksh)，

# create a combined(stdin and stdout) collector
exec 3 <> combined.log

# stream stderr instead of stdout to tee, while draining all stdout to the collector
./aaa.sh 2>&1 1>&3 | tee -a stderr.log 1>&3

# cleanup collector
exec 3>&-

这里真正的技巧是2>&1 1>&3 的序列，在我们的例子中它将stderr 重定向到stdout 并将stdout 重定向到描述符3。此时stderr 和stdout 尚未合并。

实际上，stderr(as stdin) 被传递到 tee，它记录到 stderr.log 并重定向到描述符 3。

描述符3 一直将其记录到combined.log。所以combined.log 包含stdout 和stderr。

Answer 10

像accepted answer well explained by lhunath一样可以使用

command > >(tee -a stdout.log) 2> >(tee -a stderr.log >&2)

请注意，如果您使用 bash，可能会遇到一些问题。

让我以matthew-wilcoxson 为例。

对于那些“眼见为实”的人来说，快速测试一下：

(echo "Test Out";>&2 echo "Test Err") > >(tee stdout.log) 2> >(tee stderr.log >&2)

就我个人而言，当我尝试时，我得到了这样的结果：

user@computer:~$ (echo "Test Out";>&2 echo "Test Err") > >(tee stdout.log) 2> >(tee stderr.log >&2)
user@computer:~$ Test Out
Test Err

两条消息没有出现在同一级别。为什么Test Out 好像是我之前的命令？
提示在一个空白行，让我认为过程没有完成，当我按Enter这个修复它。
当我检查文件的内容时，没关系，重定向有效。

让我们再做一次测试。

function outerr() {
  echo "out"     # stdout
  echo >&2 "err" # stderr
}

user@computer:~$ outerr
out
err

user@computer:~$ outerr >/dev/null
err

user@computer:~$ outerr 2>/dev/null
out

再次尝试重定向，但使用此功能。

function test_redirect() {
  fout="stdout.log"
  ferr="stderr.log"
  echo "$ outerr"
  (outerr) > >(tee "$fout") 2> >(tee "$ferr" >&2)
  echo "# $fout content :"
  cat "$fout"
  echo "# $ferr content :"
  cat "$ferr"
}

就我个人而言，我有这样的结果：

user@computer:~$ test_redirect
$ outerr
# stdout.log content :
out
out
err
# stderr.log content :
err
user@computer:~$

空行没有提示，但是看不到正常输出，stdout.log内容好像有错，只有stderr.log好像没问题。 如果我重新启动它，输出可能会有所不同...

那么，为什么？

因为，like explained here：

请注意，在 bash 中，此命令会在 [first command] 完成后立即返回，即使 tee 命令仍在执行（ksh 和 zsh 确实会等待子进程）

所以，如果你使用 bash，最好使用this other answer 中给出的更好的例子：

{ { outerr | tee "$fout"; } 2>&1 1>&3 | tee "$ferr"; } 3>&1 1>&2

它将解决以前的问题。

现在的问题是，如何检索退出状态码？
$? 不起作用。
我没有找到比使用set -o pipefail（set +o pipefail 关闭）打开管道故障并像这样使用${PIPESTATUS[0]} 更好的解决方案

function outerr() {
  echo "out"
  echo >&2 "err"
  return 11
}

function test_outerr() {
  local - # To preserve set option
  ! [[ -o pipefail ]] && set -o pipefail; # Or use second part directly
  local fout="stdout.log"
  local ferr="stderr.log"
  echo "$ outerr"
  { { outerr | tee "$fout"; } 2>&1 1>&3 | tee "$ferr"; } 3>&1 1>&2
  # First save the status or it will be lost
  local status="${PIPESTATUS[0]}" # Save first, the second is 0, perhaps tee status code.
  echo "==="
  echo "# $fout content :"
  echo "<==="
  cat "$fout"
  echo "===>"
  echo "# $ferr content :"
  echo "<==="
  cat "$ferr"
  echo "===>"
  if (( status > 0 )); then
    echo "Fail $status > 0"
    return "$status" # or whatever
  fi
}

user@computer:~$ test_outerr
$ outerr
err
out
===
# stdout.log content :
<===
out
===>
# stderr.log content :
<===
err
===>
Fail 11 > 0

Answer 11

发送到标准错误 (STDERR) 的编译错误可以通过以下方式重定向或保存到文件中：

重击： $ gcc temp.c &> error.log

csh: % gcc temp.c |& tee error.log

见：https://www.linuxquestions.org/questions/linux-kernel-70/how-to-redirect-compilation-build-error-to-a-file-831099/

Answer 12

感谢@lhunath 在 posix 中的回答， 这是我在 posix 中需要正确修复的更复杂的情况：

# Start script main() function
# - We redirect stdout to file_out AND terminal
# - We redirect stderr to file_err, file_out AND terminal
# - Terminal and file_out have both stdout and stderr, while file_err only holds stderr

main() {
    # my main function
}

log_path="/my_temp_dir"
pfout_fifo="${log_path:-/tmp}/pfout_fifo.$$"
pferr_fifo="${log_path:-/tmp}/pferr_fifo.$$"

mkfifo "$pfout_fifo" "$pferr_fifo"
trap 'rm "$pfout_fifo" "$pferr_fifo"' EXIT

tee -a "file_out" < "$pfout_fifo" &
    tee -a "file_err" < "$pferr_fifo" >>"$pfout_fifo" &
    main "$@" >"$pfout_fifo" 2>"$pferr_fifo"; exit