关于linux:如何在管道上使用“tee”时将stderr写入文件?

How do I write stderr to a file while using “tee” with a pipe?

我知道如何使用teeaaa.sh的输出(STDOUT写入bbb.out中,同时仍在终端中显示:

1
./aaa.sh | tee bbb.out

我现在如何将STDERR写入名为ccc.out的文件,同时仍显示该文件?


我假设你还想在终端上看到stderr和stdout。你可以去问乔希·凯利的答案,但我发现在后台保留一个tail,它输出你的日志文件时非常笨拙。注意你需要保持一个exra fd,然后通过杀死它来进行清理,技术上应该在trap '...' EXIT中这样做。

有更好的方法可以做到这一点,而且你已经发现了它:tee

只有一个tee代表stdout,一个tee代表stderr,而不只是用于stdout。你将如何做到这一点?进程替换和文件重定向:

1
command > >(tee -a stdout.log) 2> >(tee -a stderr.log >&2)

让我们分开来解释一下:

1
> >(..)

>(...)(进程替换)创建了一个FIFO,并让tee监听它。然后,它使用EDOCX1(文件重定向)将stdout从command重定向到您的第一个tee正在侦听的FIFO。

第二种情况相同:

1
2> >(tee -a stderr.log >&2)

我们再次使用进程替换来生成一个从stdin读取并将其转储到stderr.logtee进程。tee在stdout上输出它的输入,但是由于它的输入是stderr,所以我们想再次将tee的stdout重定向到stderr。然后,我们使用文件重定向将command的stderr重定向到fifo的输入(tee的stdin)。

请参阅http://mywiki.wooledge.org/bashguide/inputandoutput

过程替换是你选择bash作为外壳而不是sh(posix或bourne)作为奖励的一个非常可爱的东西。

sh中,您必须手动操作:

1
2
3
4
5
6
out="${TMPDIR:-/tmp}/out.$$" err="${TMPDIR:-/tmp}/err.$$"
mkfifo"$out""$err"
trap 'rm"$out""$err"' EXIT
tee -a stdout.log <"$out" &
tee -a stderr.log <"$err">&2 &
command >"$out" 2>"$err"


为什么不简单地说:

1
./aaa.sh 2>&1 | tee -a log

这只会将stderr重定向到stdout,因此tee会在日志和屏幕上进行响应。也许我遗漏了一些东西,因为其他一些解决方案看起来非常复杂。

注:由于bash版本4,您可以使用|&作为2>&1 |的缩写:

1
./aaa.sh |& tee -a log


这可能对通过谷歌找到这个的人有用。只需取消对要尝试的示例的注释。当然,可以随意重命名输出文件。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
#!/bin/bash

STATUSFILE=x.out
LOGFILE=x.log

### All output to screen
### Do nothing, this is the default


### All Output to one file, nothing to the screen
#exec > ${LOGFILE} 2>&1


### All output to one file and all output to the screen
#exec > >(tee ${LOGFILE}) 2>&1


### All output to one file, STDOUT to the screen
#exec > >(tee -a ${LOGFILE}) 2> >(tee -a ${LOGFILE} >/dev/null)


### All output to one file, STDERR to the screen
### Note you need both of these lines for this to work
#exec 3>&1
#exec > >(tee -a ${LOGFILE} >/dev/null) 2> >(tee -a ${LOGFILE} >&3)


### STDOUT to STATUSFILE, stderr to LOGFILE, nothing to the screen
#exec > ${STATUSFILE} 2>${LOGFILE}


### STDOUT to STATUSFILE, stderr to LOGFILE and all output to the screen
#exec > >(tee ${STATUSFILE}) 2> >(tee ${LOGFILE} >&2)


### STDOUT to STATUSFILE and screen, STDERR to LOGFILE
#exec > >(tee ${STATUSFILE}) 2>${LOGFILE}


### STDOUT to STATUSFILE, STDERR to LOGFILE and screen
#exec > ${STATUSFILE} 2> >(tee ${LOGFILE} >&2)


echo"This is a test"
ls -l sdgshgswogswghthb_this_file_will_not_exist_so_we_get_output_to_stderr_aronkjegralhfaff
ls -l ${0}


要将stderr重定向到文件,请将stdout显示到屏幕,并将stdout保存到文件:

1
./aaa.sh 2>ccc.out | tee ./bbb.out

编辑:要在屏幕上同时显示stderr和stdout,并将它们保存到文件中,可以使用bash的I/O重定向:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
#!/bin/bash

# Create a new file descriptor 4, pointed at the file
# which will receive stderr.
exec 4<>ccc.out

# Also print the contents of this file to screen.
tail -f ccc.out &

# Run the command; tee stdout as normal, and send stderr
# to our file descriptor 4.
./aaa.sh 2>&4 | tee bbb.out

# Clean up: Close file descriptor 4 and kill tail -f.
exec 4>&-
kill %1


换句话说,您希望将stdout导入一个过滤器(tee bbb.out中),将stderr导入另一个过滤器(tee ccc.out中)。除了stdout之外,没有任何标准的方法可以将其他任何东西传输到另一个命令中,但是您可以通过改变文件描述符来解决这个问题。

1
{ { ./aaa.sh | tee bbb.out; } 2>&1 1>&3 | tee ccc.out; } 3>&1 1>&2

另请参见如何grep标准错误流(stderr)?你什么时候会使用一个额外的文件描述符?

在bash(以及ksh和zsh)中,而不是在dash等其他posix shell中,可以使用流程替换:

1
./aaa.sh > >(tee bbb.out) 2> >(tee ccc.out)

注意,在bash中,即使执行了tee命令(ksh和zsh确实等待子进程),该命令也会在./aaa.sh完成后立即返回。如果你做类似于./aaa.sh > >(tee bbb.out) 2> >(tee ccc.out); process_logs bbb.out ccc.out的事情,这可能是个问题。在这种情况下,使用文件描述符杂耍或ksh/zsh代替。


如果使用BASH:

1
2
3
4
5
6
7
8
# Redirect standard out and standard error separately
% cmd >stdout-redirect 2>stderr-redirect

# Redirect standard error and out together
% cmd >stdout-redirect 2>&1

# Merge standard error with standard out and pipe
% cmd 2>&1 |cmd2

信用卡(我头上没有回答)在这里:http://www.cygwin.com/ml/cygwin/2003-06/msg00772.html


以下内容适用于Kornshell(ksh),因为无法进行流程替换,

1
2
3
4
5
6
7
8
# create a combined(stdin and stdout) collector
exec 3 <> combined.log

# stream stderr instead of stdout to tee, while draining all stdout to the collector
./aaa.sh 2>&1 1>&3 | tee -a stderr.log 1>&3

# cleanup collector
exec 3>&-

这里真正的诀窍是2>&1 1>&3的序列,在我们的例子中,它将stderr重定向到stdout,并将stdout重定向到描述符3。此时,stderrstdout尚未合并。

实际上,stderr(作为stdin传递给tee,在那里它登录到stderr.log并重定向到描述符3。

描述符3一直将其记录到combined.log中。因此,combined.log既包含stdout又包含stderr


在我的例子中,一个脚本在将stdout和stderr重定向到一个文件时正在运行命令,如下所示:

1
cmd > log 2>&1

我需要更新它,以便在出现故障时,根据错误消息采取一些操作。当然,我可以删除dup 2>&1并从脚本中捕获stderr,但是错误消息不会进入日志文件以供参考。虽然@lhunath接受的答案应该是相同的,但它将stdoutstderr重定向到不同的文件,这不是我想要的,但它帮助我找到了我需要的确切解决方案:

1
(cmd 2> >(tee /dev/stderr)) > log

通过上面的内容,Log将同时拥有stdoutstderr的副本,我可以从脚本中捕获stderr,而不必担心stdout