代码之家 › 专栏 › 技术社区 › Joel

通过SED的管道故障

pipe sed shell bash

Joel · 技术社区 · 16 年前

我无法接通SED。一旦我将输出通过管道传输到SED,就不能将SED的输出通过管道传输到其他地方。

wget -r -nv http://127.0.0.1:3000/test.html

输出:

2010-03-12 04:41:48 URL:http://127.0.0.1:3000/test.html [99/99] -> "127.0.0.1:3000/test.html" [1]
2010-03-12 04:41:48 URL:http://127.0.0.1:3000/robots.txt [83/83] -> "127.0.0.1:3000/robots.txt" [1]
2010-03-12 04:41:48 URL:http://127.0.0.1:3000/shop [22818/22818] -> "127.0.0.1:3000/shop.29" [1]

我通过sed传输输出以获得一个清晰的URL列表:

wget -r -nv http://127.0.0.1:3000/test.html 2>&1 | grep --line-buffered -v ERROR | sed 's/^.*URL:\([^ ]*\).*/\1/g'

输出:

http://127.0.0.1:3000/test.html
http://127.0.0.1:3000/robots.txt
http://127.0.0.1:3000/shop

然后我想将输出转储到文件,所以我这样做:

wget -r -nv http://127.0.0.1:3000/test.html 2>&1 | grep --line-buffered -v ERROR | sed 's/^.*URL:\([^ ]*\).*/\1/g' > /tmp/DUMP_FILE

我在几秒钟后中断进程并检查文件,但它是空的。

有趣的是,以下内容不会产生任何输出(与上面相同,但通过cat传输sed输出):

wget -r -nv http://127.0.0.1:3000/test.html 2>&1 | grep --line-buffered -v ERROR | sed 's/^.*URL:\([^ ]*\).*/\1/g' | cat

为什么我不能将SED的输出通过管道传输到另一个程序,比如cat?

2 回复 | 直到 16 年前

R Samuel Klatchko 16 年前

当SED正在写入另一个进程或文件时,它将缓冲数据。

尝试添加 --unbuffered SED的选项。

ghostdog74 16 年前

你也可以用锥子。由于您的URL出现在字段3中,所以您可以使用$3,也可以删除grep。

awk '!/ERROR/{sub("URL:","",$3);print $3}' file

推荐文章

twisted · 将apache2 CustomLog管道传输到以其他用户身份运行的程序

4 年前

jjmerelo · 使用Proc::Async从绑定管道读取

8 年前

Vingtoft · 使用管道的Python多进程无阻塞内部通信

8 年前

marc · grep pipe sed命令

8 年前

madsantos · Bash-在不停止tail的情况下对每个grep通信运行命令-n0-f

8 年前

loretoparisi · 使用xargs将输入文件参数重定向到bash命令

8 年前

Wolfat · 无法从C中的管道执行读取?

8 年前

E.S. · Java-重定向进程输入/输出(管道)暂停[重复]

8 年前

AbhiNickz · 如何捕获通过管道传输到Rust程序的流程的输出?

8 年前

Arka Pal · 关闭管道中未使用的端部

8 年前