cat a.txt | xargs -I % echo %
在上面的例子中,xargs使用echo %作为命令参数。但在某些情况下,我需要多个命令来处理参数,而不是一个。例如:
cat a.txt | xargs -I % {command1; command2; ... }
但是xargs不接受这种形式。我知道的一种解决方案是,我可以定义一个函数来包装命令,但我想避免这样做,因为它很复杂。有没有更好的解决方案?
cat a.txt | xargs -I % echo %
在上面的例子中,xargs使用echo %作为命令参数。但在某些情况下,我需要多个命令来处理参数,而不是一个。例如:
cat a.txt | xargs -I % {command1; command2; ... }
但是xargs不接受这种形式。我知道的一种解决方案是,我可以定义一个函数来包装命令,但我想避免这样做,因为它很复杂。有没有更好的解决方案?
当前回答
这似乎是最安全的版本。
tr '[\n]' '[\0]' < a.txt | xargs -r0 /bin/bash -c 'command1 "$@"; command2 "$@";' ''
(可以删除-0,并将tr替换为重定向(或者可以将文件替换为空分隔文件)。它主要是在那里,因为我主要使用xargs查找与-print0输出)(这可能也与xargs版本没有-0扩展名有关)
这是安全的,因为args在执行时将参数作为数组传递给shell。当使用["$@"][1]获得所有这些进程时,shell(至少是bash)会将它们作为未更改的数组传递给其他进程
如果你用…| xargs -r0 -I{} bash -c 'f="{}";命令"$f";' ",如果字符串包含双引号,则赋值将失败。这对于每个使用-i或-i的变体都是正确的。(由于它被替换为字符串,您总是可以通过在输入数据中插入意外字符(如引号、反引号或美元符号)来注入命令)
如果命令一次只能接受一个参数:
tr '[\n]' '[\0]' < a.txt | xargs -r0 -n1 /bin/bash -c 'command1 "$@"; command2 "$@";' ''
或者用更少的进程:
tr '[\n]' '[\0]' < a.txt | xargs -r0 /bin/bash -c 'for f in "$@"; do command1 "$f"; command2 "$f"; done;' ''
如果您有GNU xargs或其他带有-P扩展名的文件,并且希望并行运行32个进程,每个进程每个命令的参数不超过10个:
tr '[\n]' '[\0]' < a.txt | xargs -r0 -n10 -P32 /bin/bash -c 'command1 "$@"; command2 "$@";' ''
这对于输入中的任何特殊字符都应该是健壮的。(如果输入是空分隔的。)如果某些行包含换行符,tr版本将得到一些无效的输入,但对于换行符分隔的文件,这是不可避免的。
bash -c的第一个空白参数是由于:(来自bash手册页)(感谢@clacke)
-c If the -c option is present, then commands are read from the first non-option argument com‐
mand_string. If there are arguments after the command_string, the first argument is assigned to $0
and any remaining arguments are assigned to the positional parameters. The assignment to $0 sets
the name of the shell, which is used in warning and error messages.
其他回答
你可以使用
cat file.txt | xargs -i sh -c 'command {} | command2 {} && command3 {}'
{} =变量为文本文件中的每一行
我有一个解决这个问题的好办法。 只要写一个命令mcmd,就可以了
find . -type f | xargs -i mcmd echo {} @@ cat {} @pipe sed -n '1,3p'
mcmd的内容如下:
echo $* | sed -e 's/@@/\n/g' -e 's/@pipe/|/g' | csh
我做的一件事是添加到.bashrc/。配置此功能:
function each() {
while read line; do
for f in "$@"; do
$f $line
done
done
}
然后你就可以做
... | each command1 command2 "command3 has spaces"
它比xargs或-exec更简洁。如果还需要这种行为,还可以修改该函数,将读取的值插入到每个命令中的任意位置。
我更喜欢允许试运行模式的样式(没有| sh):
cat a.txt | xargs -I % echo "command1; command2; ... " | sh
管道也适用:
cat a.txt | xargs -I % echo "echo % | cat " | sh
这似乎是最安全的版本。
tr '[\n]' '[\0]' < a.txt | xargs -r0 /bin/bash -c 'command1 "$@"; command2 "$@";' ''
(可以删除-0,并将tr替换为重定向(或者可以将文件替换为空分隔文件)。它主要是在那里,因为我主要使用xargs查找与-print0输出)(这可能也与xargs版本没有-0扩展名有关)
这是安全的,因为args在执行时将参数作为数组传递给shell。当使用["$@"][1]获得所有这些进程时,shell(至少是bash)会将它们作为未更改的数组传递给其他进程
如果你用…| xargs -r0 -I{} bash -c 'f="{}";命令"$f";' ",如果字符串包含双引号,则赋值将失败。这对于每个使用-i或-i的变体都是正确的。(由于它被替换为字符串,您总是可以通过在输入数据中插入意外字符(如引号、反引号或美元符号)来注入命令)
如果命令一次只能接受一个参数:
tr '[\n]' '[\0]' < a.txt | xargs -r0 -n1 /bin/bash -c 'command1 "$@"; command2 "$@";' ''
或者用更少的进程:
tr '[\n]' '[\0]' < a.txt | xargs -r0 /bin/bash -c 'for f in "$@"; do command1 "$f"; command2 "$f"; done;' ''
如果您有GNU xargs或其他带有-P扩展名的文件,并且希望并行运行32个进程,每个进程每个命令的参数不超过10个:
tr '[\n]' '[\0]' < a.txt | xargs -r0 -n10 -P32 /bin/bash -c 'command1 "$@"; command2 "$@";' ''
这对于输入中的任何特殊字符都应该是健壮的。(如果输入是空分隔的。)如果某些行包含换行符,tr版本将得到一些无效的输入,但对于换行符分隔的文件,这是不可避免的。
bash -c的第一个空白参数是由于:(来自bash手册页)(感谢@clacke)
-c If the -c option is present, then commands are read from the first non-option argument com‐
mand_string. If there are arguments after the command_string, the first argument is assigned to $0
and any remaining arguments are assigned to the positional parameters. The assignment to $0 sets
the name of the shell, which is used in warning and error messages.