如何使用sed删除文本文件中包含特定字符串的所有行?
当前回答
除了sed之外,还有许多其他方法可以删除具有特定字符串的行:
AWK
awk '!/pattern/' file > temp && mv temp file
红宝石(1.9+)
ruby -i.bak -ne 'print if not /test/' file
Perl
perl -ni.bak -e "print unless /pattern/" file
Shell(bash 3.2及更高版本)
while read -r line
do
[[ ! $line =~ pattern ]] && echo "$line"
done <file > o
mv o file
GNU grep
grep -v "pattern" file > temp && mv temp file
当然,sed(打印相反内容比实际删除更快):
sed -n '/pattern/!p' file
其他回答
cat filename | grep -v "pattern" > filename.1
mv filename.1 filename
使用GNU sed的简单方法是:
sed --in-place '/some string here/d' yourfile
我在Mac上挣扎着。另外,我需要使用变量替换来完成。
所以我使用了:
sed-i“”/$pattern/d“$文件
其中$file是需要删除的文件,$pattern是要匹配删除的模式。
我从评论中选择了“”。
这里需要注意的是在“/$pattern/d”中使用双引号。当我们使用单引号时,变量不起作用。
我用一个包含大约345000行的文件制作了一个小型基准测试。在这种情况下,使用grep的方法似乎比sed方法快15倍左右。
我已经尝试了使用和不使用设置LC_ALL=C,这似乎不会显著改变定时。搜索字符串(CDGA_00004.pdbqt.gz.tar)位于文件的中间位置。
以下是命令和计时:
time sed -i "/CDGA_00004.pdbqt.gz.tar/d" /tmp/input.txt
real 0m0.711s
user 0m0.179s
sys 0m0.530s
time perl -ni -e 'print unless /CDGA_00004.pdbqt.gz.tar/' /tmp/input.txt
real 0m0.105s
user 0m0.088s
sys 0m0.016s
time (grep -v CDGA_00004.pdbqt.gz.tar /tmp/input.txt > /tmp/input.tmp; mv /tmp/input.tmp /tmp/input.txt )
real 0m0.046s
user 0m0.014s
sys 0m0.019s
perl -i -nle'/regexp/||print' file1 file2 file3
perl -i.bk -nle'/regexp/||print' file1 file2 file3
第一个命令在原地(-i)编辑文件。
第二个命令执行相同的操作,但通过在文件名中添加.bk来保留原始文件的副本或备份(.bk可以更改为任何内容)。