是否有一个简单的shell命令/脚本支持排除某些文件/文件夹的归档?

我有一个需要归档的目录,其中有一个子目录,其中有许多非常大的文件,我不需要备份。

不完全是解决方案:

tar——exclude=PATTERN命令匹配给定的模式并排除那些文件,但我需要忽略特定的文件和文件夹(完整的文件路径),否则有效的文件可能会被排除。

我还可以使用find命令创建一个文件列表,排除我不想存档的文件,并将该列表传递给tar,但这只适用于少量文件。我有成千上万。

我开始认为唯一的解决方案是创建一个包含要排除的文件/文件夹列表的文件,然后使用rsync with——exclude-from=file将所有文件复制到tmp目录,然后使用tar对该目录进行归档。

谁能想到更好/更有效的解决办法?

编辑:查尔斯·马的解决方案很有效。最大的问题是——exclude='。/folder'必须在tar命令的开头。完整命令(先cd,所以备份相对于该目录):

cd /folder_to_backup
tar --exclude='./folder' --exclude='./upload/folder2' -zcvf /backup/filename.tgz .

当前回答

如果您试图排除版本控制系统(VCS)文件,tar已经支持两个有趣的选项!:)

选项:——exclude-vcs

该选项不包括以下版本控制系统使用的文件和目录:CVS、RCS、SCCS、SVN、Arch、Bazaar、Mercurial和Darcs。

从1.32版本开始,以下文件被排除在外:

CVS/,以及它下面的所有东西 RCS/和它下面的所有东西 SCCS/和它下面的所有东西 .git/和它下面的所有东西 .gitignore .gitmodules .gitattributes .cvsignore .svn/,以及它下面的所有内容 .arch-ids/,以及它下面的所有内容 {arch}/和它下面的所有东西 =版本id = meta-update =更新 .bzr .bzrignore .bzrtags .hg .hgignore .hgrags _darcs 选项:——exclude-vcs- ignored

当存档某些版本控制系统(VCS)下的目录时,从VCS的忽略文件(例如.cvsignore, .gitignore等)中读取排除模式通常很方便。这个选项提供了这种可能性。

在归档目录之前,请检查该目录是否包含以下文件:cvsignore、.gitignore、.bzrignore或.hgignore。如果是,从这些文件中读取忽略模式。

模式的处理方式与相应的VCS对待模式的方式非常相似,即:

cvsignore。

包含仅应用于此文件所在目录的shell样式通配符模式。文件中不允许有注释。空行将被忽略。

. gitignore

包含shell样式的填充模式。应用于.gitfile所在的目录及其所有子目录。

任何以#开头的行都是注释。反斜杠转义注释字符。

bzrignore。

包含shell通配符模式和正则表达式(如果前缀为RE:(16))。模式影响目录及其所有子目录。

任何以#开头的行都是注释。

hgignore。

包含posix正则表达式(17)。行语法:glob切换到shell通配符模式。行语法:regexp反向切换。注释以#开头。模式影响目录及其所有子目录。

例子

Tar -czv——exclude-vcs-ignore -f path/to/my- Tar -file. Tar .gz path/to/my/project/

其他回答

我没能让tar排除几层深的5gb子目录。最后,我只使用了unix Zip命令。这对我来说容易多了。

对于原始文章中的这个特殊例子 (沥青——排除= '。/文件夹”,排除= '。/upload/folder2' -zcvf /backup/filename. txtTGZ)

等价的是:

Zip -r /backup/filename.zip。-x upload/folder/**\* upload/folder2/**\* .使用实例

(注:这是我最初使用的帖子,帮助我https://superuser.com/questions/312301/unix-zip-directory-but-excluded-specific-subdirectories-and-everything-within-t)

对于那些有问题的人来说,有些版本的tar只有在没有'的情况下才能正常工作。排除值中的/'。

Tar --version

电线(飞)1.27.1

适用的命令语法:

tar -czvf ../allfiles-butsome.tar.gz * --exclude=acme/foo

这些都不起作用:

$ tar -czvf ../allfiles-butsome.tar.gz * --exclude=./acme/foo
$ tar -czvf ../allfiles-butsome.tar.gz * --exclude='./acme/foo'
$ tar --exclude=./acme/foo -czvf ../allfiles-butsome.tar.gz *
$ tar --exclude='./acme/foo' -czvf ../allfiles-butsome.tar.gz *
$ tar -czvf ../allfiles-butsome.tar.gz * --exclude=/full/path/acme/foo
$ tar -czvf ../allfiles-butsome.tar.gz * --exclude='/full/path/acme/foo'
$ tar --exclude=/full/path/acme/foo -czvf ../allfiles-butsome.tar.gz *
$ tar --exclude='/full/path/acme/foo' -czvf ../allfiles-butsome.tar.gz *

可以使用cpio(1)创建tar文件。Cpio将文件归档到stdin上,所以如果你已经找到了你想要使用的find命令来选择存档文件,那么将它导入Cpio来创建tar文件:

find ... | cpio -o -H ustar | gzip -c > archive.tar.gz

我同意——exclude标志是正确的方法。

$ tar --exclude='./folder_or_file' --exclude='file_pattern' --exclude='fileA'

我要提醒大家的是,我并没有发现明显的副作用: 在本例中排除'fileA'将递归地搜索'fileA' !

示例:一个包含同名文件(data.txt)的单子目录的目录

data.txt
config.txt
--+dirA
  |  data.txt
  |  config.docx

如果使用——exclude='data.txt',存档将不包含data.txt文件。如果对第三方库(比如node_modules目录)进行归档,可能会导致意想不到的结果。 为了避免这个问题,请确保给出整个路径,比如——exclude='./dirA/data.txt'

你可以为tar设置多个排除选项

$ tar --exclude='./folder' --exclude='./upload/folder2' -zcvf /backup/filename.tgz .

等等都可以。确保在源项和目标项之前放置——exclude。