对于大型文件，我逐行读取文件，并将每一行读取到一个数组中。然后，一旦数组达到一定大小，就将其追加到新文件中。

for line in open("file.txt", "r"):
    list.append(line)
    if len(list) == 1000000: 
        output.writelines(list)
        del list[:]

在Python中，可以使用

梭式组件操作系统模块子流程模块

---

import os
import shutil
import subprocess

---

1） 使用shutil模块复制文件

shutil.copyfile签名

shutil.copyfile(src_file, dest_file, *, follow_symlinks=True)

# example    
shutil.copyfile('source.txt', 'destination.txt')

---

shutil.copy签名

shutil.copy(src_file, dest_file, *, follow_symlinks=True)

# example
shutil.copy('source.txt', 'destination.txt')

---

shutil.copy2签名

shutil.copy2(src_file, dest_file, *, follow_symlinks=True)

# example
shutil.copy2('source.txt', 'destination.txt')  

---

shutil.copyfileobj签名

shutil.copyfileobj(src_file_object, dest_file_object[, length])

# example
file_src = 'source.txt'  
f_src = open(file_src, 'rb')

file_dest = 'destination.txt'  
f_dest = open(file_dest, 'wb')

shutil.copyfileobj(f_src, f_dest)  

---

2） 使用os模块复制文件

os.popen签名

os.popen(cmd[, mode[, bufsize]])

# example
# In Unix/Linux
os.popen('cp source.txt destination.txt') 

# In Windows
os.popen('copy source.txt destination.txt')

---

os.system签名

os.system(command)


# In Linux/Unix
os.system('cp source.txt destination.txt')  

# In Windows
os.system('copy source.txt destination.txt')

---

3） 使用子流程模块复制文件

subprocess.call签名

subprocess.call(args, *, stdin=None, stdout=None, stderr=None, shell=False)

# example (WARNING: setting `shell=True` might be a security-risk)
# In Linux/Unix
status = subprocess.call('cp source.txt destination.txt', shell=True) 

# In Windows
status = subprocess.call('copy source.txt destination.txt', shell=True)

---

subprocess.check_output签名

subprocess.check_output(args, *, stdin=None, stderr=None, shell=False, universal_newlines=False)

# example (WARNING: setting `shell=True` might be a security-risk)
# In Linux/Unix
status = subprocess.check_output('cp source.txt destination.txt', shell=True)

# In Windows
status = subprocess.check_output('copy source.txt destination.txt', shell=True)

---

首先，我对shutil方法做了详尽的备忘单，供您参考。

shutil_methods =
{'copy':['shutil.copyfileobj',
          'shutil.copyfile',
          'shutil.copymode',
          'shutil.copystat',
          'shutil.copy',
          'shutil.copy2',
          'shutil.copytree',],
 'move':['shutil.rmtree',
         'shutil.move',],
 'exception': ['exception shutil.SameFileError',
                 'exception shutil.Error'],
 'others':['shutil.disk_usage',
             'shutil.chown',
             'shutil.which',
             'shutil.ignore_patterns',]
}

其次，举例说明复制方法：

shutil.copyfileobj（fsrc，fdst[，length]）操纵打开的对象在[3]中：src='~/Documents/Head+First+SQL.pdf'在[4]中：dst='~/desktop'在[5]中：shutil.copyfileobj（src，dst）AttributeError:“str”对象没有属性“read”#复制文件对象在[7]中：open（src，'rb'）为f1，open（os.path.join（dst，'test.pdf'），'wb'）为f2：…：shutil.copyfileobj（f1，f2）在[8]中：os.stat（os.path.join（dst，'test.pdf'））输出[8]：os.stat_result（st_mode=33188，st_ino=8598319475，st_dev=16777220，st_nlink=1，st_uid=501，st_gid=20，st_size=13507926，st_atime=1516067347，st_mime=1516067335，st_ctime=1516087345）shutil.copyfile（src，dst，*，follow_symlinks=True）复制并重命名在[9]中：shutil.copyfile（src，dst）IsADirectoryError:[Erno 21]是一个目录：~/desktop'#所以dst应该是文件名而不是目录名shutil.copy（）复制而不预先保存元数据在[10]中：shutil.copy（src，dst）输出[10]：~/desktop/Head+First+SQL.pdf'#检查其元数据在[25]中：os.stat（src）输出[25]：os.stat_result（st_mode=33188，st_ino=597749，st_dev=16777220，st_nlink=1，st_uid=501，st_gid=20，st_size=13507926，st_atime=1516066425，st_mtime=1493698739，st_ctime=1514871215）在[26]中：os.stat（os.path.join（dst，'Head+First+SQL.pdf'））输出[26]：os.stat_result（st_mode=33188，st_ino=8598313736，st_dev=16777220，st_nlink=1，st_uid=501，st_gid=20，st_size=13507926，st_atime=1516066427，st_mtime=1516086425，st_ctime=151066425）#st_atime、st_mtime、st_ctime已更改shutil.copy2（）复制并保留元数据在[30]中：shutil.copy2（src，dst）输出[30]：~/desktop/Head+First+SQL.pdf'在[31]中：os.stat（src）输出[31]：os.stat_result（st_mode=33188，st_ino=597749，st_dev=16777220，st_nlink=1，st_uid=501，st_gid=20，st_size=13507926，st_atime=1516067055，st_mtime=1493698739，st_ctime=1514871215）在[32]中：os.stat（os.path.join（dst，'Head+First+SQL.pdf'））输出[32]：os.stat_result（st_mode=33188，st_ino=8598313736，st_dev=16777220，st_nlink=1，st_uid=501，st_gid=20，st_size=13507926，st_atime=1516067063，st_mtime=1493698739，st_ctime=1516087055）#保留时间（_m）shutil.copytree（）递归复制以src为根的整个目录树，返回目标目录。

使用梭动模块。

copyfile(src, dst)

将名为src的文件的内容复制到名为dst的文件中。目标位置必须是可写的；否则，将引发IOError异常。如果dst已经存在，则将替换它。无法使用此功能复制字符或块设备和管道等特殊文件。src和dst是以字符串形式给出的路径名。

看看标准Python模块中所有文件和目录处理功能的filesys。

有两种在Python中复制文件的最佳方法。

1.我们可以使用梭动模块

代码示例：

import shutil
shutil.copyfile('/path/to/file', '/path/to/new/file')

除了copyfile，还有其他可用的方法，如copy、copy2等，但copyfile在性能方面是最好的，

2.我们可以使用OS模块

代码示例：

import os
os.system('cp /path/to/file /path/to/new/file')

另一种方法是使用子流程，但它不是优选的，因为它是调用方法之一，不安全。

复制文件是一个相对简单的操作，如下面的示例所示，但是您应该使用shutilstdlib模块。

def copyfileobj_example(source, dest, buffer_size=1024*1024):
    """      
    Copy a file from source to dest. source and dest
    must be file-like objects, i.e. any object with a read or
    write method, like for example StringIO.
    """
    while True:
        copy_buffer = source.read(buffer_size)
        if not copy_buffer:
            break
        dest.write(copy_buffer)

如果要按文件名复制，可以执行以下操作：

def copyfile_example(source, dest):
    # Beware, this example does not handle any edge cases!
    with open(source, 'rb') as src, open(dest, 'wb') as dst:
        copyfileobj_example(src, dst)