Python中有许多“开盖即食”的模块(比如os,subprocess和shutil)以支持文件I/O操作。在这篇文章中,你将会看到一些用Python实现文件复制的特殊方法。下面我们开始学习这九种不同的方法来实现Python复制文件操作。
在开始之前,你必须明白为什么了解最适合你的Python复制文件方法是如此重要。这是因为文件I/O操作属于性能密集型而且经常会达到瓶颈。这就是为什么你应该根据你的应用程序的设计选择最好的方法。
一些共享资源的程序会倾向于以阻塞模式来复制文件,而有些则可能希望以异步方式执行。比如—使用线程来复制文件或者启动单独的进程来实现它。还有一点需要考虑的是平台的可移植性。这意味着你应该知道你要运行的程序所在的目标操作系统(Windows/Linux/MacOSX等)。
用Python复制文件的9种方法具体是:
- shutilcopyfile()方法
- shutilcopy()方法
- shutilcopyfileobj()方法
- shutilcopy2()方法
- ospopen方法
- ossystem()方法
- threadingThread()方法
- subprocesscall()方法
- subprocesscheck_output()方法
ShutilCopy()方法
只有当目标是可写的,这个方法才会将源内容复制到目标位置。如果你没有写入权限,则会导致IOError异常。
它会打开输入文件进行读取并忽略其文件类型。接下来,它不会以任何不同的方式处理特殊文件,也不会将它们复制为新的特殊文件。
Copyfile()方法使用下面的低级函数copyfileobj()。它将文件名作为参数,打开它们并将文件句柄传递给copyfileobj()。这个方法中有一个可选的第三个参数,你可用它来指定缓冲区长度。然后它会打开文件并读取指定缓冲区大小的块。但是,默认是一次读取整个文件。
以下是关于copyfile()方法的要点。
它将源内容复制到目标文件中。
如果目标文件不可写入,那么复制操作将导致IOError异常。
如果源文件和目标文件都相同,它将会返回SameFileError。
但是,如果目标文件之前有不同的名称,那么该副本将会覆盖其内容。
如果目标是一个目录,这意味着此方法不会复制到目录,那么会发生Error13。
它不支持复制诸如字符或块驱动以及管道等文件。
ShutilCopy()方法
copy()方法的功能类似于Unix中的“cp”命令。这意味着如果目标是一个文件夹,那么它将在其中创建一个与源文件具有相同名称(基本名称)的新文件。此外,该方法会在复制源文件的内容后同步目标文件权限到源文件。
copy()vscopyfile():
copy()还可以在复制内容时设置权限位,而copyfile()只复制数据。
如果目标是目录,则copy()将复制文件,而copyfile()会失败,出现Error13。
有趣的是,copyfile()方法在实现过程中使用copyfileobj()方法,而copy()方法则是依次使用copyfile()和copymode()函数。
在Potion-3可以很明显看出copyfile()会比copy()快一点,因为后者会有一个附加任务(保留权限)。
ShutilCopyfileobj()方法
该方法将文件复制到目标路径或者文件对象。如果目标是文件对象,那么你需要在调用copyfileobj()之后关闭它。它还假定了一个可选参数(缓冲区大小),你可以用来设置缓冲区长度。这是复制过程中保存在内存中的字节数。系统使用的默认大小是16KB。
ShutilCopy2()方法
虽然copy2()方法的功能类似于copy()。但是它可以在复制数据时获取元数据中添加的访问和修改时间。复制相同的文件会导致SameFileError异常。
copy()vscopy2():
copy()只能设置权限位,而copy2()还可以使用时间戳来更新文件元数据。
copy()在函数内部调用copyfile()和copymode(),而copy2()是调用copystat()来替换copymode()。
OsPopen()方法
该方法创建一个发送或者接受命令的管道。它返回一个打开的并且连接管道的文件对象。你可以根据文件打开模式将其用于读取或者写入比如‘r’(默认)或者‘w’。
mode–它可以是‘r’(默认)或者‘w’
Bufsize–如果它的值是0,那么就不会出现缓冲。如果将它设置为1,那么在访问文件时就会发生行缓冲。如果你提供一个大于1的值,那么就会在指定缓冲区大小的情况下发生缓冲。但是,对于负值,系统将采用默认缓冲区大小。
对于Windows系统:
对于Liunx系统:
OsSystem()方法
这是运行任何系统命令的最常用方式。使用system()方法,你可以调用subshell中的任何命令。在内部,该方法将调用C语言的标准库函数。
该方法返回该命令的退出状态。
对于Windows系统:
对于Liunx系统:
使用异步方式的线程库复制文件
如果你想以异步方式复制文件,那么使用下面的方法。在这里,我们使用Python的线程模块在后台进行复制操作。
在使用这种方法时,请确保使用锁定以避免锁死。如果你的应用程序使用多个线程读取/写入文件,就可能会遇到这种情况。
使用Subprocess的Call()方法复制文件
Subprocess模块提供了一个简单的接口来处理子进程。它让我们能够启动子进程,连接到子进程的输入/输出/错误管道,并检索返回值。
subprocess模块旨在替换旧版模块和函数,比如–os.system,os.spawn,os.popen,popen2.*
它使用call()方法调用系统命令来执行用户任务。
使用subprocess中的Check_output()方法复制文件
使用subprocess中的Check_output()方法,你可以运行外部命令或程序并捕获其输出。它也支持管道。importos,subprocesssrc=os.path.realpath(os.getcwd()+"http://cdn.techbeamers.com/1.txt.py")dst=os.path.realpath(os.getcwd()+"http://cdn.techbeamers.com/2.txt.py")cmd='copy"%s""%s"'%(src,dst)status=subprocess.check_output(['copy',src,dst],shell=True)print("status:",status.decode('utf-8'))