0


Python办公自动化——8行代码实现文件去重

Python办公自动化——8行代码实现文件去重

需求描述

上周突然接到一个任务,要通过XX网站导出XX年-XX年之间的数据,导出后的文件名就是对应日期,导出后发现,竟然有的文件大小是一样,但文件名又没有重复,所以打开文件看了下,确实重复了,原因暂时不清楚,预测是网站的原因,最后发现大概只有 30% 的数据没有重复。我淦!
在这里插入图片描述
啥也不说,首要任务还是把那些没有重复的文件给筛选出来,或是删除重复的文件。文件很多几百个,通过一个个的对比文件去删除估计又要加班,然后突然想到

Python

有个内置的

filecmp

能够貌似是比较文件的,于是乎就有了这篇文章~

在这里插入图片描述

撸代码ing

导出的文件都是保存在同一文件夹下的,格式也相同。然后,上网查了下

filecmp.cmp()

的用法。

filecmp.cmp(f1, f2, shallow=True)

  • f1/f2:待比较的两个文件路径。
  • shallow :默认为True,即只比较os.stat()获取的元数据(创建时间,大小等信息)是否相同,设置为False的话,在对比文件的时候还要比较文件内容。
from pathlib import Path
import filecmp

path_list =[path for path in Path(r'C:\Users\pc\Desktop\test').iterdir()if path.is_file()]for front inrange(len(path_list)-1):for later inrange(front +1,len(path_list)):if filecmp.cmp(path_list[front], path_list[later], shallow=False):
            path_list[front].unlink()# 删除文件break

为了防止代码有问题,我先创建了一个 test 文件夹,在文件夹下手动创建了6个文件,1~5中只有1,2,3,4,5对应的数字内容,第6个为空文件。在这里插入图片描述
之后再将文件全部复制一份。

在这里插入图片描述
▶️运行效果

请添加图片描述
🌸 完工撒花~🌸


这就是本文所有的内容了,如果感觉还不错的话。❤ 点个赞再走吧!!!❤

在这里插入图片描述
后续会继续分享《Python自动化办公》系列文章,如果感兴趣的话可以点个关注不迷路哦~。


本文转载自: https://blog.csdn.net/qq_43965708/article/details/119516231
版权归原作者 Dream丶Killer 所有, 如有侵权,请联系我们删除。

“Python办公自动化——8行代码实现文件去重”的评论:

还没有评论