python實(shí)現(xiàn)自動清理重復(fù)文件
前言
大家好,又到了Python辦公自動化系列。
今天分享一個系統(tǒng)層面的自動化案例:
「給定一個文件夾,使用Python檢查給定文件夾下有無文件重復(fù),若存在重復(fù)則刪除」
主要涉及的知識點(diǎn)有:
os模塊綜合應(yīng)用 glob模塊綜合應(yīng)用 利用filecmp模塊比較兩個文件步驟分析
該程序?qū)崿F(xiàn)的邏輯可以具化為:
遍歷獲取給定文件夾下的所有文件,然后通過嵌套循環(huán)兩兩比較文件是否相同,如果相同則刪除后者。
實(shí)現(xiàn)問題的關(guān)鍵就變成了?
如何判斷兩個文件是否相同?
在這里我們可以使用filecmp模塊,來看看官方的介紹文檔:
filecmp.cmp(f1, f2, shallow=True) 比較名為f1和f2的文件,如果它們似乎相等則返回True,否則返回False 如果shallow為真,那么具有相同os.stat()簽名的文件將會被認(rèn)為是相等的。否則,將比較文件的內(nèi)容。所以可以這樣使用?
# 假設(shè)x和y兩個文件是相同的print(filecmp.cmp(x, y))# True
解決了這個問題,我們就可以開始寫代碼了!
Python實(shí)現(xiàn)
導(dǎo)入需要的庫并設(shè)置目標(biāo)文件夾路徑
import osimport globimport filecmpdir_path = r’C:xxxx’
接著遍歷獲取所有文件的絕對路徑,我們可以利用glob模塊的通配符結(jié)合recursive參數(shù)即可完成,框架如下:
for file in glob.glob(path + ’/**/*’, recursive=True): pass
由于遍歷獲取每一個文件或者文件夾后,需要判斷是否是文件,如果是文件則可能將絕對路徑存放到列表中,這里需要再完成兩個事情:
首先創(chuàng)建一個空列表,后面用list.append(i)添加文件路徑 接著利用os.path.isfile(i)判斷是否是文件,返回True則執(zhí)行添加元素的操作具體代碼如下
file_lst = []for i in glob.glob(dir_path + ’/**/*’, recursive=True): if os.path.isfile(i): file_lst.append(i)
上一步我們獲取了目標(biāo)文件夾下的所有文件路徑,接下來就可以嵌套遍歷這個路徑列表,其中filecmp.cmp進(jìn)行文件判斷,os.remove進(jìn)行文件刪除
for x in file_lst: for y in file_lst: if x != y: if filecmp.cmp(x, y):os.remove(y)
這里的代碼已經(jīng)實(shí)現(xiàn)了大致邏輯,但有一個細(xì)節(jié)需要考慮到:有可能循環(huán)到文件已經(jīng)被前面的判斷刪除了,導(dǎo)致os.remove(file)由于文件不存在而報錯
因此,可以用os.path.exists對文件存在進(jìn)行判斷,如下所示:
for x in file_lst: for y in file_lst: if x != y and os.path.exists(x) and os.path.exists(y): if filecmp.cmp(x, y):os.remove(y)
這樣,一個簡易的文件去重小程序就完成了,完整代碼如下:
import osimport globimport filecmpdir_path = r’C:xxxx’file_lst = []for i in glob.glob(dir_path + ’/**/*’, recursive=True): if os.path.isfile(i): file_lst.append(i)for x in file_lst: for y in file_lst: if x != y and os.path.exists(x) and os.path.exists(y): if filecmp.cmp(x, y):os.remove(y)
寫在最后
通過本文的Python自動化腳本制作過程,我們可以再次體會Python辦公自動化的強(qiáng)大,同時本次實(shí)現(xiàn)的功能可以和之前自動整理文件的腳本結(jié)合使用!
以上就是python實(shí)現(xiàn)自動清理重復(fù)文件的詳細(xì)內(nèi)容,更多關(guān)于python清理重復(fù)文件的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. React+umi+typeScript創(chuàng)建項(xiàng)目的過程2. ASP中常用的22個FSO文件操作函數(shù)整理3. ASP編碼必備的8條原則4. ASP調(diào)用WebService轉(zhuǎn)化成JSON數(shù)據(jù),附j(luò)son.min.asp5. 三個不常見的 HTML5 實(shí)用新特性簡介6. Warning: require(): open_basedir restriction in effect,目錄配置open_basedir報錯問題分析7. SharePoint Server 2019新特性介紹8. 無線標(biāo)記語言(WML)基礎(chǔ)之WMLScript 基礎(chǔ)第1/2頁9. ASP.NET Core 5.0中的Host.CreateDefaultBuilder執(zhí)行過程解析10. php測試程序運(yùn)行速度和頁面執(zhí)行速度的代碼
