對(duì)于大多數(shù)計(jì)算機(jī)用戶而言,查找并替換重復(fù)的文件是一個(gè)常見的需求。查找并移除重復(fù)文件真是一項(xiàng)令人不勝其煩的工作,它耗時(shí)又耗力。但如果你的機(jī)器上跑著GNU/Linux,那么查找重復(fù)文件會(huì)變得十分簡單,這多虧了fdupes工具。
fdupes是啥東東?
fdupes是Linux下的一個(gè)工具,它由Adrian Lopez用C編程語言編寫并基于MIT許可證發(fā)行,該應(yīng)用程序可以在指定的目錄及子目錄中查找重復(fù)的文件。fdupes通過對(duì)比文件的MD5簽名,以及逐字節(jié)比較文件來識(shí)別重復(fù)內(nèi)容,fdupes有各種選項(xiàng),可以實(shí)現(xiàn)對(duì)文件的列出、刪除、替換為文件副本的硬鏈接等操作。
文件對(duì)比以下列順序開始:
大小對(duì)比 > 部分 MD5 簽名對(duì)比 > 完整 MD5 簽名對(duì)比 > 逐字節(jié)對(duì)比
安裝 fdupes 到 Linux
在基于Debian的系統(tǒng)上,如Ubuntu和Linux Mint,安裝最新版fdupes,用下面的命令手到擒來。
代碼如下:
$ sudo apt-get install fdupes
在基于CentOS/RHEL和Fedora的系統(tǒng)上,你需要開啟epel倉庫來安裝fdupes包。
代碼如下:
# yum install fdupes
# dnf install fdupes
[在 Fedora 22 及其以后]
注意:自Fedora 22之后,默認(rèn)的包管理器yum被dnf取代了。
fdupes命令如何使用
1、 作為演示的目的,讓我們來在某個(gè)目錄(比如 tecmint)下創(chuàng)建一些重復(fù)文件,命令如下:
代碼如下:
$ mkdir /home/"$USER"/Desktop/tecmint && cd /home/"$USER"/Desktop/tecmint && for i in {1..15}; do echo "I Love Tecmint. Tecmint is a very nice community of Linux Users." > tecmint${i}.txt ; done
在執(zhí)行以上命令后,讓我們使用ls命令驗(yàn)證重復(fù)文件是否創(chuàng)建。
代碼如下:
$ ls -l
total 60
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint10.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint11.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint12.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint13.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint14.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint15.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint1.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint2.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint3.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint4.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint5.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint6.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint7.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint8.txt
-rw-r--r-- 1 tecmint tecmint 65 Aug 8 11:22 tecmint9.txt
上面的腳本創(chuàng)建了15個(gè)文件,名稱分別為tecmint1.txt,tecmint2.txt……tecmint15.txt,并且每個(gè)文件的數(shù)據(jù)相同,如
"I Love Tecmint. Tecmint is a very nice community of Linux Users."
2、 現(xiàn)在在tecmint文件夾內(nèi)搜索重復(fù)的文件。
$ fdupes /home/$USER/Desktop/tecmint
/home/tecmint/Desktop/tecmint/tecmint13.txt
/home/tecmint/Desktop/tecmint/tecmint8.txt
/home/tecmint/Desktop/tecmint/tecmint11.txt
/home/tecmint/Desktop/tecmint/tecmint3.txt
/home/tecmint/Desktop/tecmint/tecmint4.txt
/home/tecmint/Desktop/tecmint/tecmint6.txt
/home/tecmint/Desktop/tecmint/tecmint7.txt
/home/tecmint/Desktop/tecmint/tecmint9.txt
/home/tecmint/Desktop/tecmint/tecmint10.txt
/home/tecmint/Desktop/tecmint/tecmint2.txt
/home/tecmint/Desktop/tecmint/tecmint5.txt
/home/tecmint/Desktop/tecmint/tecmint14.txt
/home/tecmint/Desktop/tecmint/tecmint1.txt
/home/tecmint/Desktop/tecmint/tecmint15.txt
/home/tecmint/Desktop/tecmint/tecmint12.txt
3、 使用-r選項(xiàng)在每個(gè)目錄包括其子目錄中遞歸搜索重復(fù)文件。
它會(huì)遞歸搜索所有文件和文件夾,花一點(diǎn)時(shí)間來掃描重復(fù)文件,時(shí)間的長短取決于文件和文件夾的數(shù)量。在此其間,終端中會(huì)顯示全部過程,像下面這樣。
代碼如下:
$ fdupes -r /home
Progress [37780/54747] 69%
4、 使用-S選項(xiàng)來查看某個(gè)文件夾內(nèi)找到的重復(fù)文件的大小。
代碼如下:
$ fdupes -S /home/$USER/Desktop/tecmint
65 bytes each:
/home/tecmint/Desktop/tecmint/tecmint13.txt
/home/tecmint/Desktop/tecmint/tecmint8.txt
/home/tecmint/Desktop/tecmint/tecmint11.txt
/home/tecmint/Desktop/tecmint/tecmint3.txt
/home/tecmint/Desktop/tecmint/tecmint4.txt
/home/tecmint/Desktop/tecmint/tecmint6.txt
/home/tecmint/Desktop/tecmint/tecmint7.txt
/home/tecmint/Desktop/tecmint/tecmint9.txt
/home/tecmint/Desktop/tecmint/tecmint10.txt
/home/tecmint/Desktop/tecmint/tecmint2.txt
/home/tecmint/Desktop/tecmint/tecmint5.txt
/home/tecmint/Desktop/tecmint/tecmint14.txt
/home/tecmint/Desktop/tecmint/tecmint1.txt
/home/tecmint/Desktop/tecmint/tecmint15.txt
/home/tecmint/Desktop/tecmint/tecmint12.txt
5、 你可以同時(shí)使用-S和-r選項(xiàng)來查看所有涉及到的目錄和子目錄中的重復(fù)文件的大小,如下:
代碼如下:
$ fdupes -Sr /home/avi/Desktop/
65 bytes each:
/home/tecmint/Desktop/tecmint/tecmint13.txt
/home/tecmint/Desktop/tecmint/tecmint8.txt
/home/tecmint/Desktop/tecmint/tecmint11.txt
/home/tecmint/Desktop/tecmint/tecmint3.txt
/home/tecmint/Desktop/tecmint/tecmint4.txt
/home/tecmint/Desktop/tecmint/tecmint6.txt
/home/tecmint/Desktop/tecmint/tecmint7.txt
/home/tecmint/Desktop/tecmint/tecmint9.txt
/home/tecmint/Desktop/tecmint/tecmint10.txt
/home/tecmint/Desktop/tecmint/tecmint2.txt
/home/tecmint/Desktop/tecmint/tecmint5.txt
/home/tecmint/Desktop/tecmint/tecmint14.txt
/home/tecmint/Desktop/tecmint/tecmint1.txt
/home/tecmint/Desktop/tecmint/tecmint15.txt
/home/tecmint/Desktop/tecmint/tecmint12.txt
107 bytes each:
/home/tecmint/Desktop/resume_files/r-csc.html
/home/tecmint/Desktop/resume_files/fc.html