当前位置: 首页 > 科技观察

如何快速找到系统中的重复文件并释放磁盘空间?

时间:2023-03-15 22:32:02 科技观察

不管是Windows电脑还是Linux电脑,在使用的过程中都会或多或少的留下一些重复的文件。这些文件不仅会占用我们的磁盘,还会拖累我们的系统,所以有必要将这些重复的文件清除掉。本文将介绍6种查找系统中重复文件的方法,让你快速释放硬盘空间!1.使用diff命令比较文件在我们的日常操作中,比较两个文件的差异最简单的方法可能就是使用diff命令。diff命令的输出将使用<和>符号显示两个文件之间的差异,使用此功能我们可以找到相同的文件。当两个文件有差异时,diff命令会输出差异点:$diffindex.htmlbackup.html2438a2439,2441>

>That'sallthereistoreport.>
如果你的diff命令没有输出,说明有两个files相同:$diffhome.htmlindex.html$但是,diff命令的缺点是它一次只能比较两个文件。如果我们要比较多个文件,两两比较的效率肯定很低。2.使用checksumchecksum命令cksum会将文件内容按照一定的算法计算成一个很长的数字(比如2819078353228029)。虽然计算出来的结果不是绝对唯一,但是由于文件内容不同导致校验和相同的可能性与中国男足进军世界杯的情况类似。$cksum*.html2819078353228029backup.html4073570409227985home.html4073570409227985index.html在我们上面的操作中,我们可以看到第二个和第三个文件的校验和是一样的,所以我们可以认为这两个文件是一样的。3.使用find命令虽然find命令没有查找重复文件的选项,但可以用来按名称或类型搜索文件并运行cksum命令。具体操作如下。$find.-name"*.html"-execcksum{}\;4073570409227985./home.html2819078353228029./backup.html4073570409227985./index.html4.使用fslint命令fslint命令可以专门用来查找重复文件。但是这里有一个需要注意的地方,那就是我们需要给它一个起始位置。如果我们需要遍历大量文件,该命令可能需要相当长的时间才能完成查找。$fslint.------------------------------------filenamelint--------------------------------Invalidutf8names-----------------------------------filecaselint----------------------------------DUPlicatefiles<==home.htmlindex。html------------------------------悬挂链接----------------------链接中的冗余字符------------------------------------可疑链接-------------------------------EmptyDirectories./.gnupg---------------------------------TemporaryFiles--------------------重复/冲突名称---------------------------------------坏蛋-------------------------NonStrippedexecutablesTips:我们必须在系统上安装fslint,还需要将其添加到搜索路径中:$exportPATH=$PATH:/usr/share/fslint/fslint5.使用rdfind命令rdfind命令也会查找重复(相同内容)的文件。这个命令被称为“冗余数据查找”,可以根据文件日期确定哪些文件是原始文件,这在我们选择删除重复项时很有用,因为它会删除较新的文件。$rdfind~Nowscanning"/home/alvin",found12files.Nowhave12filesintotal.Removed1filesduetononuniquedeviceandinode.Totalsizeis699498bytesor683KiBRemoved9filesduetouniquesizesfromlist.2filesleft.Noweliminatingcandidatesbasedonfirstbytes:removed0filesfromlist.2filesleft.Noweliminatingcandidatesbasedonlastbytes:removed0filesfromlist.2filesleft.Noweliminatingcandidatesbasedonsha1checksum:removed0filesfromlist.2filesleft.Itseemslikeyouhave2filesthatarenotuniqueTotally,223KiBcanbereduced.Nowmakingresultsfileresults.txt我们还可以在在试运行中运行。$rdfind-dryruntrue~(DRYRUNMODE)Nowscanning"/home/alvin",found12files.(DRYRUNMODE)Nowhave12filesintotal.(DRYRUNMODE)Removed1filesduetononuniquedeviceandinode.(DRYRUNMODE)Totalsizeis699352bytesor683KiBRemoved9filesduetouniquesizesfromlist.2filesleft.(DRYRUNMODE)Noweliminatingcandidatesbasedonfirstbytes:removed0filesfromlist.2filesleft.(DRYRUNMODE)Noweliminatingcandidatesbasedonlastbytes:removed0filesfromlist.2filesleft.(DRYRUNMODE)Noweliminatingcandidatesbasedonsha1checksum:removed0filesfromlist.2filesleft.(DRYRUNMODE)Itseemslikeyouhave2filesthatarenotunique(DRYRUNMODE)Totally,223KiBcanbereduced.(DRYRUNMODE)Nowmakingresultsfileresults.txtrdfind命令还提供一些忽略空文件(-ignoreempty)和跟随符号链接(-followsymlinks)之类选项。下面详细解释其常用选项。这里需要注意的是,rdfind命令提供了使用-deleteduplicatestrue删除重复文件的选项。顾名思义,使用此选项将自动删除重复文件。$rdfind-deleteduplicatestrue....Deleted1files.<==当然前提是我们的系统还必须安装rdfind命令。6.使用fdupes命令fdupes命令还可以轻松识别重复文件并提供许多有用的选项。在最简单的操作中,它会将重复的文件放在一起,如下所示:$fdupes~/home/alvin/UPGRADE/home/alvin/mytwin/home/alvin/lp.txt/home/alvin/lp。man/home/alvin/penguin.png/home/alvin/penguin0.png/home/alvin/hideme.png-r选项代表递归,意思是它会使用递归的方法在每个目录下查找重复的文件。但是,Linux下有很多重要的重复文件(比如用户的.bashrc和.profile文件),删除它们会导致系统故障。#fdupes-r/home/home/shark/home.html/home/shark/index.html/home/dory/.bashrc/home/eel/.bashrc/home/nemo/.profile/home/dory/.profile/home/shark/.profile/home/nemo/tryme/home/shs/tryme/home/shs/arrow.png/home/shs/PNGs/arrow.png/home/shs/11/files_11.zip/home/shs/ERIC/file_11.zip/home/shs/penguin0.jpg/home/shs/PNGs/penguin.jpg/home/shs/PNGs/penguin0.jpg/home/shs/Sandra_rotated.png/home/shs/PNGs/Sandra_rotated.pngfdupes命令的常用选项如下表所示:总结Linux系统为我们提供了很多定位和删除重复文件的工具。使用这些工具将快速找到磁盘中的重复文件并将其删除。希望这次分享能帮到你~