#block-hash #dedup #accurate #deduplication #tool #list #compile

app dedup-advanced

适用于blockhash的快速且精确的重复项删除工具

4个稳定版本

1.2.0 2021年8月27日
1.1.1 2021年8月9日
1.1.0 2021年7月8日
1.0.0 2021年7月7日

#15 in #block-hash

MIT许可证

20KB
465

dupefinder 2 electric boogaloo

从blockhash列表中查找重复图像

非常实用,比我在谷歌上搜索到的替代品快得多,真正的大文件集比geeqie快约40倍。编译此程序;从http://blockhash.io下载并编译C blockhash。

使用以下命令在您的文件上运行blockhash:find . -regextype posix-egrep -regex ".*\.(png|jpe?g)$" -type f -printf '"%p"\n' | xargs -n1 -IF -P8 blockhash F >> hashes

然后运行此程序对hashes列表进行操作,将输出重定向到文件,您将获得按新行分隔的重复项列表。您可以使用bash处理列表,例如将找到的所有文件移动到类似geeqie中的dedup功能,然后手动删除副本。

依赖关系

~25–41MB
~613K SLoC