视频查重小工具

! q! o" P  p4 R0 `2 n5 T& x
       混迹论坛良久，一直索取没有回报，挺愧疚的。
       今天如往常一样当“囤囤鼠”，下载了某合集，内含488个视频，下完一看重复的数量太多了，有些是加了水印算新的，有些是改了分辨率算新的。对于老哥们无私奉献，我是非常感激的，不过重复太多看着难受，于是萌生出搓一个查重工具的念头。
7 r0 H, u( [" o; L7 T. o5 M5 {       整个工具由AI开发。基于python，无复杂流程，1分钟可以部署完成，命令行界面很轻量，已测试效果不错。
% ?0 t& {* R" W& p8 H* _5 }  L
" g. y  O1 t( n& J

---

) q6 S& x! X: @: n        工具文件如下：

2 W1 i, C) \! h2 i       视频文件重复扫描.zip (3.99 KB, 下载次数: 211, 售价: 100 车票)

2026-4-3 01:21 上传

点击文件名下载附件

1 g, c# G+ W( Y4 a0 S+ k
      部署方法：
# r: _6 R% x% T) ^, [
. ~9 O; t0 C* j; @( O6 [" Q) @5 k       1.[安装python]：访问 https://www.python.org/downloads/，下载安装python 3.1x.x
# p8 H" s5 C, z8 F: V       2.验证python是否安装成功：Win+R - CMD ，输入python --version，有版本出来就成功了。
/ c7 ~9 a  E6 |8 f       3.安装必要组件，在cmd里粘贴：
              pip install opencv-python-headless imagehash pandas tqdm openpyxl
- ?5 z; N$ z  l" r' p       安装成功后，所有的准备工作就完全结束了。



4 \" R/ ^& W* T      使用方法：
2 K0 z6 M+ e& v' u4 p$ C       01.双击打开脚本，自动弹出窗口让你选择素材文件夹(支持子文件夹)，你选择视频文件夹，点击确认，开始自动扫描，你的工作就全部做完了，点根烟去吧。
       02.扫描完成后，疑似重复的素材，会被自动移动至“疑似重复”目录下，但工具不会“擅自”删除文件或重命名文件。
       03.在原始目录下，会同时给出一个“重复视频对照表.xlsx”报表，告诉你保留了哪些文件在原地，移动了哪些文件。可以简单的核对一下，核对无误直接删掉“疑似重复”目录就完事了。

# }  D4 Z+ R3 `8 E1 U7 d       [关于扫描对比的精度调整]：
4 X6 N9 c- L1 V' P       如果水印太大或者裁剪严重，可能识别不出来。
7 Q3 |* q; N7 I$ F( S1 ~7 B3 i       搜索代码里的“duplicate_groups = find_duplicates(folder_path, threshold=10)”
       改成 threshold=5（精度更高，更严格，误报少但可能漏检）
+ B7 p+ I# L0 d5 i; b2 }( W       改成 threshold=15（精度更低，更宽松，能抓到更多变形但可能误报）
  ~) h9 x& X- ~- X

1 X3 W. s' X( f, S! l
3 ], b  u5 e1 e; [/ o& N       这个脚本不会删除文件，只会扫描、移动重复视频、生成报表，没有其他功能了。百分百安全的，我不会写代码，不会偷偷藏东西来偷老哥们电脑里的小姐姐。如果有自动删除的需要，可以把这个代码丢给AI，增加这种功能。

% }. x$ ]0 c- I. s

---

       使用截图：


2 V' t1 i3 ?8 u4 M9 S8 L, \3 h(自动扫描视频，提取特征)
- ]7 _# h( ~* }) s

(扫描完成后，统一把所有疑似重复的文件移入“疑似重复”文件夹)
7 o) B) h1 k" `" V/ K

1 K( S2 O& f2 w- M5 y
(抽查结果，完全没问题。那就可以直接删除整个文件夹了)


! U) f2 e2 b6 s  p& P

: A2 q) e. e8 s7 ]0 X( x* f* }
2 v$ Y4 s8 {9 r1 g8 g5 D$ K
: n' q. k+ v6 X9 ]' }3 C
; g' z2 M: o1 F% s" X1 b
5 ^% t% w: ]0 S5 m, h$ U

  F+ {1 g; p6 s1 C: P" y/ x! L

qintian224 发表于 2026-4-3 22:40
等我深入研究一下python

哈哈哈不用深入研究，我完全0基础不会写代码，安装完了python啥也不设置。直接就能运行

大佬能不能加上声音检查？有的探花视频看着画面没有广告，实际上隔一段时间就突然大声播放广告，tm网址还是一个字母一个字母读出来的，时间贼长

sfporn 发表于 2026-4-6 15:20
大佬能不能加上声音检查？有的探花视频看着画面没有广告，实际上隔一段时间就突然大声播放广告，tm网址还是 ...

, d9 k" u! x! E! Y/ v  v4 O9 |* @这种我还真遇到过，但是一般遇到了我直接就给他删了，然后去电报上找没广告的资源了

大佬这个怎么下载啊，我下完了zip后面还有一个html，删了也没法解压

asebuse 发表于 2026-4-7 13:46
大佬这个怎么下载啊，我下完了zip后面还有一个html，删了也没法解压

脚本就是一个4kb的脚本，没有密码，没有乱七八糟的限制，直接能下的，你看看是不是网络有问题

我随大王来巡山 发表于 2026-4-7 20:33
脚本就是一个4kb的脚本，没有密码，没有乱七八糟的限制，直接能下的，你看看是不是网络有问题 ...

换了夸克能直接下载zip了但显示压缩包损坏，没法解压，大佬能不能给个网盘

看了LZ的帖子，我只想说一句很好很强大！

大佬这个能说下怎么用吗 下载之后打不开

6261899 发表于 2026-4-8 22:37
7 \$ O2 e. h/ g: B6 ~大佬这个能说下怎么用吗 下载之后打不开

加里奥不救盲僧

asebuse 发表于 2026-4-7 22:19
换了夸克能直接下载zip了但显示压缩包损坏，没法解压，大佬能不能给个网盘 ...

! q/ w! J. j$ ?# K7 \没网盘。这东西没用网盘，直接传在论坛上的，别用什么工具，就浏览器直接下载

试试看看哦哦

啥也不说了，楼主就是给力！