[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
6 w. z6 D2 X6 x* u7 P9 C# F  X大哥，你这个头像很爱啊，像ai又想vam，有没有出处

1 {' K' _- H! q9 G3 U. R( ~0 j9 H抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

7 Q( w, f- j. p% I感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
import os
import imagehash
) k! n9 B/ z4 O& afrom PIL import Image

/ l# R$ b9 @: w$ n3 B7 ]! u6 P/ kdef compute_image_hash(image_path):
6 R2 g2 P) ^" f3 n& V) f) e    # image = Image.open(image_path)
$ W( _+ e- A; A; _& W8 `, j    # return imagehash.average_hash(image)
    try:
& l, c# ~) `! I# q) _# C' _. O        with Image.open(image_path) as image:
            return imagehash.average_hash(image)
" p2 D+ b7 J. r- Q) Y3 }2 I    except (OSError, IOError) as e:
: F  s& u( _4 U$ k  `        print(f"处理图像 {image_path} 时出错: {e}")
2 B/ V, t& u, ~# H4 M/ q  o        return None
, u* V. l* E1 m" U1 t" p: h
5 `, h6 I) ]8 e( j* a. [def remove_duplicates(image_folder):
3 d- Q1 k( Q- ]+ Z6 F    hash_dict = {}
    duplicates = []

) Q8 n+ t* D. n4 ?    for filename in os.listdir(image_folder):
1 D+ s& _( W) O% Z) K        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
            image_path = image_folder + "\\" + filename
6 R& V' t' [# |5 ?! \) ~            image_hash = compute_image_hash(image_path)

            if image_hash in hash_dict:
                duplicates.append(image_path)
; H6 |1 R0 ]' S, w            else:
2 v7 u; S9 _' Z8 M$ N$ u                hash_dict[image_hash] = image_path
" T# e6 [$ S5 I/ a8 Y        else:
0 ]3 `& G: S8 S; E. L: e0 R8 r            pass
0 }, l7 J) \  K( B
    for duplicate in duplicates:
        os.remove(duplicate)
        print(f"Removed duplicate image: {duplicate}")

" R1 g: Z# @" P; Z9 J8 {' M' C    print("Duplicate removal complete.")

image_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
3 X# H1 S/ }  D; r2 X/ ?remove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
大哥，你这个头像很爱啊，像ai又想vam，有没有出处

一眼ai