[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
, j0 Q8 _, l0 z' d大哥，你这个头像很爱啊，像ai又想vam，有没有出处

. Z! ~& h# \% s. {9 ^抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

# t6 c+ o% x7 Z( v4 j! w# S感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
import os
import imagehash
from PIL import Image
# ?4 o0 f) v( E4 N1 A8 G
def compute_image_hash(image_path):
    # image = Image.open(image_path)
& R9 r( T: b- w: c    # return imagehash.average_hash(image)
    try:
2 I& d. L' u" B3 ]+ l* z        with Image.open(image_path) as image:
8 x" t& D5 f; k* T  |            return imagehash.average_hash(image)
    except (OSError, IOError) as e:
        print(f"处理图像 {image_path} 时出错: {e}")
        return None
7 O: H( S* v9 q; \' I
def remove_duplicates(image_folder):
    hash_dict = {}
: O$ h/ k% r  U    duplicates = []

    for filename in os.listdir(image_folder):
        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
, y% r; p$ P+ u0 B0 R. N            image_path = image_folder + "\\" + filename
0 G8 |! ?4 ^6 Y5 Y- r" F            image_hash = compute_image_hash(image_path)

            if image_hash in hash_dict:
1 [+ ]* |+ J  z, q7 y* P+ w$ n                duplicates.append(image_path)
            else:
$ k3 ?, T6 d+ W7 v" N                hash_dict[image_hash] = image_path
5 h  a: l  T$ p. o8 L0 |% V        else:
+ i/ ^6 x( ^) s' v9 H6 \            pass

; z0 P$ d7 I) i. e    for duplicate in duplicates:
8 z- ]! ]  y% q        os.remove(duplicate)
        print(f"Removed duplicate image: {duplicate}")
7 q7 f! V& Y1 \8 J" K3 ]
    print("Duplicate removal complete.")
& T  ]" C& J# e  k5 x9 T# s' c  \6 h
. y( b* u( F5 \" qimage_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
remove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

, j7 q# h/ W8 T, O  N) j! f4 g有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
大哥，你这个头像很爱啊，像ai又想vam，有没有出处

一眼ai