Адрес для входа в РФ: exler.world
Сложный поиск дубликатов фотографий
26.10.2015 11:04
18446
Комментарии (35)
Мне периодически приходится искать дубли среди фотографий, снятых на телефон: они по умолчанию заливаются в Dropbox, тот их зачем-то переименовывает и потом, когда я чищу содержимое телефонов, возникают всякие дубли. Так вот, хохма в том, что дубли имеют разные имена. И с этой проблемой никак не справляются обычные средства, вроде поиска дублей в ACDSee - там поиск предельно примитивный: по именам и размерам файлов.
В прошлый раз я эту задачу решил с помощью Duplicate Photo Finder. Но это платная программа, а кроме того, выяснилось, что она глючит: в этот раз при поиске дублей среди нескольких тысяч файлов она просто тупо вываливалась с невнятной ошибкой. Вот тебе, бабушка, и платная программа.
Начал пробовать другие варианты (в свое время насоветовали в комментах, за что всем большое спасибо). Нашел простенькую, при этом гибко настраиваемую и совершенно бесплатную программу CloneSpy, которая у меня без труда обнаружила несколько сотен дублей и их прибила (с моего любезного разрешения).
Так что если у кого стоит подобная задача, рекомендую - CloneSpy.
Войдите, чтобы оставить комментарий.
Большое спасибо за наводку на "CloneSpy"! Рекомендую дописать в тексте статьи, что данная программа находит не только дубли фотографий, но и дубли аудиофайлов (очень полезно для меня) и видео! Совершенно неожиданно и очень полезно! Так что имейте ввиду, если кому нужно 😄
Программ поиска дублей фотографий на компьютере много. Но я ищу ту, которая по КОНКРЕТНОМУ фото ищет все его дубли (возможно, другого размера и с иным именем) в других каталогах на моём компьютере. Например, я размещаю это фото в отдельный каталог, указываю программе путь к ней - и она ищет по всему компьютеру дубли этого фото. Может, кто-то знает программу, которая не просто вываливает перечень из сотен дублей, а умеет делать и это? В интернете такой поиск возможен - а на компьютере?
а глупый вопрос можно?
если фотографию повернул ( обычно в просмотрщике windows) как такие программы поиска дубликатов поймут такую фишку? отловят?
если фотографию повернул ( обычно в просмотрщике windows) как такие программы поиска дубликатов поймут такую фишку? отловят?
Только там ньюанс. Внизу окна "Выделить группу.." есть опция "Оставить невыделенным хотя бы один файл в каждой группе". Если выбрать тут "Первый в группе", например, то именно первый файл в каждой группе останется невыделенным.
XnView дубли ищет, вроде даже как по содержимому. Хотя, честно говоря, еще сам особо не испытывал.
У меня Dropbox при закачке фотографий их иногда пережимает что ли, так что фотографии из Camera Uploads бинарно отличаются от тех, что скачаны непосредственно с телефона. Так и не смог пока найти нормальную программу, которая бы нашла все подобные дубликаты.
А чем Вас не устраивает Google Picasa3.9? Старенькая, надежная. Работает оффлайн. Правда поиск одинаковых всё ещё в разделе Экспериментальные функции, но свою функцию выполняет.
picasa.google.com
picasa.google.com
shamil, музыкальные файлы сравнивать по звучанию и находить так дубликаты умеет Audio Comparer
С картинками ясно. А с музыкальными файлами? Что б сравнивала по звучанию и желательно бесплатная.
shamil: С картинками ясно. А с музыкальными файлами? Что б сравнивала по звучанию и желательно бесплатная.
Я не слушаю музыку. Так что не в теме.
Просто в качестве альтернативы вышеназванным программам добавлю про свой Image Comparer
Не умеет искать по всяким контрольным суммам, умеет искать дубликаты только по содержимому картинок. То есть одну и ту же картинку в raw и jpeg найдёт как дубликат. Сохраненную с другим разрешением тоже скорее всего найдёт со степенью схожести 99%. Есть у алгоритма сравнения проблемка - не рекомендую использовать для grayscale изображений.
Не умеет искать по всяким контрольным суммам, умеет искать дубликаты только по содержимому картинок. То есть одну и ту же картинку в raw и jpeg найдёт как дубликат. Сохраненную с другим разрешением тоже скорее всего найдёт со степенью схожести 99%. Есть у алгоритма сравнения проблемка - не рекомендую использовать для grayscale изображений.
bolide:
Просто в качестве альтернативы вышеназванным программам добавлю про свой Image Comparer
Не умеет искать по всяким контрольным суммам, умеет искать дубликаты только по содержимому картинок. То есть одну и ту же картинку в raw и jpeg найдёт как дубликат. Сохраненную с другим разрешением тоже скорее всего найдёт со степенью схожести 99%. Есть у алгоритма сравнения проблемка - не рекомендую использовать для grayscale изображений.
Просто в качестве альтернативы вышеназванным программам добавлю про свой Image Comparer
Не умеет искать по всяким контрольным суммам, умеет искать дубликаты только по содержимому картинок. То есть одну и ту же картинку в raw и jpeg найдёт как дубликат. Сохраненную с другим разрешением тоже скорее всего найдёт со степенью схожести 99%. Есть у алгоритма сравнения проблемка - не рекомендую использовать для grayscale изображений.
Вот это правильный подход. Скачал, тестирую, пока вроде все нравится.
Мне, да и не только мне одному, очень важно, чтоб можно было находить дубликаты в разных форматах, а именно nef, cr2, dng, x3f, tiff, jpeg. На поддержку x3f особо не рассчитываю, хотя если вдруг сумеете ее прикрутить, цены вашему продукту не будет. Для справки могу оставить ссылку, вдруг вам будет интересно поковырять эту утилитку и прикрутить ее к своей программе
www.proxel.se
Остальные форматы важны в порядке перечисления с джепегом на последнем месте, потому что серьезная съемка всегда ведется в рав. Любые джепеги полученные из рава проще убить и сделать новые, чем что-то в них искать. Однако, если по какой-то причине рава соответствующего джепегу в системе не оказалось, то этот богомерзкий джепег придется хранить как зеницу ока, и ваша программка в этом может хорошо помочь.
И сразу вопрос по горячим следам, как можно, и можно ли вообще купить вашу программу через Пейпэл, а то вэбманей у нас с роду не было и не будет, а через Softkey оно как-то запутано получается.
Спасибо!
Уже много лет использую d'peg! - The Duplicate Media Manager
Он давно не развивается и имеет кошмарный интерфейс, но по качеству поиска дублей в изображениях (причем не полностью идентичных) - лучше всех испробованных.
Он давно не развивается и имеет кошмарный интерфейс, но по качеству поиска дублей в изображениях (причем не полностью идентичных) - лучше всех испробованных.
Была подобная проблема на Маке. Куча фоток по всей системе были разбросаны и место дико отжирали. Благо, есть приложения для поиска и удаления фоток и других файлов для Мак. Мне больше всех приглянулся Duplicates Expert - простой и многофункциональный. Кроме дубликатов файлов и папок, показывает еще и похожие папки. Раскиданные по диску файлы быстро чищу, просто указав из какой папки их скопом удалять.
Поставил CloneSpy. Попробовал, удалил. То же самое делает Total Commander, только быстрее - а именно ищет дубликаты по имени и размеру (еще может и по содержимому).
Для картинок не годится. Антидупл на порядок лучше - есть предпросмотр и он ищет именно похожие картинки, даже если они в разных форматах.
Алекс, такие программки советовать не комильфо 😄
Для картинок не годится. Антидупл на порядок лучше - есть предпросмотр и он ищет именно похожие картинки, даже если они в разных форматах.
Алекс, такие программки советовать не комильфо 😄
Danmag: Поставил CloneSpy. Попробовал, удалил. То же самое делает Total Commander, только быстрее - а именно ищет дубликаты по имени и размеру (еще может и по содержимому).
Ищет. И выводит их парами. Несколько сотен пар. А дальше чо?
Danmag: Для картинок не годится.
Чо? Что значит - не годится, когда он у меня отлично нашел все дубликаты?
Danmag: Алекс, такие программки советовать не комильфо
Ищет. И выводит их парами. Несколько сотен пар. А дальше чо?
Danmag: Для картинок не годится.
Чо? Что значит - не годится, когда он у меня отлично нашел все дубликаты?
Danmag: Алекс, такие программки советовать не комильфо
Не комильфо всякую херню в комментах нести.
Судя по сайту Duplicate Photo Finder ищет и похожие фото. То есть использует цифровой отпечаток.
А CloneSpy просто ищет 100% идентичные файлы.
Я правильно понял?
А CloneSpy просто ищет 100% идентичные файлы.
Я правильно понял?
yumashka:
Судя по сайту Duplicate Photo Finder ищет и похожие фото. То есть использует цифровой отпечаток.
А CloneSpy просто ищет 100% идентичные файлы.
Я правильно понял?
Судя по сайту Duplicate Photo Finder ищет и похожие фото. То есть использует цифровой отпечаток.
А CloneSpy просто ищет 100% идентичные файлы.
Я правильно понял?
Видимо да. Но мне и нужно искать именно идентичные файлы.
Поддерживаю. AntiDupl.Net и правда хорош. Но он меня отсылает из программы прямиком на свой родной сайт по этому адресу: http://antidupl.sourceforge.net/english/index.html . Интересно, чем они отличаются )
Мне кажется, AntiDupl.NET нагляднее и удобнее. Бесплатен, есть русский интерфейс.
sourceforge.net/projects/antidupl/
sourceforge.net/projects/antidupl/
Спасибо. Я пользуюсь дрейнейшим DupDetector. Интерфейс так себе, зато не валится при поиске среди 30 тысяч фотографий. И можно тонко настраивать процент совпадений, чтобы он мог найти, скажем, только те фотографии, которые похожи между 98% и 100%. Или наоборот - между 96% и 98%. Хотя для целей поиска тупо дупликатов - это уже перебор 😄
Естественно - он shareware
Естественно - он shareware
