Доброго времени суток.

Статистика вещь неумолимая - у многих пользователей на жестких дисках лежат, порой, десятки копий одного и того же файла (например, картинки, или музыкального трека). Каждая из таких копий, разумеется, отнимает место на винчестере. А если диск ваш уже «забит» под завязку - то таких копий может быть достаточно много!

Чистить дубликаты файлов вручную - вещь не благодарная, именно поэтому, я хочу собрать в этой статье программы для поиска и удаления дубликатов файлов (причем, даже тех, которые отличаются и по формату файла, и по размеру друг от друга - а это довольно сложная задача!). Итак…

Список программ для поиска дубликатов

1. Универсальные (для любых файлов)

Осуществляют поиск одинаковых файлов по их размеру (контрольным суммам).

Под универсальными программами, я понимаю, те, которые годятся для поиска и удаления дублей любых типов файлов: музыки, фильмов, картинок и пр. (ниже в статье для каждого типа будет приведены «свои» более точные утилиты). Работают они все в большинстве по одному типу: они просто сравнивают размеры файлов (и их контрольную сумму), если есть среди всех файлов одинаковые по этой характеристике - показывают вам!

Т.е. благодаря ним можно быстро найти на диске полные копии (т.е. один в один) файлов. Кстати, так же отмечу, что данные утилиты работают быстрее, чем те, которые специализированы для конкретного типа файлов (например, поиска картинок).

DupKiller

Эту программу я поставил на первое место по ряду причин:

• поддерживает просто огромное число разнообразных форматов, по которым она может проводить поиск;
• высокая скорость работы;
• бесплатная и с поддержкой русского языка;
• очень гибкая настройка поиска дублей (поиск по названию, размеру, типу, дате, содержимому (ограниченно)).

Duplicate Finder

Эта утилита, помимо поиска копий, еще и сортирует их так, как вам вздумается (что очень удобно, когда копий находится неимоверное количество!). Так же к возможностям поиска добавьте побайтовое сравнение, сверка контрольных сумм, удаление файлов с нулевым размером (и пустых папок тоже). В общем-то, с поиском дублей эта программа справляет довольно неплохо (и быстро, и качественно!).

Немного не комфортно будут себя чувствовать те пользователи, которые плохо знакомы с английским: русского в программе нет (возможно после будет добавлен).

Glary Utilites

Вообще, это не одна утилита, а целый сборник: поможет удалить «мусорные» файлы, задать оптимальные настройки в Windows, дефрагментировать и очистить жесткий диск и т.д. В том числе, в этом сборнике есть утилита для поиска дублей. Работает она относительно не плохо, поэтому я и порекомендую этот сборник (как один из самых удобных и универсальных - что называется на все случаи жизни!) еще раз на страницах сайта.

2. Программы поиска дубликатов музыки

Данные утилиты пригодятся всем меломанам, у которых на диске скопилась порядочная коллекция музыки. Рисую довольно типичную ситуацию: скачиваете различные сборники музыки (100 лучших песен октября, ноября и пр.), часть композиций в них повторяется. Не удивительно, что, накопив музыки на 100 ГБ (к примеру), 10-20ГБ - могут быть копиями. Причем, если бы размер этих файлов в разных сборниках был одинаковый - то их бы можно было бы удалить первой категорией программ (см. выше в статье), но так как это не так - то эти дубли не находятся ничем, кроме вашего «слуха» и специальных утилит (которые представлены ниже).

M usic Duplicate Remover

Результат работы утилиты.

Эта программа отличается от остальных, прежде всего, свои быстрым поиском. Она ищет повторные треки по их ID3 тегам и по звуку. Т.е. она как бы за вас прослушает композицию, запомнит ее, а затем сравнит ее с другими (таким образом, проделывает огромный объем работы!).

На скриншоте выше представлен ее результат работы. Свои найденные копии она представит перед вами в виде небольшой таблички, в которой к каждому треку будет приписана цифра в процентах схожести. В общем, достаточно удобно!

A

Найденные повторные MP3 файлы…

Эта утилита схожа с вышеприведенной, но у нее есть один несомненный плюс: наличие удобнейшего мастера, который будет Вас вести по шагам! Т.е. человек, впервые запустивший эту программу, легко разберется куда нажимать и что делать.

Например, в своих 5000 треках за пару часов, мне удалось найти и удалить несколько сотен копий. Пример работы утилиты представлен на скрине выше.

3. Для поиска копий картинок, изображений

Если анализировать популярность тех или иных файлов, то картинки, пожалуй, не отстанут от музыки (а для некоторых пользователей и перегонят!). Без картинок вообще сложно представить работу за ПК (и другими устройствами)! Но поиск картинок с одинаковым изображением на них - дело довольно трудное (и долгое). И, должен признаться, программ этого рода сравнительно не много…

ImageDupeless

Сравнительно небольшая утилита с довольно неплохими показателями поиска и устранения дублей картинок. Программа сканирует все изображения в папке, а затем сравнивает их между собой. В результате вы увидите список картинок, которые похожи друг на друга и сможете сделать вывод о том, какую из них оставить, а какую удалить. Очень полезно, иногда, прореживать свои архивы фото.

Пример работы ImageDupeless

Кстати, вот небольшой пример личного испытания:

• подопытные файлы: 8997 файлов в 95 каталогах, 785Мб (архив картинок на флешке (USB 2.0) - gif и jpg форматы)
• галерея заняла: 71.4Мб
• время создания: 26 мин. 54 сек.
• время сравнения и вывода результатов: 6 мин. 31 сек.
• результат: 961 похожее изображение в 219 группах.

Image Comparer

Об этой программе я уже упоминал на страницах сайта. Представляет собой так же небольшую программу, но с довольно хорошими алгоритмами сканирования картинок. Есть пошаговый мастер, запускающийся при первом открытии утилиты, который проведет через все «тернии» первой настройки программы для поиска дублей.

Кстати, чуть ниже приведен скриншот работы утилиты: в отчетах вы можете просмотреть даже мелкие детали, где картинки несколько различаются. В общем-то, удобно!

4. Для поиска дублей фильмов, видео-роликов

Ну и последний популярный тип файлов, на котором хотелось бы остановиться - это видео (фильмы, ролики и пр.). Если когда-то раньше, обладая 30-50 ГБ диском, знал в какой папке где и какой фильм сколько отнимает (и они все были наперечет), то, например, сейчас (когда диски стали 2000-3000 и более ГБ) - часто встречаются одни и те же ролики и фильмы, но в разном качестве (что может отнять достаточно много места на жестком диске).

Большинству пользователей (да, в общем-то и мне 🙂), такое положение дел не нужно: просто отнимает место на винчестере. Благодаря парочке утилит ниже, вы сможете очистить диск от одинаковых видео…

Янв 28 2017

Даже у тех, кто не занимается фотографией, редактированием изображений, созданием видеороликов и слайд-шоу, созданием вирусных открыток, анимацией и т д, на компьютере довольно часто встречаются одинаковые изображения, размещенные в разных папках.

Конечно, тем кто занят творческой деятельностью на компьютере, очень помогает привычка хранить изображения в отдельных тематических папках.

А еще, привычка удалять ставший ненужным после завершения работы над проектом медиаматериал.

И все таки, как ни старайся, а похожие изображения (дубликаты) все равно периодически появляются на компьютере.

Подбирая картинки для группы в соцсетях или блога — редактируя и оптимизируя их не всегда получается удалить ставшие ненужными оригиналы картинок.

В предыдущей статье я подробно описываю

Чтобы не запутаться — одинаковым картинкам с разным расширением или размером даются разные названия, размещаются в разных папках и т д.

Но изображения на картинках остаются прежними и желая удалить ненужные копии сталкиваешься с необходимостью затратить на это время.

Еще накопление одинаковых изображений на компьютере связано с тем, что мы выгружаем из фотоаппарата (телефона, камеры) фотографии на компьютер целиком (всем составом) в одну папку. При этом не удалив фотографии с носителя.

Сделав еще несколько снимков, мы снова выгружаем все фотографии с камеры всем составом в другую папку.

И так бесконечное число раз.

При просмотре фотографий иногда очень хочется навести в конце концов порядок — удалить похожие и не нужные.

Но ведь на это надо время! Время и терпение!

Потому что сложно запомнить «видел я уже эту фотографию или нет?», «удалил ее (такую же) или нет?», «и куда я ее разместил?», «а вдруг такой уже в других папках нет?».

Вообщем хлопотно это — удалять дубликаты картинок и фотографий с компьютера.

И оставлять все «как есть», тоже уже порой не хочется, потому что путаница возникает — отнимает время и портит настроение.

В помощь нам существует несколько программ, способных быстро просмотреть, сравнить изображения и удалить дубликаты.

Эх, если б они еще и сами слайд-шоу да коллажи создавали…

Вот эти программы:

AntiDupl.NET
DuplicateFinder
DuplicateFileDetector
DuplicateCleaner
ImageDupeless
ImageComparer
Duplicate File Remover

В данной статье я расскажу о программе AntiDupl.NET

Во-первых, потому что сама ею пользуюсь. Она установлена у меня на компьютере.

Во-вторых, потому что эта программа бесплатная и распознает изображения в форматах JPEG, GIF, TIFF, BMP, PNG и другие.

Хочу отметить, что программа просматривает и анализирует само содержание графических файлов.

И потому находит не только полностью идентичные файлы, но и похожие.

Похожими картинки становятся после редактирования — обрезки, нанесения надписи, поворота угла изображения. Все эти манипуляции с изображениями блогер выполняет для создания уникальной картинки для сайта.

Иногда уже размещенные картинки на блоге нужно оставить для дальнейшего создания баннера к примеру, или размещения анонса статьи на страничках социальных сетей.

Умение программы находить похожие картинки (измененные) очень помогает быстро найти и удалить действительно ненужные.

Программа поддерживает русский интерфейс и есть возможность гибкого управления параметрами поиска.

Скачать программу

На странице скачивания программы выбирайте самую верхнюю строку — так как в ней размещена последняя версия программы.

При загрузке программы сразу определите папку и место на компьютере, где она будет храниться постоянно. Потому что программу устанавливать не надо. Распаковав архив в ту же папку вы найдете файл с расширением exe.

Запускаете программу двойным кликом левой кнопки мыши на этом файле.

Теперь настроим язык программы.

Далее «Указать путь» (желтая папка) и в окне нажать «Добавить каталог».

После этого откроется маленькое окно, где вы сможете выбрать ту папку, изображения в которой вы хотите проверить

Для анализа и поиска дубликатов вы можете добавить не одну, а несколько папок.

И даже папки содержащие внутри себя папки.

И даже просто указать весь диск С, к примеру. Или «флешку», которая в этот момент будет подключена к компьютеру.

После того как каталоги добавлены, нажимаем на «ОК» и затем на значок шестеренку — то есть переходим к выбору параметров настроек.

Вот теперь не торопимся и вдумчиво отмечаем или не отмечаем галочкой нужные настройки поиска.

В окне Опции есть несколько вкладок.

Смысл настроек и их описание очень понятны, поэтому не буду на них останавливаться.

Пройдитесь по всем вкладкам перед тем как нажать кнопку ОК

И теперь еще один шаг — нажимаем на значок зеленый треугольник «Начать поиск». После этого программа очень быстро выдаст вам результат

Результат проверки программа вам выдаст в следующем окне, где на первый взгляд будет ничего не понятно.

На самом деле все просто. В левой части отображены 2 картинки. И под каждой ее данные — вес, размер, название и т. д.

Вы можете вручную удалять верхнюю или нижнюю. Или дать программе команду сделать это за вас.

Обратите внимание на верхнюю командную строку и вертикальную строку с похожими значками.

Подводите курсор к кнопке — отобразится подсказка — со значением этих кнопок.

Если вы хотите быстро удалить, к примеру все первые картинки, нажимайте на клавиатуре сочетание клавиш Ctrl+A и затем кнопку в верхней панели программы «Удалить все первые».

Чтобы оставить отредактированные и подготовленные для дальнейшей публикации или создания слайд-шоу картинки — смотрите на нужные вам параметры — вес, размер, расширение. Все эти данные отображаются в данных каждой копии.

Удаленные картинки попадут в корзину. Останется только очистить саму корзину.

Когда я впервые с помощью этой программы почистила компьютер от изображений дубликатов на моем компьютере освободилось … 9 с лишним Гб!

Сама была под впечатлением 🙂

Думаю, что на изучение и первое освоение этой программы у вас уйдет гораздо больше времени, чем на удаление дубликатов изображений на компьютере с помощью программы AntiDupl.NET

Наверняка у вас есть большая база фотографий. А бывало так, что просматриваете вы фотографии из этой базы и возникает ощущение, что некоторые фотографии повторяются ? Вручную искать дубликаты фотографий - долго, мучительно и глупо. Соглашусь с теми, кто скажет, что это попросту бесполезное занятие, ведь фотографии занимают не так уж и много места жёстком диске, однако иметь хорошо упорядоченный каталог фотографий всё-таки хочется. Да и не было бы этой статьи, если бы не существовало программного способа найти дубликаты картинок , поэтому сделать вам это не составит никакого труда!

Для поиска дублирующихся фотографий можно использовать программу AntiDupl.NET . Программа абсолютна бесплатная, поддерживает основные графические форматы: JPEG, GIF, TIFF, BMP, PNG, EMF, WMF, EXIF и ICON, имеет русский интерфейс. И собственно прекрасно выполняет свою основную функцию, поиск дубликатов.

От слов к делу. Скачав, по представленной выше ссылке, последнюю версию программы AntiDupl.NET , вы получите на своём компьютере самораспаковывающийся архив. Дважды кликнув по нему, вы увидите следующее окошко, где нам будет предложено выбрать место для распаковки файлов. Распаковываем прямо на рабочий стол.

В результате в том месте, которое вы указали, появится папочка с программой, готовой к работе. Долго не думая, запускаем её. Изначально всё у нас там на английском языке. Чтобы увидеть родной русский язык делаем следующее: Нажимаем View - Language - Русский.

В Опциях можно добавить галочку: Искать повёрнутые и зеркальные дубликаты - так как часто некоторые одинаковые фотографии, оказываются попросту перевёрнутыми.

Далее выбираем папку, в которой лежат фотографии и в которой предположительно есть дубликаты. Для этого: Нажимаем на значок папки - появляется окошко Пути - нажимаем добавит каталог - выбираем нужную папку - нажимаем Ок. Если необходим поиск не в одной, а в нескольких папках проделываем эту операцию ещё раз.

Для запуска поиска нажимаем на зелёный значок play.

В итоге программа нам выведет список дубликатов картинок. Далее вы можете либо удалить обе либо один из дубликатов.

Если в опциях выставить Учитывать размер картинок и Учитывать тип картинок, то программы будет находить дубликаты только одного размера и только в одном расширении соответственно. Выставлять данные галки я бы не советовал, так как часто попадаются одинаковые картинки, только разного размера.

«Поиск дубликатов в больших коллекциях фотографий»

Image Dupeless 1.6.3 (русский) предназначен для поиска похожих изображений (дубликатов) в больших коллекциях. Поддерживаются графические файлы в форматах JPEG, GIF, BMP, PCX, PNG, TIFF, PGM, WMF, EMF, EPS, PSD, ICO. Сравнение основывается на содержании изображений вне зависимости от их размера, формата, разрешения и т.п.
Имеются продвинутые возможности каталогизации имеющихся на CD галерей и дальнейшей off-line работы с ними. При этом сравнение вновь поступающих изображений с уже имеющимися в галерее занимает значительно меньше времени, чем полное пересканирование самой галереи, и возможно даже при отсутствии самого CD с галереей. Имеются внутренние средства сравнения, удаления, перемещения и обновления файлов, изменения привязки корневого каталога галереи.
Ключевые особенности:
- уникальная возможность слияния серий изображений, основываясь на информации о похожести;
- опциональная возможность хранения миниатюр изображений и работа в режиме off-line;
- возможность сравнения галереи с новыми изображениями без ее пересканирования и при отсутствии ее исходных картинок (только по файлу галереи), а также сравнения галерей между собой;
- возможность поиска в галерее изображений, похожих на заданное;
- возможность сохранять результаты поиска дубликатов;
- возможность быстро обновить галерею, приведя ее в соответствие файлам на диске без повторного чтения (например после переноса галереи на новое место);
- возможность задать определяемый пользователем список непохожих изображений (например, когда вы не хотите удалять некоторые очень похожие пары и не хотите, чтобы они появлялись в списке найденных дубликатов после каждого нового сравнения);
- возможность автоматически, по задаваемым пользователем условиям, отметить для дальнейшего удаления "плохие" дубли;
- наглядное и удобное представление результатов поиска дублей;
- возможность варьирования соотношением производительность/удобство путем изменения параметров;
- возможность работы с описаниями изображений из файла "descript.ion";
- возможность импорта/экспорта списков дубликатов.
скачать (4 Мб) >

Graf2 1.02.0 Free rus

Программа для поиска дубликатов изображений и просто похожих картинок, группового переименования и просмотра изображений. Поддерживаются форматы JPG, ICO, BMP, GIF, TIF, PNG. Программа призвана обеспечить 2 основные функции: Поиск дубликатов изображений и организация удобного режима упорядочения и переименования файлов в каталоге. Кроме того программу можно использовать в качестве просмотрщика графических файлов. Обеспечивает удобный режим обработки полученного набора дубликатов, многопоточность, английский и русский языки, хелп...

ОС : Windows® XP, Vista, 7
Размер : 1.2 Mb

AntiDupl.NET 2.2.4.528 RUS FREE

Как правило, у современных компьютерных пользователей имеются большие коллекции изображений в различных форматах. И чем больше эти коллекции, тем более вероятно в них наличие большого числа дубликатов. Естественное желание пользователя - избавиться от них. Однако, если коллекция достаточно большая, то заниматься этим вручную - весьма утомительное и непродуктивное занятие. Программа AntiDupl.NET поможет вам автоматизировать данный процесс. Она способна находить и выводить дубликаты изображений в основных графических форматах: JPEG, GIF, TIFF, BMP, PNG, EMF, WMF, EXIF и ICON. Сравнение ведется на основании содержимого файлов, поэтому программа может находить не только полностью идентичные, но и похожие изображения. Кроме того, программа умеет находить изображения с некоторыми типами дефектов. Программа AntiDupl.NET - бесплатна, достаточно проста в управлении, имеет высокую скорость и точность работы, поддерживает русский интерфейс.

ОС: Windows 2000/XP/Vista/7 (x86/x64)
Размер: 1,35 Мб
Скачать AntiDupl.NET 2.2.4.528 Rus бесплатно

Здравствуйте дорогие читатели. Сегодня мы с вами поговорим о дубликатах файлов, а также о методах борьбы с ними.

Исходя из самого названия вы, наверное, уже догадались, что это за файлы. Такие вот повторяющиеся файлы очень загрязняют жесткий диск, поэтому от них нужно периодически избавляться.

Дубликаты появляются на компьютере произвольно и из-за невнимательности пользователей. Хотя все мы люди и нам свойственно накапливать всякую всячину. Какой бы большой объем памяти не имел ваш жесткий диск – после удалению дубликатов он станет намного свободнее, нежели был до совершения этого процесса.

К большому сожалению, удаление дубликатов файлов невозможно произвести без посторонних программ. Разработчики Windows почему-то упустили этот момент, но люди нашли выход. В интернете есть масса бесплатных программ для избавления от дублирующих файлов. Ниже я приведу три лучшие из них, а также дам вам возможность их скачать.

CloneSpy

Очень простая и удобная утилита для очистки вашего компьютера от дубликатов файлов. После запуска CloneSpy производит поиск по контрольным суммам файлов, игнорируя при этом дату и время их создания, размер и т.д. Такой метод поиска дубликатов файлов позволяет сделать более точный и детальный поиск.

Но CloneSpy имеет также и минус, поскольку в результатах поиска, помимо копий может отобразить файлы с одинаковым именем.

Скачать бесплатно утилиту CloneSpy

Auslogics Duplicate File Finder

Более мощная программа поиска файлов-дублей. Делает детальный анализ жесткого диска на наличие одинаковых файлов, в конце которого вы получите список со всеми найденными дубликатами.

Я заметил, что Auslogics Duplicate File Finder хорошо специализируется на поиске мультимедийных файлов-дублей, а это гигабайты одинаковых музыкальных треков, фильмов, картинок и т.д.

Скачать бесплатно программу Auslogics Duplicate File Finder

DupKiller

Тоже очень хорошая программа для поиска и удаления дубликатов файлов. Очень понравилась функция установки процента допустимого совпадения, который вы можете установить вручную перед запуском анализа жесткого диска.

Большинство программ для очистки и оптимизации Windows обладают встроенными модулями поиска и удаления дубликатов.

Правда, эффективность их представляется несколько сомнительной, поскольку поиск дублирующихся файлов производится не по их содержимому, а по метаданным.

Поэтому для этих целей лучше использовать специализированные утилиты.

Есть программы, которые ищут дубликаты только среди текстовых документов, есть программы, предназначенные для поиска дубликатов фотографий, аудио и даже видео. Сегодня мы бы хотели предложить вашему вниманию пять приложений, основной задачей которых является поиск одинаковых и похожих изображений.

Dup Detector

Простая и эффективная утилита для поиска дубликатов изображений. Поддерживает работу с форматами JPG, BMP, PNG, TIF, PCX, TGA, WMF, EMF и PSP. Возможности Dup Detector включают попиксельное сравнение изображений в пределах одной или нескольких галерей (папок). Отличительной особенностью программы является опция установки процентного диапазона соответствия при поиске.

Из недостатков следует отметить относительно медленную скорость работы. Кроме того при выводе результатов утилита показывает только по два изображения за один раз. Язык интерфейса - .

DupliFinder

Простая и удобная программка для поиска и удаления дубликатов фотографий и прочих изображений. Поиск осуществляется путем сравнения контрольных сумм MD5. В остальном программа похожа на Dup Detector. Поддерживается работа с подкаталогами, вывод процентного соотношения схожести, предпросмотр результатов сравнения. Выбранные дубликаты можно удалить. К недостаткам относятся несколько медленная скорость работы, а также необходимость установки пакета Java. Язык интерфейса - английский.

Similar Images Finder

Легкая программка для поиска одинаковых и похожих изображений различных форматов. SimilarImages поддерживает около 30 форматов, включая JPG, JPEG, BMP, PNG, ICO, CUR, а также менее известные RAS, PGX, WBMP, MNG, PCX, DCX и некоторые другие. Имеется возможность автоматического и ручного удаления дубликатов.

VisiPics

Еще один неплохой инструмент для поиска одинаковых или похожих картинок. Позволяет находить изображения даже с незначительными изменениями. Работает как с отдельными каталогами, так и с целыми разделами. Есть возможность фильтрации по степени схожести. Из форматов поддерживаются JPEG, GIF, PNG, BMP, PCX, TIFF, TGA и RAW. Основной недостаток - несколько неудобный пользовательский интерфейс и отсутствие русского языка.

Image Comparer

Пожалуй, лучшая программа для поиска и удаления дубликатов изображений. Image Comparer имеет удобный и простой интерфейс на русском языке, поддерживает работу со всеми популярными графическими форматами. Сравнение производится по самому содержимому изображения, так называемому цифровому отпечатку. При этом указывается степень схожести в процентах. Найденные дубликаты можно перемещать, копировать или удалять.