Поиск дубликатов файлов Windows

В этой инструкции о нескольких бесплатных и простых способах найти дубликаты файлов на компьютере в Windows 10, 8 или 7 и удалить их при необходимости. Прежде всего речь пойдет о программах, которые позволяют выполнить поиск дубликатов файлов, но, если вас интересуют способы интереснее, в инструкции затронута и тема их поиска и удаления с помощью Windows PowerShell.

Для чего это может потребоваться? Почти у любого пользователя, который достаточно продолжительное время сохраняет архивы фотографий, видео, музыки и документов к себе на диски (не важно, внутренние или внешние хранилища), с огромной вероятностью «образуются» дубликаты одних и тех же файлов, занимающие лишнее место на HDD, SSD или другом накопителе.

Это не особенность Windows или систем хранения, скорее — особенности нас самих и результат значительного объема хранимых данных. И, может оказаться, что найдя и удалив дубликаты файлов, вы сможете освободить значительное место на диске, а это может быть полезным, особенно для SSD. См. также: Как очистить диск от ненужных файлов.

Важно: не рекомендую выполнять поиск и удаление (особенно автоматическое) дубликатов сразу на всём системном диске, указывайте в приведенных программах ваши пользовательские папки. Иначе есть значительный риск удалить необходимые системные файлы Windows, которые нужны более чем в одном экземпляре.

Программы для поиска одинаковых фотографий

Перед тем, как вы начнете использовать эти инструменты, обязательно сделайте копию всех ваших изображений. С вашими фотографиями нечего не будет, но всегда лучше иметь резервную копию важных данных.

Find.Same.Images.OK

Программа Find.Same.Images.OK находит одинаковые изображений, сравнивая их на уровне пикселей. Таким образом, даже если изображения отредактированы, то есть повернуты, зеркалированы и даже изменены, программа сможет их найти.

Скачать программу Find.Same.Images.OK вы можете с официального сайта.

Awesome Duplicate Photo Finder

Данная утилита делает поиск и может находить точные копии изображений, а также показывает процент их сходства. Я проверил работу программы в одной из моих папок, в которой были разные вариации одной и той же фотографии с точки зрения цветов, размеров и даже изображений с похожими лицами. Awesome Duplicate Photo Finder смог найти все.

С помощью настроек можно регулировать поиск похожих изображений от точных копий до похожих снимков. Программа доступна так же в портабельной (версия не требующая установки на компьютер) версии.

Скачать утилиту Awesome Duplicate Photo Finder вы можете с официального сайта.

CCleaner

Многофункциональная утилита CCleaner поставляется со встроенным модулем поиска одинаковых файлов Duplicate Finder , которую вы можете использовать для поиска одинаковых картинок. Но возможности поиска с помощью CCleaner очень ограниченны, т.к. он может найти только изображения с одинаковым размером, именем и измененной датой и содержимым файла, но не
может определить какие именно файлы можно безопасно удалить.

Поэтому я рекомендую проверить путь к файлу и сам файл, чтобы убедиться, что он на самом деле является дубликатом. Папки для поиска одинаковых фотографий вы можете выбирать сами с в настройках поиска.

Загрузить программу CCleaner вы можете с официального сайта.

Glary Duplicate Finder

Используя Glary Duplicate File Finder, вы можете полностью просматривать все изображения на своем компьютере, чтобы найти дубликаты изображений. Результат делится на две части: на файлы и дубликаты файлов. Вы можете указать, что вы хотите сохранить и удалить все остальное. Чтобы найти дубликат, утилита сопоставляет файлы по типу, содержанию, размеру и дате создания.

Вы также можете нажать кнопку «Check Intelligent» (Проверить интеллектуальность), и он будет выбирать только те дубликаты файлов, которые можно удалить одним щелчком мыши не задумываясь.

Скачать программу для поиска одинаковых изображений Glary Duplicate Finder вы можете с официального сайта.

VisiPics

Это старое программное обеспечение, но оно довольно хорошо работает. Возможно, вам не понравится его интерфейс, но способность находить изображения безусловно впечатлит. Вы можете найти дубликаты изображений, используя три разных фильтра: строгий, простой и свободный. Он также находит небольшие и несжатые изображения с низким разрешением в виде дубликатов, что дает вам возможность выбрать и сохранить лучшую копию. VisiPics поддерживает изображения JPEG, GIF, PNG, BMP, PCX, TIFF, TGA и RAW. Результаты отображаются в реальном времени. Поэтому вам не нужно ждать завершения сканирования. Вы можете продолжать удалять изображения по мере их появления в результате.

Загрузить программу VisiPics вы можете с официального сайта.

Visual Similarity Duplicate Image Finder

Этот поисковик изображений ищет похожие изображения на основе форматов изображений, разной глубины бит и размеров изображений. Программа позволяет вам выбрать процент сходства при выполнении поиска изображений. Как и VisiPics, Visual Similarity Duplicate Image Finder также может находить меньшие изображения с меньшим разрешением в виде дубликатов.

Приложение позволяет создавать правила, выбирать действия после обработки и так далее. Программное обеспечение также поддерживает кеш предыдущих результатов для получения более быстрых результатов. Но в бесплатной версии есть один минус — ограничение результатов до 10.

Скачать утилиту Visual Similarity Duplicate Image Finder вы можете с официального сайта.

AntiTwin

Этот небольшой инструмент может сравнивать не только размер и дату файла, но и его содержимое. Он может находить похожие изображения, документы и музыкальные файлы на вашем ПК. Самое большое преимущество использования этого программного обеспечения в том, что он абсолютно бесплатный, и рекламное ПО полностью отсутствует. Для получения точных результатов при сравнении изображений вы можете выполнить байтовое сравнение или сравнение пикселей.

Читать еще: Как в Вайбере отключить сохранение фото

Результаты ясно показывают дубликаты изображений, но при этом вы можете также просмотреть каждый файл во избежание удаления важной для вас информации.

Скачать программу для поиска одинаковых изображений AntiTwin вы можете с официального сайта.

Рассмотренные выше инструменты помогут вам избавиться от дубликатов изображений и не только изображений. И хотя есть много других программ, — эти наиболее просты и бесплатны!

Если вы используете другие удобные и бесплатные программы поиска дубликатов изображений, дайте нам знать в комментариях.

Настройка поиска одинаковых файлов (дублей).

После установки программы запускаем её двойным кликом по ярлыку на рабочем столе.

Откроется стартовое окно программы. Как видим, в левой колонке показаны все разделы жёсткого диска компьютера — диск C:/ ; D:/ ; E:/. Выбираем разделы диска, на которых необходимо найти одинаковые файлы. Можно выбрать все, но время на поиск будет затрачено чуть больше. Правда, при этом дубликаты файлов будут найдены на всех трёх разделах.

Справа выбираем "Look for these file types only", чтобы иметь возможность выбирать тип файлов, дубликаты которых мы будем искать. Если выберем "Look for all file types", то программа будет искать одинаковые файлы картинок (Images), аудиофайлов (Audio files), видеофайлов (Video files), архивов (Archives), приложений (Applications). Это внесёт путаницу и увеличит время поиска. Лучше выбирать каждый тип файлов по очереди и проводить поиск отдельно.

Для начала поищем одинаковые картинки и фотографии на компьютере. Отмечаем галочкой "Images" и жмём "Next".

В следующем окне видим два пункта.

Ignore files smaller than

С помощью двух этих настроек можно точно задать диапазон поиска дублей по размеру файла. Например, мы хотим найти одинаковые файлы, размер которых может быть от 56 до 105 мегабайт.

На следующем шаге нужно указать, какой из трёх параметров файла стоит игнорировать.

Ignore File Names

Это может быть удобно, если есть полностью идентичные файлы, но у них разные имена. Я бы выбрал такую настройку при поиске дублей фильмов. Файлы фильмов могут называться по-разному, а их размер одинаков. В таком случае программа найдёт их и покажет мне.

Вот пример. Копии видеофайла (фильм "Области тьмы") с разными именами были найдены на всех разделах диска.

Если скачать один и тот же файл из интернета, то у этих файлов будет одинаковые имя и размер, но вот время создания будет разное, хотя файлы абсолютно одинаковые. Правда, при этом нужно скачивать файл в разные папки, иначе имя файла будет также иное.

Чтобы программа нашла одинаковые файлы даже с разным временем создания, ставим галку в данном пункте. Стоит учесть, что такие атрибуты файла, как "создан", "изменён" и "открыт" могут меняться программами. Также при копировании файлов (в Windows 7) атрибут "создан" и "открыт" меняет дату на дату копирования. А вот атрибут "изменён" не меняется.

Выбираем и жмем "Next".

Четвёртый шаг настроек. Пункт "Search for all file names" сам по себе неинтересен. Он указывает на то, что искать дубли файлов нужно с любыми именами. А вот пункт "File name contains the following" производит поиск с учётом наличия в названии ключевых фраз. Это очень удобно, когда нужно найти копии файла, название которого знаем или помним частично.

Далее жмём "Next".

Последний пятый пункт. Здесь надо указать, куда будут помещаться копии найденных файлов при удалении.

"To Recycle Bin" — "В Корзину". Удаление в корзину. Преимущество в том, что после удаления копии файлов можно восстановить из "Корзины". Мало ли. Вдруг поторопились.
"To Rescue Center" — "В Центр спасения". Некий центр, в котором сохраняется архив удалённых файлов. Файлы можно восстановить позже, но только при помощи самой программы Auslogics Duplicate File Finder.
"Permanently" — "Полное удаление". Просто удаляет файлы без возможности восстановления. Не советую.

Теперь, когда параметры поиска выставлены — запускаем поиск кнопкой "Search". Начнётся сканирование.

Когда сканирование завершится, в окне программы отобразятся найденные копии файлов. В правой колонке можно просмотреть содержимое файла ("превьюшки"). Отлично отображаются картинки и фото, а видеофайлы даже можно посмотреть прямо в интерфейсе программы!

Читать еще: Как просмотреть контакты на своём аккаунте Google

Отмечаем галочкой те копии файлов, которые нужно удалить. Это способ удаления вручную. Но можно выделить все копии файлов сразу. Для этого жмём на стрелочку рядом с кнопкой "Select" и выбираем пункт "Select all duplicates of these *.jpg files". При этом будут отмечены все дубли файла. Неотмеченными останутся лишь единственные версии файла.

Иногда нужно сохранить файл в определённой директории, поэтому не лишним будет ознакомиться с местом расположения файла. Путь к файлу указывается в колонке "Path". Если файл в данной директории нужно оставить, то убираем галку в чекбоксе напротив имени файла.

Чтобы удалить отмеченные файлы — жмём кнопку "Delete Selected Files". Кстати, способ удаления можно изменить тут же. При клике по стрелке рядом с кнопкой появляется выпадающее меню, где можно задать способ удаления: в "Корзину" (To Recycle Bin), в "Центр Спасения" (To Rescue Center) или удалить безвозвратно (Permanently).

После удаления покажется окно, в котором будет указано, сколько файлов просканировано, сколько одинаковых файлов было найдено и сколько удалено.

Чтобы вернуться в стартовое окно программы и произвести новый поиск — кликаем по иконке домика в левом нижнем углу.

Список программ для поиска дубликатов

1. Универсальные (для любых файлов)

Осуществляют поиск одинаковых файлов по их размеру (контрольным суммам).

Под универсальными программами, я понимаю, те, которые годятся для поиска и удаления дублей любых типов файлов: музыки, фильмов, картинок и пр. (ниже в статье для каждого типа будет приведены «свои» более точные утилиты). Работают они все в большинстве по одному типу: они просто сравнивают размеры файлов (и их контрольную сумму), если есть среди всех файлов одинаковые по этой характеристике — показывают вам!

Т.е. благодаря ним можно быстро найти на диске полные копии (т.е. один в один) файлов. Кстати, так же отмечу, что данные утилиты работают быстрее, чем те, которые специализированы для конкретного типа файлов (например, поиска картинок).

DupKiller

Эту программу я поставил на первое место по ряду причин:

поддерживает просто огромное число разнообразных форматов, по которым она может проводить поиск;
высокая скорость работы;
бесплатная и с поддержкой русского языка;
очень гибкая настройка поиска дублей (поиск по названию, размеру, типу, дате, содержимому (ограниченно)).

В общем, рекомендую к использованию (особенно тем, кому постоянно не хватает места на жестком диске 🙂 ).

Duplicate Finder

Эта утилита, помимо поиска копий, еще и сортирует их так, как вам вздумается (что очень удобно, когда копий находится неимоверное количество!). Так же к возможностям поиска добавьте побайтовое сравнение, сверка контрольных сумм, удаление файлов с нулевым размером (и пустых папок тоже). В общем-то, с поиском дублей эта программа справляет довольно неплохо (и быстро, и качественно!).

Немного не комфортно будут себя чувствовать те пользователи, которые плохо знакомы с английским: русского в программе нет (возможно после будет добавлен).

Glary Utilites

Вообще, это не одна утилита, а целый сборник: поможет удалить «мусорные» файлы, задать оптимальные настройки в Windows, дефрагментировать и очистить жесткий диск и т.д. В том числе, в этом сборнике есть утилита для поиска дублей. Работает она относительно не плохо, поэтому я и порекомендую этот сборник (как один из самых удобных и универсальных — что называется на все случаи жизни!) еще раз на страницах сайта.

2. Программы поиска дубликатов музыки

Данные утилиты пригодятся всем меломанам, у которых на диске скопилась порядочная коллекция музыки. Рисую довольно типичную ситуацию: скачиваете различные сборники музыки (100 лучших песен октября, ноября и пр.), часть композиций в них повторяется. Не удивительно, что, накопив музыки на 100 ГБ (к примеру), 10-20ГБ — могут быть копиями. Причем, если бы размер этих файлов в разных сборниках был одинаковый — то их бы можно было бы удалить первой категорией программ (см. выше в статье), но так как это не так — то эти дубли не находятся ничем, кроме вашего «слуха» и специальных утилит (которые представлены ниже).

M usic Duplicate Remover

Результат работы утилиты.

Эта программа отличается от остальных, прежде всего, свои быстрым поиском. Она ищет повторные треки по их ID3 тегам и по звуку. Т.е. она как бы за вас прослушает композицию, запомнит ее, а затем сравнит ее с другими (таким образом, проделывает огромный объем работы!).

На скриншоте выше представлен ее результат работы. Свои найденные копии она представит перед вами в виде небольшой таблички, в которой к каждому треку будет приписана цифра в процентах схожести. В общем, достаточно удобно!

A udio Comparer

Найденные повторные MP3 файлы…

Эта утилита схожа с вышеприведенной, но у нее есть один несомненный плюс: наличие удобнейшего мастера, который будет Вас вести по шагам! Т.е. человек, впервые запустивший эту программу, легко разберется куда нажимать и что делать.

Например, в своих 5000 треках за пару часов, мне удалось найти и удалить несколько сотен копий. Пример работы утилиты представлен на скрине выше.

Читать еще: Анонимные браузеры для Андроид

3. Для поиска копий картинок, изображений

Если анализировать популярность тех или иных файлов, то картинки, пожалуй, не отстанут от музыки (а для некоторых пользователей и перегонят!). Без картинок вообще сложно представить работу за ПК (и другими устройствами)! Но поиск картинок с одинаковым изображением на них — дело довольно трудное (и долгое). И, должен признаться, программ этого рода сравнительно не много…

Image Comparer

Об этой программе я уже упоминал на страницах сайта. Представляет собой так же небольшую программу, но с довольно хорошими алгоритмами сканирования картинок. Есть пошаговый мастер, запускающийся при первом открытии утилиты, который проведет через все «тернии» первой настройки программы для поиска дублей.

Кстати, чуть ниже приведен скриншот работы утилиты: в отчетах вы можете просмотреть даже мелкие детали, где картинки несколько различаются. В общем-то, удобно!

4. Для поиска дублей фильмов, видео-роликов

Ну и последний популярный тип файлов, на котором хотелось бы остановиться — это видео (фильмы, ролики и пр.). Если когда-то раньше, обладая 30-50 ГБ диском, знал в какой папке где и какой фильм сколько отнимает (и они все были наперечет), то, например, сейчас (когда диски стали 2000-3000 и более ГБ) — часто встречаются одни и те же ролики и фильмы, но в разном качестве (что может отнять достаточно много места на жестком диске).

Большинству пользователей (да, в общем-то и мне ), такое положение дел не нужно: просто отнимает место на винчестере. Благодаря парочке утилит ниже, вы сможете очистить диск от одинаковых видео…

Duplicate Video Search

Функциональная утилита, которая легко и быстро находит похожее видео на вашем диске. Перечислю некоторые главные возможности:

выявление копии видео с разными битрейтами, разрешениями, характеристиками форматов;
авто-выбор копий видео с более худшим качеством;
выявлять измененные копии видео, в том числе с разным разрешением, битрейтом, обрезкой, характеристиками форматами;
результат поиска представляется в виде списка с миниатюрами (с показом характеристик файла) — так что вы легко сможете выбрать, что удалять, а что нет;
программа поддерживает практически любые форматы видео: AVI, MKV, 3GP, MPG, SWF, MP4 т.д.

Результат ее работы представлен на скриншоте ниже.

Video Comparer

Очень знаменитая программа для поиска дублей видео (правда, больше за рубежом). Позволяет легко и быстро находить похожие видео (для сравнения, например, берется первые 20-30 сек. видео и сравниваются видео между собой), а затем представлять их в результатах поиска, чтобы легко можно было удалить лишнее (пример показан на скриншоте ниже).

Из недостатков : программа платная и она на английском. Но в принципе, т.к. настройки не сложные, а кнопок не так много, пользоваться вполне комфортно и отсутствие знания английского — никак не должно сказаться на большинстве пользователей, которые выберут эту утилиту. В общем, рекомендую к знакомству!

На этом у меня все, за дополнения и уточнения по теме — благодарю заранее. Удачного поиска!

AllDup, найдите дубликаты фотографий, видео и любых повторяющихся файлов

AllDup — это программа, позволяющая удалять с компьютера все виды повторяющихся файлов, а не только фотографии. Эта программа позволяет нам находить повторяющиеся файлы на основе различных критериев, таких как имя файла, расширение, размер, содержимое и даже атрибуты. Кроме того, он имеет специальные алгоритмы для обнаружения как похожих, так и повторяющихся изображений, а также похожих аудиофайлов, которые есть у нас на ПК. Это также позволяет вам находить повторяющиеся видеофайлы в зависимости от их длины и размера.

Мы можем скачать AllDup бесплатно от эту ссылку .

Поиск и удаление дубликатов файлов — Auslogics Duplicate File Finder

Распаковываем архив, жмём на установочный файл программы, в открывшемся окне программы жмём «NEXT»

В следующем окне соглашаемся с лицензией «I accept the agreement» жмём «NEXT».

Далее указываем папку для установки программы, жмём «NEXT« два раза.

После чего ставим галочку «Create a desktor icon« создать ярлык на рабочем столе, жмём «Next».

Далее убираем галочку с надписи «Launch Duplicate File Finder« то есть запустить программу? Жмём «Next».

Поиск изображений

ImageDupeless

Главное условие выбора программы – это высокие показатели скорости работы и качественное сравнение. Оба фактора можно отнести к приложению ImageDupeless.

Её небольшой размер удачно подходит для компьютеров с низкими показателями производительности и ограниченным интернет соединением. Бесплатное распространение и отличное качество русификации обеспечивает популярность программы во множестве систем. Регулярные обновления делают её скорость и точность работы постепенно лучше.

Image Comparer

Приложение обладает целым спектром достоинств:

Простой и понятный интерфейс;
Встроена пошаговая инструкция. Нет необходимости лезть в справку или искать инструкцию в сети, подсказки помогут выполнить всё быстро и надёжно;
Условно-бесплатное распространение.

Некоторые элементы меню переведены некачественно или вовсе остались на английском языке, но это не мешает понимать смысл.

Программные методы работы с дубликатами многократно превосходят ручное выполнение процедуры, хотя и такая возможность присутствует. Благодаря анализу часто удаётся высвободить порядка 5-30 Гб памяти, а иногда и больше. Для SSD-диска или флешки этот объём очень значительный.

0 0 голоса

Рейтинг статьи