История автоспорта
Форум истории автоспорта => Исследовательская лаборатория => Тема начата: Владимир Коваленко от Июня 24, 2015, 22:13:45
-
Поиск дубликатов фотографий: http://antidupl.sourceforge.net/russian/. Отличный инструмент. Если слева показал 0.0 зелёным цветом, это полный лубликат, и можно удалить один из двух файлов. Степень различия, отличная от полного нуля, можно оценить самостоятельно и удалить тот или иной ненужнгый файл. Например, из разных источников в разное время сохранено одно и то же изображение, но с разыми размерами. Меньшее из них - лишнее, его можно удалить. Программка находит такие дубликаты. Или одна и та же фотография есть с водяным знаком и без. Программа их отслеживает.
-
О! Лет 7-10 назад поставил Image Dupeless. Определенную пользу она давала, бесспорно.
Ради интереса попробую новинку. Да и для небольшого поиска она пригодится, полагаю.
Глобально по фотографиям я просто отстал.
-
Вот воспользовался программкой для сохранения сайтов: http://www.httrack.com/page/2/. Сохраняю только ПДФ-файлы с сайта валлийской ассоциации гонщиков http://www.wrda.co.uk/results_archive/. Скачается - выложу. Но вроде бы пользоваться программкой удобно.
-
По ссылке Влада в сообщении http://motorsporthistory.ru/forum/index.php/topic,1228.msg47083.html#msg47083 (http://motorsporthistory.ru/forum/index.php/topic,1228.msg47083.html#msg47083) пошёл на сайт и посмотрел видео http://www.sonuma.be/archive/grand-prix-de-chimay-1956 (http://www.sonuma.be/archive/grand-prix-de-chimay-1956). Всегда забываю, где находится "хромовский" кэш. Полез в интернет и обнаружил замечательную программку, которая сканирует кэши всех браузеров на компьютере и показывает всё находящееся там видео: http://www.nirsoft.net/utils/video_cache_view.html (http://www.nirsoft.net/utils/video_cache_view.html). Видео можно посмотреть и скопировать в нужную папку с нужным именем. Остаётся просто запускать каждое видео с сайта и дожидаться окончания его проигрывания.
-
Поиск дубликатов фотографий: http://antidupl.sourceforge.net/russian/ (http://antidupl.sourceforge.net/russian/). Отличный инструмент. Если слева показал 0.0 зелёным цветом, это полный лубликат, и можно удалить один из двух файлов. Степень различия, отличная от полного нуля, можно оценить самостоятельно и удалить тот или иной ненужнгый файл. Например, из разных источников в разное время сохранено одно и то же изображение, но с разыми размерами. Меньшее из них - лишнее, его можно удалить. Программка находит такие дубликаты. Или одна и та же фотография есть с водяным знаком и без. Программа их отслеживает.
Не отметил самый большой минус таких программ для меня, что заменяются и имена файлов, естественно, либо остается только одно их них, но не на выбор, а от той фото, которую оставляешь.
Т.е. есть фото "7655" большого разрешения, а есть маленькая "2015_ITA_Mercedes_Hamilton_002_".
Программа найдет эти 2 фото, но можно либо удалить маленькую, либо большую.
А заменить и имя автоматически, что очень важно, не выйдет. Приходится делать это вручную.
-
Ещё одна мощная переименовалка: http://www.advancedrenamer.com/download.
-
Поиск дубликатов фотографий: http://antidupl.sourceforge.net/russian/ (http://antidupl.sourceforge.net/russian/). Отличный инструмент. Если слева показал 0.0 зелёным цветом, это полный лубликат, и можно удалить один из двух файлов. Степень различия, отличная от полного нуля, можно оценить самостоятельно и удалить тот или иной ненужнгый файл. Например, из разных источников в разное время сохранено одно и то же изображение, но с разыми размерами. Меньшее из них - лишнее, его можно удалить. Программка находит такие дубликаты. Или одна и та же фотография есть с водяным знаком и без. Программа их отслеживает.
Не отметил самый большой минус таких программ для меня, что заменяются и имена файлов, естественно, либо остается только одно их них, но не на выбор, а от той фото, которую оставляешь.
Т.е. есть фото "7655" большого разрешения, а есть маленькая "2015_ITA_Mercedes_Hamilton_002_".
Программа найдет эти 2 фото, но можно либо удалить маленькую, либо большую.
А заменить и имя автоматически, что очень важно, не выйдет. Приходится делать это вручную.
На самом деле там такая функция предусмотрена, как оказалось. То есть в найденной паре можно одну из картинок переместить к другой, если они находятся в разных папках, а можно переименовать одну в имя другой. Так что возможности у программки мощные.
Я с её помощью потихоньку чищу свой архив. В первую очередь, я ей чищу сохраняемые с "И-бэя" фотографии. Их очень много, десятки тысяч, но среди них много повторов, так как лоты могут перевыставляться заново. До недавних пор я чистку проводил раз в месяц, чтобы подготовить пакет файлов для рассылки. Ставил на ночь сравнивать две папки: сезоны (то есть основной архив) и временную папку для новых фотографий. За ночь всё благополучно сравнивается, но потом возникает небольшая проблемка. Я сортирую найденные результаты, и удаляю повторы из временной папки. В этот момент сами файлы не удаляются, они только переименовываются программой. Удаляться они начинают, если нажать соответствующую кнопку или закрыть программу. И процесс оказывается очень длинным (то есть удаление файлов с диска), он настолько сильно поглощает ресурсы компьютера (память), что работать им становится практически невозможно.
Поэтому я сейчас ставлю на поиск не раз в месяц, а каждую неделю после сохранения всех лотов. Объёмы меньше, нагрузка тоже меньше. На следующей неделю попробую сделать следующим образом: поставить сравниваться на ночь, а удалять не сразу, а перед уходом на работу, чтобы не ощущать перегрузку памяти.
Таким образом вычищается очень много повторов. При этом программа вываливает также несколько тысяч результатов и по основному архиву. То есть не пара "основной архив"/"новые файлы", а внутри основного архива. Варианты бывают разные. Например, одна и та же фотография попала в одну гонку разных лет. Разумеется, она - правильно, а другая - ошибочно. Или я помещаю страницы из периодики в папки с гонками, и они тем самым дублируются.
Эти дубликаты я тоже потихоньку вычищаю. Интересно, что программа мониторит состояние файла. Например, я открываю в ней результаты сканирования по всему архиву и начинаю работать с самыми верхними. Допустим, она показывает, что в папках двух гонок 1903 года есть одинаковые страницы из журнала. На одной странице есть заметка об одной гонке и о другой. Достаточно эти заметки просто вырезать, и дубликатов больше не будет. Когда вырезал из одного из файлов, программка показала эскиз получившейся картинки.
-
Я немного изменил формат чистки папок. Если на начальном этапе все сваленные в кучу изображения я просто фильтровал на предмет дубликатов с помощью программ и программочек, то сейчас практически от этого отказался. Мне в этом плане много легче - я собираю фотографии лишь с 1930 по 1960 гг. Поэтому фотографий у меня, думаю, меньше чем у остальных. Дальше я определяюсь с дубликатами, выбираю с наибольшим разрешением, менее обрезанную, с отсутствующими копирайтами. Потом стараюсь каждую фотографию правильно обозвать. Подробное описание фото вписываю в "свойствах". Убираю дефекты фото (выравниваю по горизонтали, убираю точки, светлые или наоборот затемненные места, муар и т.д.). Весьма кропотливая работа, но час-полтора, украденные у сна, дают впечатляющий результат. Все вновь поступающие в папку изображения сперва кладутся в "буферную" папку, откуда после анализа идут в основную или в корзину.
Таким образом удается обработать "год" примерно за месяц-два.
-
С моими объёмами это не вариант. Я подробно разбираю только материалы по тем гонкам, над анализом которых иногда работаю. Все остальные файлы просто раскидываю по папкам.
-
Программка Search&Replace (https://cloud.mail.ru/public/269u/g1YZ1LECF) позволяет находить в массиве файлов элемент текста и заменять его на другой. Например, всегда писал Уорвик, а потом выяснил, что правильный перевод - Уорик. Можно собрать все файлы в кучу и разом заменить неправильное слово на правильное.
-
Не совсем в тему, но нашел забавный способ сохранять изображения с интернет-страничек. У меня были трудности с сохранением страниц газет из dlib.connect.it. Обычные методы копирования владельцами архива отключены, скриншоты превращаются в пляску с бубном. Но у меня установлено приложение "Яндекс-диск. Скриншот". При наведении курсора на изображение, в данном случае страница газеты целиком, в левом верхнем углу появляется иконка с "летающей тарелкой". Кликаю на нее. И все! Потом захожу на свой "Яндекс-диск", ставлю галки на все, что скачал сегодня и загружаю на комп. Приходит в виде архива. Писать намного дольше, чем делать. Мне понравилось.
Сохраняется вот в таком виде: https://yadi.sk/i/pqlrxPBYv7JxG (https://yadi.sk/i/pqlrxPBYv7JxG)
-
Шикарно! Сп!
-
Установил, но летающей тарелки в левом верхнем углу не получил. Попробуй сохранить фото: https://revslib.stanford.edu/item/nd990hp6362.
-
Revslib - исключение (хотя таких много): каждое фото там построено в виде нарезанных кусков, каждый из которых - отдельное изображение. Поэтому "Яндекс.диск" будет как и при ручном сохранении, копировать только конкретный фрагмент. Я уже давно оттуда сохраняю только через PrintScreen. 21-й век! Издевательство!
Касаемо той самой иконки с летающей тарелкой. Забыл сказать, что пользуюсь Яндекс-браузером (читай "Хром") с установленным дополнением "Яндекс-диск":
(https://img-fotki.yandex.ru/get/112776/139248038.b/0_16be6b_31ae7dcf_orig.jpg)
-
Прога для скачки с books.google
http://www.books43.com/ (требует регистрации)
-
Прога для скачки с books.google
http://www.books43.com/ (требует регистрации)
Неплохой сайт, но есть нюансы:
1) регистрация требует привязки к дополнительному аккаунту (Фейсбук, ВК, Гугл+ и т.п.);
2) скачивается каждая книга несколько дней (в зависимости от объёма);
3) каждый день можно добавлять только один(!) запрос;
4) общее количество скачиваемых книг не должно превышать 1000шт.
Добавлю от себя, что там скачиваются страницы, которые из-за ограничений открываются не часто.
Сейчас у меня в очереди пара книг, которые Влад выкладывал в Абонементе в урезанном виде - посмотрим, сколько теперь страниц "вытянется".
-
Программка для просмотра файлов в кэшэ бразуеров: http://proshowproducer.net/showthread.php?504-Cache-View-Plus.
-
Прошу помощи,
может у кого-нибудь есть на недельку логин / пароль на форум
http://www.p300.it (http://www.p300.it/)
а то недавно ввели регистрацию, но какую-то уж очень итальянскую,
я все вбил, а меня не пускает, пишет напишите про себя в теме WELCOME и мы дадим вам полный доступ на форум,
а как же я напишу, если меня на форум то и не пускает,
или может кто разгадал эту загадку, как там зарегистрироваться.
Заранее спасибо за помощь.