Форум истории автоспорта > Исследовательская лаборатория
Инструменты. Автоматические скачиватели
Владимир Коваленко:
Итак, могу поделить новым опытом в данном вопросе.
Во-первых, насчёт программ. Все программы можно разделить на два вида: загрузчики, которые скачивают файлы по прямым ссылкам, и скачиватели, которые позволяют скачивать связанные тем или иным способом друг с другом файлы или сайты целиком.
Из загрузчиков я испольую только "Флэш-гет", и особых проблем с ним не испытываю. Мне нравится то, что если просто скопировать тестовый список, он автоматически экспортируется во "Флэш-гет", и надо только указать настройки. В общем, с этой программой вопросов пока нет.
Со скачивателями - проблемы. Там так много настроек, что сложно в них разобраться. Более того, у меня есть подозрение, что одни и те же настройки в разных скачивателях называются по-разному. Не могу разобраться с фильтрами.
Самый простой случай у меня для скачивателя - это страничка на форуме со списком ссылок "Имадж-шака". Я так понимаю, мне нужны такие настройки, чтобы было проникновение на 1 уровень, и сохранялись только файлы изображений с сервера, в адресе которого будет слово imageshack. В идеальном случае далжны сохраниться только нужные картинки и часть мелких посторонних типа баннеров. Но добиться этого не удаётся.
Я поставил четыре программы, из которых две позже удалил, названия которых даже не запомнил. Оставил только "Телепорт", с которым уже был некоторый опыт работы, и "Оффлайн эксплорер", который нередко хвалят.
Во-вторых, насчёт ограничения по скачиванию с "Моторспорт-ком". Начал скачивать новости по спискам заголовков, которые по подписке приходят каждый день, и ограничений не было! За раз скачивал сотни файлов. Не знаю насчёт фотографий, а новости качаются без проблем. Но раньше и новости качались с ограничениями.
Юрий Карасёв:
--- Цитата: Владимир Коваленко ---Я поставил четыре программы, из которых две позже удалил, названия которых даже не запомнил. Оставил только "Телепорт", с которым уже был некоторый опыт работы, и "Оффлайн эксплорер", который нередко хвалят.
--- Конец цитаты ---
Насчет последнего могу сказать, что программа отличная. Пользуюсь ей уже 4 года и никаких вопросов не возникает.
--- Цитата: Владимир Коваленко ---Самый простой случай у меня для скачивателя - это страничка на форуме со списком ссылок "Имадж-шака". Я так понимаю, мне нужны такие настройки, чтобы было проникновение на 1 уровень, и сохранялись только файлы изображений с сервера, в адресе которого будет слово imageshack. В идеальном случае далжны сохраниться только нужные картинки и часть мелких посторонних типа баннеров. Но добиться этого не удаётся.
--- Конец цитаты ---
Сегодня почитал Справку к Оффлайн Эксплорер и сделал шаблон, который скачивает только картинки и все. Опробовал на Ссылки для скачивания - разовые проекты. Все получилось[/font].[/font][/font] Без всяких баннеров и прочей ерунды. Сегодня вечером попробую выложить шаблон и сам архив.
Владимир Коваленко:
Спасибо огромное! Если не сложно, объясни, пожалуйста, принцип.
Просто обычно нет смысла человеку тратить время на поиски, если кто-то уже разобрался и может доступно объяснить.
Юрий Карасёв:
Попробую, конечно, но опять же только вечером.
Еще могу выложить Справку на русском языке к "Оффлайн Эксплорер" если надо.
Юрий Карасёв:
По этой ссылке лежит справка к "Оффлайн Эксплорер"(ОЭ) на русском языке и файл шаблона для скачивания картинок с Ишака.
disk.tom.ru/502744?pw=7J3DnfQM
Файл шаблона надо поместить в следующую папку: C:\Documents and Settings\Твой логин в Винде\Application Data\Offline Explorer\. На вопрос о замене текущего файла ответить утвердительно.
ACHTUNG. Перед этим создай копию того файла Template.dat который у тебя там есть сейчас. На всякий случай. ACHTUNG[size=0]. [/size]
Если папку Application Data не видишь, значит Проводник не показывает скрытые и системные файлы и папки. Тогда в Проводнике заходишь в меню Сервис -> Свойства папки. На закладке "Вид" ставишь соответствующую галочку (флажок).
После того как файл будет заменен запускай ОЭ. В меню Файл выбираешь "Шаблоны...". Там в конце списка должен быть шаблон с названием "Imageshack Страница целиком". Выдели его и нажми на "Свойства...".
Уровень=2. Т.к. Первый уровень - это сама страница форума, а второй это уже страница Ишака с картинкой.
Слева в Окне "Категория" следующие настройки.
Типы файлов. Текст=php т.к. скрипт страницы Ишака с картинкой написан на php. Изображения=bmp, jpg, gif, png, tiff. Основные графические форматы в которых размещают картинки на Ишаке. Минимум размер картинки = 6kb. Чтобы не закачивались thumbnails и прочий мелкий мусор. И в Тексте и в Изображениях стоит "Загружать согласно фильтрам URL". Обрати внимание, позже расскажу.
Фильтры URL. Протокол, Сервер и Каталог оставляем по умолчанию. Имя файла=Произвольная конфигурация. Маска включения имен файлов:
http://img*.imageshack.us/my.php?image=*.*
Чтобы попала в список закачки, например, вот эта ссылка http://img295.imageshack.us/my.php?image=0078uu.jpg
http://img*.imageshack.us/img*/*/*.*
Чтобы закачалась сама картинка по пред. ссылке, фактический адрес которой: http://img295.imageshack.us/img295/64/0078uu.jpg
http://img*.echo.cx/my.php?image=*.*
Чтобы попала в список закачки, например, вот эта ссылка http://img136.echo.cx/my.php?image=2600fg.jpg
http://img*.echo.cx/img*/*/*.*
Чтобы закачалась сама картинка по пред. ссылке, фактический адрес которой: http://img136.echo.cx/img136/902/2600fg.jpg, а после переадресации получится такой http://img136.imageshack.us/img136/902/2600fg.jpg.
Следующие маски аналогично предыдущим.
http://img*.exs.cx/my.php?loc=img=*&image=*.*
http://img*.exs.cx/img*/*/*.*
Маска исключения имен файлов = http://img*.imageshack.us/img/imgad.png.
Сюда эта ссылка попала потому что это рекламный баннер, который весит ~60kb.
Все остальные пункты оставил как есть.
Чтобы закачать например страницу форума с ссылками на картинки на Ишак. Щелкаешь правой кнопкой на странице. Выбираешь "+ Offline explorer: Download the current page". Затем в самом ОЭ появится проект закачки. Щелкаешь на нем также правой кнопкой, выбираешь "Применить шаблон..." и выбираешь из списка наш: "Imageshack Страница целиком".
Вот собственно и все. Читай справку, она удобно и понятно написана. Будут вопросы задавай.
Навигация
Перейти к полной версии