Видео инструкция по установке и работе с парсером сайта imgsrc.ru


Установка под Windows:

1. 2.


Запускаем скачанный, установочный файл

На рабочем столе появилось два ярлыка.
Первый ярлык запускает саму программу.
Второй открывает папку закачки.
Программа запускается через любой браузер, наберите в браузере строку
http://127.0.0.1/yparser_imgsrc_ru/

Установка под Linux:

1.


Скачиваем и распаковываем в локальную папку скрипт парсера. Напомним, что скрипт написан на PHP.
Закачиваем с помощью FTP клиента файлы скрипта на сервер работающий под управлением Linux (Apache, php5.x, mySQL ). Имя сервера набираемое в адресной строке браузера должно резолвится и как минимум быть прописано в файле hosts Windows. Или быть установлено на любом рабочем сервере.
Если возникают вопросы, пишите на любой из наших e-mail.
2.


Набираем в браузерной строке
http:// имя Вашего сервера 1/yparser_imgsrc_ru/
и видим установочный диалог. Если Все условия соблюдены, база данных создана и доступы известны, то вводим данные согласно полям и нажимаем кнопку УСТАНОВИТЬ

Подробная инструкция по работе:

русскийenglish

В демо версии программы доступна только одна категория. После ввода ключа открывается неограниченный доступ. При публичном распространении ключа, ключ будет заблокирован.

Вся работа с парсером разбита на несколько шагов:

Шаг 1, собирает названия всех категорий и проверяет не появились ли новые категории.
Далее необходимо выбрать категорию для парсинга. В любой момент можно перейти на любую категорию и опять вернутся, данные не теряются. Перегрузив компьютер, Вы возобновите работу с прерванного момента!

Шаг 2, подготавливает ссылки на страницы со всеми альбомами. После появления новых страниц их число будет добавлено к шагу 3.

Шаг 3, собирает ссылки и ники на альбомы пользователей.

Шаг 4, обходит все альбомы и собирает прямые ссылки на картинки. Если альбом запороленн, то добавляет альбом в список запароленных, а если пароль уже был подобран, то вводит пароль и собирает прямые ссылки на картинки.

Шаг 5, скаичвает картинки. В папку,
для windows: c:\yParser16_1\yParser\yparser_imgsrc_ru\download\ номер категории \ ник \ ,
а для запароленных c:\yParser16_1\yParser\yparser_imgsrc_ru\download\ passwordAlbum\ номер категории \ ник \
то есть все запароленные альбомы скаичваются в папку passwordAlbum. Для Linux то же самое, но все скачивается в папку со скриптом download/.

Подбор пароля. После подбора пароля альбом добавляется в шаг 4. Потом необходимо будет пройти шаг 4, шаг 5.


русскийenglish

Шаг 1. Сканируем названия категорий. Нажать кнопку старт. Дождитесь окончания.


русскийenglish

Шаг 2. Сканируем количество страниц в категории.


русскийenglish

Шаг 3. Ищет новые альбомы пользователей. Так же ищет изменения в ранее скачанных альбомах, если добавились новые фото, то ставит на скачивание этих новых фото.
Если был подобран пароль, то вводит пароль и собирает ссылки на фото.


русскийenglish

Шаг 4. Собираем прямые ссылки на картинки.


русскийenglish

Как видите, с шага 4, добавляется количество фотографий на скачивание (шаг 5)


русскийenglish

В любой момент можно остановить выполнение любого шага и перейти к другому, что бы позднее к нему вернуться. Необязательно ждать окончания процесса.


русскийenglish

Перешли к скачиванию картинок.


русскийenglish

Опять вернулись к поиску ссылок на картинки.


русскийenglish

Запароленные альбомы добавляются на последний шаг, подбора паролей.


русскийenglish

Шаг 4, завершен.


русскийenglish

Шаг 5, скачиваем картинки.


русскийenglish

Скачивание завершено. Заняло около 1 часа, при скорости интернета в 50 мегабит.


русскийenglish

Подбор паролей.


русскийenglish

Альбомы с подобранными паролями добавляются на повторный сбор ссылок на картинки.


русскийenglish

После шага 4, скачиваем полученные фотографии из запароленных альбомов.



Открываем папку скачки с помощью ярлыка,
или по пути c:\yParser16_1\yParser\yparser_imgsrc_ru\download\



Альбомы сортируются по номеру категории и нику.
Запароленные альбомы скачиваются в папку passwordAlbum.
Имейте ввиду, что картинок очень много, террабайты!


Расширенные функции интерфейса



русскийenglish
Включаются дополнительные кнопки нажатием на Расширенные функции.


русскийenglish

1. Удаляет ошибки навсегда. При скачивании иногда возникают ошибки, обрыв интернета и т.д. Но иногда альбомы удаляются и, есть возможность удалить эти ошибки из программы.

2. Заново перекачивает все рисунки. Внимание, эта функция заставляет принудительно перекачать все рисунки.

3. Сбрасывает ошибки сети при подборе пароля.

4. Добавляет свои пароли. Если Вы знаете пароль, то добавьте его в файл password.txt и нажмите эту кнопку. Далее нажмите кнопку подбора пароля и пароль будет введен.
Точное расположение файла для windows:
c:\yParser16_1\yParser\yparser_imgsrc_ru\password\password.txt


Как перенести данные после переустановки Windows?

Шаг 1. Находим и запускаем файл c:\yParser16_1\bin\tmp\uninstall.bat
Шаг 2. Копируем содержимое папки c:\yParser16_1 в безопасное место.
Шаг 3. После переустановки Windows копируем папку назад на диск С.
Шаг 4. Запускаем файл c:\yParser16_1\bin\tmp\install.bat
Запускать парсер можно с помощью любого интернет браузера, набрав в строке адреса:
http://127.0.0.1:88/yparser_imgsrc_ru/