Парсер Яндекса. YaP v1.00 [Beta Test]

Рубрика: SEO, Поисковики, Продвижение. Автор job

Вот и закончил работу над парсером. Обещал раньше выпустить, но как обычно нехватка времени затягивает этот момент. Пока [бета тест] вариант, прошу всех заинтересованных хорошенько протестить и отписаться о результатах теста.

Для тех кто боится бана сервера со стороны Yandex с которого будет проходить парсинг  — открыто заявляю, не волнуйтесь, не забанит. В принципе я предусмотрел задержки между парсингом страниц, примерно похожую на пользовательскую задержку. И если Вы гигант статистики и поиска — Яндекс обычно банит на сутки. За время моего тестирования, без пауз, банов не было.

Принцип работы: Для работы парсера достаточно использовать два файла. Первый исполнимы, который можно запускать из под браузера, но основной задумкой был автомат, то есть независимый запуск с сервера через «Cron». Второй непосредственно показывает статистику работы исполнимого файла.

Установка, настройка и работа:

1. Устанавливаем пакет в произвольную папку на сервере к примеру: parser

2. На папку log внутри пакета устанавливаем права 777.

3. Редактируем parsers.keys.

[parser] — обозначает начало работы парсера с сайтом

www.site.ru — имя сайта по которому ищем запросы

213 — регион по которому искать, 213 — москва, 0 — по умолчанию берется ip с которого запущен парсер.

запрос1 — ключевик для поиска

запрос2 — ключевик для поиска

4. Запуск парсера. Первый вариант через браузер www.site.ru/parser/work.php Второй способ добавить задание в Cron «php user/publick_html/www.site.ru/parser/work.php»

5. Просмотр результатов парсинга: www.site.ru/parser/log.php

Скачать — 3,2 Kb

Popularity: 43% [?]