Парсеры dogpile.com
July 8, 2008Здесь лежит парсер dogpile.com - дергает поисковик на предмет только что набранных серферами в нем запросов и пишет результаты в базу данных, имеется простенький интерфейс (круче там и не надо). Автор забыл упомянуть, что index.php - это интерфейс c настройками (время работы, частота обращения к dogpile, фильтры) и просмотром результатов, но там нет кнопки “ПУСК” - маленький низачет. Подсказка: запустить его можно, вызвав файл parser.php, находящийся в корневой папке парсера.
Ну а чтобы не получилось так, что я пишу ни о чем, представлю Вашему вниманию упрощенный вариант парсера того же dogpile:
Это один файл (простой, как валенок) размером в 1 кБ, который пишет запросы в текстовый файл. Настройки парсера - элементарные - внутри этого же файла:
- Время выполнения скрипта ограничивается во 2-й и 3-й строках;
- Имя файла для записи результатов - в 4-й строке;
- Пауза между запросами - в 33-й строке;
- Фильтры.. ну там уже можно и разобраться. Главное, что и тут они имеются.
Для особо любознательных и знакомых с PHP+XML в комментариях имеется волшебный адрес запроса еще к одному мета-поисковику в качестве бонуса, он выдает результате в виде XML, для чего конечно данный скрипт не подходит.
Неоспоримый плюс данного парсера dogpile.com в том, что он не требует базу данных, неоспоримый минус - отсутствие интерфейса и связанное с этим неудобство в работе.
—————–


