Парсинг Google - несколько секретов мастерства

February 22, 2008

Приведу несколько примеров не очень распространенных запросов к Google, которые зачастую значительно помогают наиболее полно распарсить Google по интересующему вас запросу.

Итак, поехали…

Пример №1

Где-то с квартал назад Google изменил подход к тегу daterange, теперь запросы с тегом daterange помогают парсить выдачу по дате (диапазон дат задается согласно Юлианскому календарю).

Так например, по запросу daterange:2454496-2454496 Google выдает страницы от 30 января 2007.

Примеры запросов:

  • "guestbook" daterange:2454496-2454496
  • "guestbook" daterange:2454495-2454495
  • "guestbook" daterange:2454494-2454494

 

Пример №2

Использую следующие два типа запросов можно разделить выдачу Google на половинки, т.е. на сайты с www и без www

  • "some words" inurl:"www." только домены с префиксом www
  • "some words" -inurl:"www." только домены без префикса www

 

Пример №3

Теперь немного на примере самой популярной зоны com (приненимо и для всех других известных вам доменных зон) рассмотрим ряд специфических запросов, которые позволяют разбить выдачу на более мелкие кусочки

  • site:com только домены зарегистрированные в зоне com

  • site:*com только домены зарегистрированные в зоне com и без дефиса в имени домена
  • site:com -site:*com только домены зарегистрированные в зоне com и с одним или более дефисами в имени домена

  • site:*-*com только домены с одним дефисом в имени домена
  • site:*-*-*com только домены с двумя дефисами в имени домена
  • site:*-*…-*com только домены с N кол-вом дефисов в имени домена
  • site:com -site:*com -site:*-*com -site:*-*-*com только домены с двумя дефисами подряд или с тремя и более дефисами в имени домена

  • site:*.*com только домены с одной точкой в имени домена (сабдомены)
  • site:*.*.*com только домены с двумя точками в имени домена
  • site:*.*…*.*com только домены с N кол-вом точек в имени домена

  • site:com/* в адресе одна и более поддиректорий
  • site:com/*/* в адресе есть 2 поддиреторий
  • site:com/*/*/* в адресе есть 3 поддиреторий
  • site:com/*/*…/* в адресе есть n поддиреторий

Важно: подстановка дирректорий возможна совместно с точками и дефисами!

——————- 

kak-tak.com

Собираем базу для спамилки

September 20, 2007

Буду краток. :)
http://www.google.com/search?hl=en&q=20050313042221+phentermine
Надеюсь вопрос, покупать ли базы на форумах у всех прочитавших это отпал навсегда. Вообще чем плох архив, это тем что при его проспаме база палится моменально. Хотя даже там где казалось бы базу палить не нужно, некоторые горе-умельцы зачем то это делают: http://www.google.com/search?hl=en&q=piskasosiska (раньше было порядка 100 тыщ результатов).

———————————————-

alexf.name