Парсинг Google - несколько секретов мастерства

Submitted by DmitryHT on Thu, 31/01/2008 - 14:25.

Приведу несколько примеров не очень распространенных запросов к Google, которые зачастую значительно помогают наиболее полно распарсить Google по интересующему вас запросу.

Итак, поехали…

Пример №1

Где-то с квартал назад Google изменил подход к тегу daterange, теперь запросы с тегом daterange помогают парсить выдачу по дате (диапазон дат задается согласно Юлианскому календарю).

Так например, по запросу daterange:2454496-2454496 Google выдает страницы от 30 января 2007.

Примеры запросов:

"guestbook" daterange:2454496-2454496
"guestbook" daterange:2454495-2454495
"guestbook" daterange:2454494-2454494

Пример №2

Использую следующие два типа запросов можно разделить выдачу Google на половинки, т.е. на сайты с www и без www

"some words" inurl:"www." только домены с префиксом www
"some words" -inurl:"www." только домены без префикса www

Пример №3

Теперь немного на примере самой популярной зоны com (приненимо и для всех других известных вам доменных зон) рассмотрим ряд специфических запросов, которые позволяют разбить выдачу на более мелкие кусочки

site:com только домены зарегистрированные в зоне com

site:*com только домены зарегистрированные в зоне com и без дефиса в имени домена
site:com -site:*com только домены зарегистрированные в зоне com и с одним или более дефисами в имени домена

site:*-*com только домены с одним дефисом в имени домена
site:*-*-*com только домены с двумя дефисами в имени домена
site:*-*...-*com только домены с N кол-вом дефисов в имени домена
site:com -site:*com -site:*-*com -site:*-*-*com только домены с двумя дефисами подряд или с тремя и более дефисами в имени домена