Как собрать большую базу немодерируемых форумов для Xrumer. Part 2 (Google Alerts).


Это статья является второй частью цикла статей о бесплатном сборе/парсинге баз форумов (Читать Part 1).

Рассмотрим еще одни бесплатный метод получения ссылок. В этом нам поможет сам Google, а именно сервис — http://www.google.com/alerts. Google Alerts позволяет получать уведомления о разнообразных событиях в интернете на почту или на фид. Мы будем использовать его, чтобы узнать кто, когда и где проспамил форум либо любой другой ресурс. Вывод на фид можно создать только при наличии гугл аккаунта. Заполняем все поля:
alerts

1. Search query — указываем поисковый запрос, то есть признак ресурса + ключевую фразу.
2. Results type – виды ресурсов для парсинга (новости, блоги) — выбираете Everything, т.е. все.
3. How often — Как часто – выбираете As-it-happens (как только случится).
4. How many – Сколько результатов – выбираете All results — все.
5. Deliver to — Куда доставлять – выбираете Feed

В результате будет сгенерирована ссылка на фид, например, так: http://www.google.com/alerts/feeds/06532479474629933794/16776812587253347447

alerts-viagra

 

Таким вот нехитрым способом сам Google будет выполнять парсинг необходимых нам ресурсов. Остается только использовать любой RSS граббер, чтобы собрать все линки в одном месте.  Например, скрипт, который будет обращаться к фиду и собирать все линки. Скачать скрипт можно здесь. Вам надо всего лишь во второй строке заменить  адрес на свой фид и поставить скрипт на крон. Скрипт будет собирать все ссылки в файл links.txt.

Это очень простой, но в тоже время невероятно эффективный способ сбора самых ценных ресурсов — ведь на этот фид будут поступать ссылки в режиме реального время, то есть данные ресурсы индексируются гуглом в первую очередь и являются наиболее актуальными.

 

Понравилась статья? Подпишитесь на обновления и получайте только интересную информацию о белом и черном SEO, дорвеях, наращивании ссылочной массы, продвижении и зароботке, а также многое другое! Все основано исключительно на собственном опыте и проверено лично.


Обсуждение закрыто.