Задача
Платёжная система искала потенциальных клиентов среди IT-компаний. Логика простая: если бизнес размещает рекламу — значит, у него есть бюджеты и реальная коммерческая активность, и ему можно предложить свои платёжные решения. Нужно было собрать всех, кто рекламируется в поиске по IT-тематике, и превратить это в базу для отдела продаж.
Что делали и какие данные собирали
Мы собрали широкое семантическое ядро по IT-тематике и вели мониторинг рекламы в поисковой выдаче: кто размещается (рекламодатель), с какими объявлениями и на какие посадочные страницы ведёт. По рекламодателям и их сайтам формировали список компаний — потенциальных клиентов; сами платёжные сервисы-конкуренты, агрегаторы и нерелевантные ниши из списка убирали. Данные складывали в динамику, чтобы ловить и новых рекламодателей, которые только начали покупать трафик.
Сложности и как решали
Первое — полнота охвата. Реклама привязана к запросам, поэтому важно было широкое семантическое ядро — чтобы поймать как можно больше рекламодателей; про сбор и кластеризацию семантики — в материале про парсинг семантики и парсинг запросов Google.
Второе — реклама персонализирована и ротируется: разным пользователям, гео и в разное время показываются разные объявления. Мы снимали выдачу по целевым странам и достаточно часто, чтобы охватить ротацию объявлений, а не один срез, — иначе часть рекламодателей просто не увидели бы.
Третье — защита поиска от автоматических запросов. Сбор вели распределённо с ротацией прокси, иначе на таком объёме данные были бы неполными.
Результат
Клиент получил регулярно обновляемую базу рекламодателей по IT-тематике — список активных компаний с бюджетами как готовую базу потенциальных клиентов для продажи платёжных решений. Видно и историю: кто и когда начал рекламироваться, то есть с кем отделу продаж стоит связаться в первую очередь.
Услуги в кейсе: Мониторинг рекламы · Парсинг поисковой выдачи · Данные для маркетинга и продаж · Поиск и обогащение данных
Полезные материалы: Парсинг семантики · Парсинг запросов Google · Прокси для парсинга