Гайды, исследования и кейсы о парсинге сайтов, мониторинге цен и поставке данных под задачи аналитики, маркетинга и продукта.
Как устроены современные анти-бот-системы: фингерпринтинг, поведенческий анализ, капчи и что это значит для владельцев сайтов.
Скрапинг, парсинг и краулинг: разбираем, чем отличаются эти процессы, как они связаны и почему термины постоянно путают.
Как собрать данные с сайтов, если вы не программист: от ручного копирования и расширений до заказа парсинга под ключ.
Парсинг на Ruby: Nokogiri, HTTParty, Mechanize и Watir — от разбора статических страниц до автоматизации браузера.
Парсинг RSS и Atom-лент: структура форматов, готовые библиотеки и мониторинг новостей и блогов без обхода страниц.
Регулярные выражения в парсинге: синтаксис, полезные шаблоны, границы применимости и почему для HTML нужен парсер, а не regex.
Гид по прокси для парсинга: датацентровые, резидентные и мобильные, ротация, проверка приватности и защита от детекта.
Управление настоящим браузером из PHP: Symfony Panther, chrome-php и Selenium — парсинг динамики без ухода с PHP-стека.
Работа с XML в разных языках: DOM против SAX, XPath, пространства имён и разбор больших выгрузок без переполнения памяти.