Гайды, исследования и кейсы о парсинге сайтов, мониторинге цен и поставке данных под задачи аналитики, маркетинга и продукта.
Ускоряем парсинг в десятки раз с asyncio и aiohttp: конкурентные запросы, ограничение нагрузки, обработка ошибок и таймаутов.
Массовая проверка title, description и заголовков H1–H6 по всему сайту: зачем это SEO-специалисту и как автоматизировать сбор.
Пошагово вытаскиваем HTML-таблицы на Python с BeautifulSoup: вложенные ячейки, colspan/rowspan и выгрузка результата в CSV и Excel.
Как снимать позиции сайта в Яндексе и Google: сложности выдачи, готовые сервисы и собственный съёмщик позиций с примерами.
Строим дерево разделов сайта парсером: обход навигации, глубина вложенности и поиск битых ссылок и осиротевших страниц.
Знакомство с фреймворком Scrapy: пауки, пайплайны, middlewares и настройки, которые превращают скрипт в промышленный парсер.
Как встроить сбор данных прямо в Django-приложение: management-команды, Celery-задачи, хранение результатов в моделях и админке.
Как собрать поисковые подсказки Яндекса для расширения семантики: источники, готовые инструменты и самописный сборщик саджестов.
Обзор SEO-задач, которые решаются парсингом: аудит сайта, съём позиций, анализ конкурентов и сбор семантики — с инструментами под каждую.