Парсер тегов, тайтлов и заголовков: массовая проверка метаданных

Массовая проверка title, description и заголовков H1–H6 по всему сайту: зачем это SEO-специалисту и как автоматизировать сбор.

КP
Команда Parsing.agency
Сбор данных под задачи бизнеса
Опубликовано: 17 января 2025

Title, Description и заголовки H1–H6 — это элементы, по которым поисковик понимает, о чём страница, а пользователь решает, переходить ли по сниппету. На сайте в сотни и тысячи страниц проверить их вручную невозможно: где-то Title пустой, где-то дублируется на десятках страниц, где-то отсутствует H1 или заголовки идут с нарушением иерархии. Парсер тегов собирает все метаданные сайта в одну таблицу, и проблемы становятся видны сразу.

Статья входит в серию о парсинге в SEO. Разберём, что и зачем собирают, и чем это делают.

Что собирает парсер метаданных

При обходе сайта по каждому URL парсер выгружает:

  • Title — заголовок страницы для вкладки и сниппета.
  • Description — метаописание.
  • H1 — главный заголовок страницы.
  • H2–H6 — подзаголовки и их иерархию.
  • Длину тегов, чтобы находить слишком короткие и обрезаемые в выдаче.

По сути это тот же обход, что и при парсинге структуры сайта: один проход краулера даёт и дерево разделов, и таблицу метаданных. Поэтому теги, тайтлы и заголовки обычно собирают теми же программами, что и структуру.

Какие проблемы ищут

Дубли Title и Description. Одинаковые метатеги на разных страницах — частая причина, по которой страницы конкурируют между собой и хуже ранжируются. Парсер быстро выявляет все повторы.

Пустые и отсутствующие теги. Страницы без Title или H1 теряют в релевантности. В таблице такие сразу видно по пустым ячейкам.

Переоптимизация и длина. Слишком длинные Title обрезаются в выдаче, переспамленные ключами заголовки могут попасть под фильтры. Выгрузка с длиной помогает навести порядок.

Нарушение иерархии заголовков. Несколько H1 на странице, пропуски уровней, H2 раньше H1 — структурные ошибки разметки, которые мешают и роботу, и доступности.

Результат такого аудита — ТЗ на переписывание метатегов: какие страницы поправить, где убрать дубли, где дописать недостающее.

Чем парсить теги и заголовки

Screaming Frog SEO Spider и Netpeak Spider — основные инструменты. При обычном обходе сайта они уже собирают Title, Description и заголовки, помечают дубли, пустые и слишком длинные значения. Через произвольное извлечение (Custom Extraction по XPath или регулярным выражениям) можно вытащить и нестандартные элементы — например, все теги <strong> или содержимое определённого блока.

ComparseR при обходе сайта тоже фиксирует Title и позволяет находить дубли и страницы без заголовка.

Отдельный сценарий — сбор тегов и заголовков не со своего сайта, а из выдачи или с сайтов конкурентов. Многие оптимизируют метатеги под поиск, поэтому в чужих Title, Description и H1–H6 находят готовые ключевые фразы и идеи для контент-плана. Для этого есть удобные инструменты: бесплатная надстройка для Excel SEMTools, парсер заголовков Arsenkin Tools (работает с Яндексом и Google), а также инструмент парсинга метатегов в Click.ru. Это уже пересечение с задачей сбора семантики: заголовки конкурентов — хороший источник упущенных запросов.

Как это связано с остальной работой

Парсинг тегов — это диагностика контентной части сайта, в пару к технической диагностике через парсинг структуры. Чтобы переписать метатеги правильно, нужны ключевые слова — а их даёт сбор семантики, подсказки Яндекса и Wordstat. А после правок эффект отслеживают через проверку позиций.

Если задача — анализировать не теги конкретных сайтов, а сниппеты и заголовки прямо из топа выдачи, это парсинг поисковой выдачи Яндекс и парсинг поисковой выдачи Google — отдельные услуги нашего агентства.