SiteAnalyzer: обучение краулеру и техническому аудиту сайта

Что показывает SiteAnalyzer при сканировании

Краулер обходит сайт по внутренним ссылкам и складывает всё найденное в таблицу, которую можно выгрузить в Excel. По каждой странице видно код ответа сервера, Title, Description, заголовки H1–H6, вес страницы во внутренней перелинковке и то, откуда на неё ведут ссылки.

Основное, ради чего программу запускают:

• битые ссылки и цепочки редиректов, из-за которых теряется вес страниц;
• дубли и пустые Title и Description, а также страницы без H1;
• структура сайта и глубина вложенности: какие разделы робот находит с трудом;
• генерация XML-карты сайта и её сверка с тем, что уже отдаётся поисковику;
• парсинг произвольных данных со страниц через XPath и регулярные выражения.

Отчёт краулера сам по себе задач не решает. Его ценность в том, что после выгрузки вы садитесь и превращаете 4 000 строк в короткий список правок для программиста, отсортированный по влиянию на трафик. Этому и учат на курсах по SEO, а не кнопке «Старт».

Чем SiteAnalyzer отличается от других краулеров

Это российская разработка, бесплатная в базовой версии, с русским интерфейсом и без подписки в валюте. Отсюда и её популярность у частных специалистов и небольших студий: официальный сайт программы раздаёт дистрибутив без лицензионных ключей.

Screaming Frog глубже по функциям и интеграциям, зато платный сверх 500 URL. Логика работы у обоих одинаковая, поэтому навык переносится: разобравшись с одним краулером, второй вы освоите за вечер. В вакансиях чаще требуют именно понимание технического аудита, а не конкретный софт.

Сами правила, по которым краулер оценивает страницы, задаёт поисковик. Первоисточники здесь два: справка Яндекс Вебмастера и документация Google Search Central. Курс без опоры на них учит нажимать кнопки, а не понимать выдачу.

Где освоить технический аудит сайта

Технический аудит живёт внутри больших программ по поисковой оптимизации: обычно это модуль на 2–4 недели после блока про семантику. Там же разбирают краулеры, логи сервера и панели вебмастера.

Если вы только смотрите в сторону профессии, начните с обзорных материалов: что вообще входит в SEO и как стать SEO-специалистом с нуля. Дальше полезно посмотреть на что рассчитывать по деньгам и как получить доступ к Вебмастеру проекта, без которого аудит превращается в гадание.

Как мы отбираем программы в эту подборку

Сейчас к этой странице привязано 3 курса по SEO и интернет-маркетингу, где краулеры и технический аудит входят в программу. Отбирая их, мы смотрим на три вещи.

• Есть ли домашние задания на живых сайтах, а не на учебном стенде из трёх страниц.
• Разбирают ли работу с краулером и выгрузками, или тема закрыта одной лекцией «про технички».
• Проверяет ли куратор сам аудит, а не только факт сдачи файла.

Программ, целиком построенных вокруг SiteAnalyzer, на рынке нет, и мы не выдаём за них курсы по общему SEO. Полный выбор по теме собран в разделах поисковой оптимизации и SEO-продвижения.