Руководство для самостоятельного аудита сайта

СЕО-аудит сайта - эффективный способ выявить внутренние и внешние ошибки в его работе, раскрыть потенциал ресурса для дальнейшего продвижения.

В этой статье мы поговорим о том, как провести аудит сайта самостоятельно, рассмотрим основные инструменты и сервисы, которые помогут в работе. А также обсудим,  в каких ситуациях достаточно воспользоваться инструкцией по СЕО-аудиту сайта, а когда необходимо обращаться именно к профессиональным оптимизаторам.

Зачем нужен СЕО-аудит?

Анализ сайта бывает поверхностный (экспресс) и комплексный (полный).

Полный аудит сайта должен проводить профессионал, умеющий анализировать, моделировать и искать нестандартные решения. Экспертный анализ:

• отвечает на более узкие вопросы (как поднять низкочастотные запросы, почемы сайт попал под фильтр и как исправить ситуацию);

• в исследованиях требует применения специальных инструментов;

• требует опыта.

Полный аудит сайта дает более детальную картину о его техническом состоянии, является основой для проведения полномасштабных мероприятий по оптимизации. Открывает большие перспективы для продвижения.

Экспресс-аудит ресурса:

• дает общее представление об эффективности проекта;

• помогает выявить грубые нарушения, препятствующие полноценному ранжированию;

• способствует улучшению поведенческих факторов и росту конверсии;

• может проводиться самостоятельно по стандартному алгоритму действий.

В своем тексте мы рассмотрим именно поверхностный аудит сайта, который можно провести самостоятельно и бесплатно.

Какие сложности могут возникнуть при самостоятельном SEO-аудите

Для самостоятельного проведения аудита пригодятся:

• аналитический склад ума;

• доступ к инструментам и сервисам, который не всегда бесплатный (здесь имеет смысл оценить, что выгоднее - оплачивать сервисы и тратить время или оплатить работу СЕО-специалиста и быстрее получить результат);

• иметь наглядное представление о процессе (можно изучить результативные кейсы других компаний, эту инструкцию по СЕО-аудиту сайта);

• следить за появлением новых алгоритмов, направлений оптимизации.  

Перед тем, как приступить к первым пунктам плана аудита, необходимо понять принцип работы поисковиков, какие факторы влияют на ранжирование, как осуществляется индексация. В общем, погрузиться в закулисную жизнь сайтов.

Принцип работы поисковой системы

Цепочка действия поисковой системы включает в себя: составление плана, сбор данных, индексацию, вычисление, ранжирование и оценку качества результатов поиска. Остановимся подробнее на некоторых звеньях этой цепочки.

Составление плана

Предварительный этап, во время которого составляются списки. Для попадания в них нужно где-нибудь разместить ссылку, упомянуть о сайте или зайти с браузера, где установлен поисковый toolbar.

Сбор данных

При сборе данных (crawling) поисковый робот передвигается по сформированному списку, собирая технические данные. Большое значение имеет взаимодействие с поисковиком. Чтобы  он оперативно находил нужные документы, нужно:

• следить за размером документа - чем он меньше, тем легче поисковику обработать его данные;

• установить файл robots.txt, отвечающий за управление индексацией;

• внедрить мета-тег robots в код веб-страницы - это поможет выразить поисковикам пожелания по поводу индексирования содержимого страницы и размещенных на ней ссылок;

• указывать в HTTP-заголовках кодировку, код ответа сервера, размер документа;

• проработать структуру сайта - она распределяет приоритет между разделами (кластерами), от чего зависит сбор данных.

Вычисление

На этом этапе имеют значение факторы:

• метрики контента - объем текстового контента, количество повторенией ключевых слов;

• качество, количество ссылок, направляющих на конкретный документ;

• PageRank, SpamRank, TrustRank - позиции ранжирования.

Ранжирование

На этом этапе принимаются во внимание категории, касающиеся запросов.

• Регион сайта и пользователя, вводящего запрос. Делая SEO-аудит, необходимо проверять присвоенный сайту регион и из какой области (страны) заходят пользователи. К примеру, если требуется продвигать по региону Украина, а основная масса посетителей из России, значит, качество аудитории не соответствует потребностям сайта и надо вносить корректировки.

• Язык ввода запроса либо языковые настройки браузера. К примеру, пользователь обычно вводит запросы на русском, а сегодня ввел на английском. Он будет чаще видеть результаты поиска на русском языке.

• Тип запроса предопределяет результат выдачи, потому что по коммерческим, новостным и информационным запросам используются различные формулы ранжирования.

• Спектр запросов - общие, информационные, транзакционные, навигационные, мультимедиа. К примеру, под общим запросом “Агата Кристи” поисковый робот выделит группы и предложит их все, так как не понимает, что именно хочет пользователь - почитать книги, биографию или послушать песни одноименной музыкальной группы. По коммерческим запросам может выдать онлайн-магазины, обзоры, форумы, прайс-агрегаторы.

Оценка качества результатов поиска

Качество результатов оценивается по количественному анализу некоторых поведенческих факторов.

• Число кликов - чем меньше кликают на сайт в выдаче, тем слабее его позиции будут в дальнейшем. Поисковый бот не заинтересован в том, чтобы в ТОПе находились сайты, на которые не заходят пользователи.

• Количество переформулировок, внесенных дополнений - когда пользователю приходится дополнять запрос, углубляя поиск, система оценивает это как некорректные результаты выдачи.

• Число и скорость возвратов - частота и периодичность, с которой пользователь возвращается на ресурс. К примеру, человек зашел в интернет-магазин одежды, а через несколько минут вышел и повторил поиск, чтобы найти аналогичный магазин, значит ему что-то не понравилось на сайте (не нашел контакты, не работает сайт, нет нужной одежды). Это не лучшим образом влияет на качество выдачи.

• Число просматриваемых ресурсов выдачи - чем больше страниц пользователь посещает, тем хуже бот определяет качество их выдачи. Оптимальное действие посетителя - выбор первого результата выдачи. Если ему пришлось искать дальше, значит, на запрос пользователя сайт отвечает некорректно.

Что именно анализировать на сайте?

К анализу сайта нужно подходить комплексно, затрагивая 4 метрики эффективности:

• SEO (позиции, трафик, семантическое ядро);

• техническая (скорость индексации, загрузки, корректность открытия страниц, кода, ссылок, качество индекса) ;

• юзабилити (поведенческие факторы - количество просмотров, возвратов, отказов, время на сайте, использование функции внутреннего поиска);

• коммерческая (количество постоянных клиентов, заказов, продаж, звонков, сумма чека, уровень конверсии).

Коммерческие метрики - индикатор успешности бизнеса. Их нужно мониторить, но они зависят не только от СЕО.

Юзабилити сайта влияет и на бизнес-показатели, и на метрики SEO. Тенденция создавать удобные для людей ресурсы мотивирует владельцев начинять сайты дополнительными элементами, которые упрощают их использование.

От технических показателей напрямую зависит трафик. Принципиальное значение имеет отсутствие пустых страниц и дублей в индексе. От них нужно нужно избавляться, чтобы индекс содержал исключительно полезные страницы.

SEO-аудит сайта предполагает, в первую очередь, анализ технических  и СЕО-метрик. Со стороны юзабилити для первого раза достаточно проявить немного “заботы” о пользователях. Удобный каталог, кнопка “купить”, прайс-лист - для комфортного “шопинга” или поиска исполнителей. Контактная информация, данные о гарантии и возврате, форма обратной связи - для доверия и спокойствия.

Необходимые инструменты для самостоятельного SEO-аудита

Для сбора данных к анализу сайта потребуется много инструментов. Часть из них доступна для бесплатного использования, а за некоторые сервисы придется заплатить.

Имейте в виду, что купить инструментарий для аудита одного единственного сайта может оказаться дороже, чем оплатить услуги СЕО-специалистов. В их арсенале по умолчанию больше платных качественных сервисов. Но мы сейчас говорим о самостоятельном аудите сайта и решаем, как сделать его с наименьшими потерями. Переходим к практической части - подготовка инструментов.

Бесплатные инструменты

К обязательным общедоступным инструментам для анализа ресурса относятся:

• SEO чек-лист - структурированный алгоритм действий, которые необходимо пройти, чтобы охватить все вопросы анализа; 

• Яндекс-метрики и Google Analytics - сервисы для получения большого количества статистических данных о работе сайта и поведенческих факторах посетителей;

• Xenu Link Sleuth - парсер сайта, который собирает статистику технического плана, проходясь по всем адресам. Размеры документов, HTTP-заголовков, тип кодировки, размещение битых ссылок и т.д.

• Web Developer Toolbar - расширение для Mozilla, предоставляющее широкие возможности для вебмастеров.

• Firebug - функциональное расширение для анализа технических характеристик сайта (HTML-коды, скорость загрузки страниц, отслеживание элементов скриптов, которые при загрузке требуют больше времени).  

• Панель инструментов RDS bar — это дополнение для браузера, которое дбавляет в ваш браузер  дополнительную панель инструментов  для анализа показателей сайта вцелом и постранично.
• SEOquake — это бесплатный плагин, который предоставляет данные о сайте и оптимизации страницы, некоторые функции схожи с RDS bar. 

Платные инструменты

Платных инструментов множество. Не надо руководствоваться принципом “чем больше, тем лучше”, но на некоторые стоит обратить внимание.

Key Collector — программа для работы с семантикой, анализа поисковых запросов. Возможности сервиса периодически расширяются.

Ahrefs — сервис, позволяющий анализировать качество (новые, устаревшие и т.д.) и количество ссылок в режиме онлайн. 

Majestic SEO — сервис, аналогичный предыдущему, но с уклоном в сторону зарубежной базы.

Screaming Frog SEO Spider — напоминает парсер Xenu Link, но предлагает больше возможностей для аудита. Удобная работа с фильтрами, настройками. 

Key assort - сервис, для кластеризации семантического ядра запросов по топу сайтов в выдаче поисковой системы. 

SEO Power Suite - это целый пакет программ, которые позволят вам выбрать необходимые ключевые запросы, проанализировать топ, найти ошибки на вашем сайте, проверить ваш ссылочный профиль и ваших конкурентов, установить конткаты для крауд-маркетинга, подготовить широкие отчеты для клиентов по сайту. 

Как провести аудит сайта. Инструкция

Аудит сайта включает в себя несколько типов анализа:

• технический - анализ технических факторов;

• внешний - анализ отзывов, внешних ссылок, упоминаний о ресурсе на сторонних сайтах;

• внутренний - аудит внутренних ссылок, наполнения сайта;

• семантический - анализ семантического ядра, ключевых слов и фраз;

• анализ структуры - пристальное внимание к удобству структуры, тому, как идет индексация, и какие возможности для оптимизации;

• коммерческий - осмотр сайта с точки зрения потребительской привлекательности.

Приступаем к делу.

Как сделать технический (внутренний) аудит сайта

Данный шаг включает в себя анализ кода сайта, скорость загрузки страниц, их объем, HTTP-заголовки, файлы robots.txt, meta-robots, оптимизацию под мобильные устройства.

1. Выявить ошибки в HTML и CSS

Ошибки в разметке HTML, CSS дают некорректное отображение страниц. Последствия серьезные - от снижения позиций в выдаче до попадания под фильтр поисковых систем.

Возможные ошибки:

• использование нерекомендованного тега;

• нерекомендованные символы в ссылках;

• не закрыт тег;

• не обозначен обязательный атрибут.

Как проверить:

С помощью валидаторов HTML и CSS.Сервисы на основании просканированного кода формируют детальный отчет с найденными ошибками. 

2. Проверить корректность кодировки

Некорректная кодировка может искажать отображение контента. Это неприятно посетителям, препятствует индексации сайта и чревато попаданием под фильтр.

Как проверить:

На специальных сервисах (например, htmlweb.ru). 

О кодировке рассказывает подчеркнутая выше строка. В данном случае кодировка UTF-8.

Теперь нужно проверить, реальную кодировку сайта и удостовериться в том, что она соответствует той, которую отправляет сервер. Для этого нужно щелкнуть правой кнопкой мыши на странице Вашего сайта и перейти на “просмотр кода страницы”.

Результат нужно искать в строке, содержащей слово charset (внутри тега head).

 Кодировки UTF-8, Windows-1251 отображают ресурс корректно и поддерживают кириллицу.

3. 404 ошибка

Сайт, на котором пользователям открывается череда страниц с ошибкой 404 (not found), очень не понравится посетителям и сдаст свои позиции в выдаче. Такие ситуации могут возникать, если:

• удаленная (перемещенная) страница сохранилась в индексе поискового бота - пользователи получает ссылку на нее в поисковой выдаче;

• когда на самом сайте остаются внутренние ссылки на удаленную (переехавшую) страницу;

• на удаленную страницу ссылаются другие сайты;

• есть опечатка в адресной строке.

Как проверить:

С помощью панели вебмастеров (гугл, яндекс), бесплатного сервиса Xenu Link Sleuth. Лучше использовать несколько способов, чтобы выявить максимум битых ссылок. 

Избавляться от них нужно соответственно ситуации:

• для перемещенных страниц - настроить 301 редирект;

• для удаленных страниц по внутренним ссылкам - удалить ссылку либо наполнить not found страницу соответствующим контентом;

• для ошибочных страниц по внешним ссылкам - связаться с рекламодателям и поставить в известность, что его ресурс не работает.

Дальше нужно “изъять” несуществующие страницы из индекса. Для этого - воспользоваться панелями вебмастеров.

Чтобы страница 404 не спровоцировала пользователя сбежать с Вашего сайта, сделайте ее необычной. Сопроводите пояснением, справочной информацией, вставьте ссылки на основные разделы сайта, интересное изображение.

С помощью директивы ErrorDocument, расположенной в файле .htaccess в корневой папке, укажите сервису путь, по которому перенаправлять пользователей при 404 ошибке:

ErrorDocument 404 http://examen.com/404.html, (указывается адрес интересно оформленной 404 страницы).

Аналогичным образом можно устранять и другие ошибки (401, 403, 500).

4. Проверить скорость загрузки страниц

Низкая скорость загрузки вызывает раздражение у пользователей, не нравится поисковым системам. Нужно стремиться к тому, чтобы на десктопе страницы загружались за 3 секунды, на планшете, смартфоне - за 7-9 секунд.

Как проверить:

В первую очередь рекомендуем использовать сервисы от компании google. Для проверки скорости страниц можна воспользоваться известным PageSpeed Insights или установить расширение Lighthouse. Для более детальной проверки мобилльной версии сайта и того как ваш сайт загружается в мобильных сетях (2G, 3G, 4G) используйте онлайн сервис для тестирования в мобильных сетях https://testmysite.withgoogle.com/intl/ru-ru и раздел "Проверка оптимизации для мобильных" в google search console. Также рекомендуем обратить внимание на новый сервис от компании google - https://web.dev/fast. 

Пример, PageSpeed Insights 

Пример,  тестирования в мобильных сетях 

Пример, проверки оптимизации мобильной версии через google search console 

Плагин, lighthouse 

Пример, нового инструмента web.dev 

Также, например, на сервисе PR-CY.ru.  Бесплатный инструмент Web Developer Toolbar поможет определить размер документов и выявить те, которые затормаживают загрузку и требуют сжатия или слияния. Так бесплатно вы сможете проверить сайт с помощью он-лайн сервиса dareboost (необходимо зарегистрироваться) - бесплатного функционала вам будет вполне достаточно на первое время.

Как минимизировать время загрузки:

• сократить размер кода CSS, JavaScript;

• сократить объем страниц;

• сжать картинки;

• включить кэш данных;

• избавьтесь от ненужных редиректов;

• сократить число запросов к серверу.

5. Проверить файл robots.txt

Длинный файлы засоряют индекс и заставляют робота тратить много времени. А ведь он мог потратить его на индексацию ценных документов.

Как проверить:

На яндекс вебмастере, google search console и других сервисах.

6. Проверить дубли

Создавая поддомены для тестирования, мы иногда забываем закрывать их от индексации. Так образуются дубли, которые ухудшают ранжирование главного сайта.

Как проверить:

Посмотреть, есть ли тестовые поддомены в выдаче.  

7. Что еще учесть при внутреннем аудите

• Проверить полноту контента и meta-description.

• Добавить к заголовкам уникальные названия (магазина).

• Избавиться от мусорного индекса, ненужных страниц.

• Щепетильно относиться к модерации комментариев, чтобы в них не попадала ненормативная лексика и не затрагивались запрещенные темы.

Внешний аудит сайта бесплатно

Этот этап охватывает: анализ ссылочных профилей, IP-адресов доноров, конкурентные сайты.

(сервис Alexa.показывает динамику популярности ресурса)

1. Анализ ссылочных профилей

Важно следить за естественностью ссылочной массы. Например, в рецепты борщей не вставлять ссылки на магазины для взрослых.

Можно воспользоваться сервисом Ahrefs, который проанализирует качество вставляемых ссылок.

2. Анализ сайтов-доноров

Необходим контроль агрегаторов, бирж ссылок, модерация купленных ссылок. Иначе Ваши напольные покрытия могут тесно переплестись с лекарствами от половых инфекций.

Проводя внешний аудит сайта, необходимо также обратить внимание на естественность анкор-листа.

3. Анализ конкурентов

Для мониторинга зарубежных “коллег” оптимальный инструмент SemRush, для охвата украинской, российской, болгарской, казахстанской баз - Serpstat, для Москвы - SpyWords, на пике популярности Ahrefs, а вот Seo Power Suite с его инструментом Spy Glass чаще используют только на западном рынке.

Семантический анализ

На данном этапе аудиту подвергается семантическое ядро, распределение запросов и их потенциал.

Инструменты для работы с семантикой:

Яндекс.Метрика, гугл аналитикс, LiveInternet, Wordstat, подсказки поиска, Key Collector, Rank Tracker (от Seo Power Suite), парсинг подсветок и тематических слов от онлайн сервиса arsenkin.ru и другие. Также есть готовые базы ключевых запросов, такие как "База Пастухова", база "Букварикс" (является онлайн сервисом) и т.д.

Для распределения ключевых запросов используется как метод ручной сортировки так и специальные программы. Сегодня одна из наиболее популярных это key collector. Отметим, что key collector также имеет подобную функцию. Для выбора можете посмотреть - декстопные варианты: МегаЛемма, TopSite, MindSerp. И  он-лайн сервисы: Kg.ppc.panel, S:toolz, JustMagic, Coolakov, Seointellect, Топвизор, SEMparser, SE Ranking, Rush Analytics, Keysa, MC-Castle. 

В программах можно видеть статистику, создавать группы запросов, применять различные фильтры.

Анализ структуры сайта

Структура сайта тесно переплетена с его семантическим ядром. На этом этапе анализируется соответствие семантике, глубина вложенности, навигация.

Возможные ошибки:

• уровень вложенности больше 4;

• структура не соответствует семантике;

• переспам, который может привести к тому, что сайт забанят.

Коммерческий анализ сайта

На нашем уровне достаточно проконтролировать наличие страницы контактов, карты проезда, режим работы, сертификаты и прочие заслуживающие доверия клиентов документы.

Настройка целей в веб-аналитике способствует более простому самостоятельному SEO-анализу сайта. Хотя для качественного бесплатного аудита все-таки нужно иметь не только стремление, но и обладать знаниями и аналитическим умом.

Если Вы не обладаете достаточным количеством времени и уверенными знаниями, стоит подумать о поручении аудита специальным компаниям. Сэкономленная на услугах сумма может оказаться намного меньше, чем сумма недополученной прибыли из-за некорректно налаженной работы сайта.

Компания SEOTM предлагает Вам свои услуги. Профессиональный аудит и всестороннее раскрытие потенциала сайта - Вам гарантированы.