Устранение технических проблем на сайте
(с помощью WebSite Auditor)

Найдите и устраните все технические проблемы на своем сайте

Важно обнаружить и устранить технические проблемы на сайте, прежде чем они станут влиять на ваши позиции в поисковике. Иначе есть риск потерять потенциальных клиентов и утратить позиции сайта в поисковых системах. В худшем случае поисковые системы даже не просканируют и не проиндексируют ваш сайт.

Вот почему переда началом оптимизации вам необходимо провести полный аудит сайта. Найдите и исправьте технические проблемы, которые могут стоить вам позиций в поисковых системах.

Во-первых, вам нужно полностью просканировать весь сайт и собрать все страницы и ресурсы (CSS, изображения, видео, JavaScript, PDF-файлы и т. д.). Позже проанализируйте полученные результаты.

Шаги: Соберите страницы своего сайта. Запустите WebSite Auditor. Введите URL-адрес сайта для начала сканирования. После этого программа начнет сканировать сайт.

Время сканирования зависит от размера сайта. Если сайт большой, вам придется немного подождать.

Совет: Сканируйте свой сайт как Googlebot (или любой другой бот). По умолчанию WebSite Auditor сканирует ваш сайт с помощью робота SEO-PowerSuite-bot. Это означает, что он будет следовать инструкциям для всех роботов (user agent: *). Вы можете сканировать сайт как Google, Bing, Yahoo и т. д. Если хотите, можно отказаться от инструкций для роботов. В этом случае вы сможете собрать все страницы, даже закрытые от индексации в вашем файле robots.txt.

Для этого создайте проект в WebSite Auditor (или пересоберите существующий). На шаге 1 введите URL своего сайта и включите экспертные опции. На шаге 2 щелкните по раскрывающемуся списку рядом с опцией Следовать инструкциям robots.txt. Выберите бота, с помощью которого вы хотите просканировать свой сайт. Если не хотите следовать инструкциям файла robots.txt во время краулинга, просто уберите галочку в этом пункте. Нажмите Далее, чтобы начать сканирование.

Крайне важно, чтобы пользователи и поисковые системы могли легко найти все важные страницы и ресурсы вашего сайта, включая JavaScript и CSS. Если ваш сайт трудно сканировать и индексировать, это может помешать успешной оптимизации. С другой стороны, вы можете скрыть определенные разделы сайта от поисковых систем (например, страницы с повторяющимся контентом).

Обязательно обратите внимание на инструкции в файле robots.txt. Также рекомендуем проверить коды состояния HTTP.

Шаги: 1. Проверьте наличие файла robots.txt на сайте.

Если вы не уверены, есть ли у вас файл robots.txt, можете проверить статус фактора Файл Robots.txt в разделе Структура сайта -> SEO-анализ вебсайта.

2. Убедитесь в том, что все важные страницы открыты для индексации

Если у поисковых систем нет доступа к контенту вашего сайта, он не будет отображаться в результатах поиска. Поэтому вам нужно проверить, какие страницы закрыты от индексирования. Убедитесь, что важный контент не был заблокирован по какой-либо причине.

Перейдите к фактору Страницы, закрытые от индексирования в разделе SEO-анализ вебсайта. Вы увидите, блокируются ли какие-либо страницы или ресурсы вашего сайта. Существуют 3 способа закрыть страницы от индексации:

  • с помощью файла robots.txt
  • используя тег "noindex" в разделе <head>
  • через X-Robots-Tag в заголовке HTTP

3. Проверьте файл robots.txt (или создайте новый)

Для создания нового файла robots.txt или корректировки его инструкций перейдите в модуль Страницы. Нажмите кнопку . Появится меню, в котором вы сможете загрузить файл с сервера для проверки либо создать полностью новый файл robots.txt и загрузить на свой сайт.

4. Обратите внимание на коды состояния страниц.

Проблемы с индексацией также могут быть вызваны ошибками кода состояния HTTP. В разделе Индексирование и сканирование страниц (Структура сайта > SEO-анализ вебсайта) пройдитесь по ресурсам с кодом состояния 4xx и 5xx. Также проверьте фактор 404 страница настроена корректно. Если какой-либо из факторов имеет статус Ошибка или Предупреждение, просмотрите список страниц c ошибками и рекомендации по их исправлению.

Совет: Ищите изолированные страницы (на них нет внутренних ссылок с других страниц вашего сайта). WebSite Auditor поможет вам найти изолированные страницы вашего сайта. Их не видят ни пользователи, ни поисковые системы.

Для этого вам нужно пересобрать свой проект в WebSite Auditor. Перейдите в модуль Страницы и нажмите кнопку .

На шаге 1 включите Экспертные опции. На шаге 2 поставьте галочку в пункте Искать изолированные страницы и следуйте инструкциям. Когда сканирование будет выполнено, вы увидите изолированные страницы в разделе Страницы. Они будут отмечены как Изолированная страница.

Ненужные перенаправления и битые ссылки могут быть предупреждающим знаком для поисковых систем. Изолированные страницы и разделы могут скрыть полезный контент от посетителей сайта. Во многих случаях наиболее эффективным способом быстро обнаружить такие проблемы является визуализация структуры сайта.

Шаги: 1. Визуализируйте структуру своего сайта. Перейдите в раздел Структура сайта > Визуализация. Вы увидите графическую карту страниц вашего сайта и связей между ними. Синие ноды обозначают перенаправления. Красные — битые ссылки. Ноды, не соединенные с другими — это изолированные страницы.

Совет: 1. По умолчанию программа показывает 1000 страниц (можно увеличить до 10 000). Они упорядочены по Глубине вложенности. Если у вас большой веб-сайт, лучше визуализировать его по частям (например, основные категории, блог и т. д.).
2. Все связи показаны на визуализации стрелками (односторонними или двусторонними). Они представляют собой точные связи между страницами. Также для удобства можно перетащить любую ноду в другое место на графике, увеличить или уменьшить масштаб.
3. Наведите курсор на любую ноду для получения дополнительной информации:


2. Щелкните по любой ноде, чтобы увидеть связи только этой страницы:

Нажмите на кнопку Отобразить все связи, чтобы увидеть все существующие связи:

3. Постройте визуализацию структуры сайта по Внутреннему Page Rank (рейтингу страницы). Выберите Внутренний Page Rank в раскрывающемся cписке в правом верхнем углу. Здесь размер нод отражает значение Внутреннего Page Rank — это важность и авторитетность страницы в рамках вашего сайта. Чем больше нода, тем выше значение.

Благодаря этому графику вы можете проверить уровень авторитетности основных страниц. Главная страница должна иметь наивысший Page Rank, основные категории должны иметь более высокое значение, чем их подкатегории и т. д.

4. Визуализируйте структуру сайта по Pageviews (просмотрам страниц) . Подключите свой Google Analytics аккаунт. Чтобы это сделать перейдите в Настройки > Google Analytics аккаунт. Обновите данные в разделе Структура сайта > Страницы. Затем в модуле Визуализация перестройте график по Pageviews. Здесь размер нод обозначает значение Pageviews (просмотров страниц). Чем больше нода, тем выше значение.

На этом графике вы увидите поток трафика на определенные страницы. Найдите на нем свои страницы конверсии и проверьте, идут ли на них ссылки со страниц с основным трафиком.

5. Используйте инструменты на панели слева, чтобы отредактировать график. Они помогут сделать структуру сайта идеальной. Нажмите на любую ноду и перейдите в режим редактирования. Используйте кнопки слева для добавления, удаления и создания ссылок. Также вы можете помечать и закреплять ноды или раскрашивать график по меткам.

После внесения всех изменений нажмите кнопку внизу панели. Можно экспортировать их как список задач для выполнения или как окончательный список изменений в CSV:

Кроме этого, можете сохранить график визуализации своего сайта в PDF.

Перенаправления помогают направить посетителей на нужную страницу, если она была перемещена на другой URL-адрес. Однако неправильные перенаправления могут создать проблемы.

Шаги: 1. Проверьте страницы с перенаправлением 302 и мета-тегом refresh. Для этого перейдите в раздел Перенаправления модуля Структура сайта > SEO-анализ вебсайта.

302 является временным перенаправлением. В определенных случаях этот способ перенаправления страниц допускается, но тогда ссылочный вес не передается от перенаправленного URL-адреса целевой странице.

Мета-тег refresh часто используется спаммерами для перенаправления посетителей на страницы с нерелевантным контентом. Поисковым системам обычно не нравится такой тип перенаправлений.

Лучше не использовать перенаправление 302 и мета-тег refresh. Это может помешать странице подняться высоко в результатах поиска. Если перенаправление на самом деле не является временным, попробуйте настроить постоянные перенаправления 301.

2. Убедитесь, что версии HTTP / HTTPS и с www / без www вашего сайта перенаправляются правильно. Если ваш сайт доступен как с www в URL-адресе, так и без него (как и должно быть) или если у вас есть как HTTP, так и HTTPS-версия сайта, важно настроить перенаправление на основную версию правильно.

Чтобы убедиться в правильности данного перенаправления, ознакомьтесь с этими факторами в модуле Структура сайта в разделе Перенаправления. При наличии каких-либо проблем вы получите подробные рекомендации по настройке в правой части экрана.

3. Проверьте состояние rel = "canonical". Канонизация — это процесс выбора лучшего URL-адреса, если на сайте есть несколько страниц с одинаковым или похожим контентом. Рекомендуется указывать канонические URL-адреса для страниц с дублирующимся контентом. Так поисковые системы будут знать, какая из страниц является более авторитетной и должна появляться в результатах поиска. Канонические URL-адреса могут быть указаны либо в элементе <link rel = "canonical"> в HTML-коде страницы, либо в канонической ссылке в вашем HTTP-заголовке.

Чтобы узнать, на каких страницах вашего сайта установлен канонический URL-адрес и какой именно URL-адрес, нажмите на фактор Страницы с rel="canonical" в разделе Перенаправления (модуль Структура сайта > SEO-анализ вебсайта). Справа вы увидите заголовки страниц и канонические URL-адреса.

При работе с некоторыми системами управления контентом могут возникать ситуации, когда на одной странице имеется более одного канонического URL-адреса. Это происходит, когда CMS автоматически добавляет канонический тег на страницах сайта. Несколько канонических URL-адресов будут путать поисковые системы и могут заставить их игнорировать все эти страницы. Проверьте, есть ли такие примеры на вашем сайте. Для этого зайдите в раздел Кодировка и технические факторы (модуль SEO-анализ вебсайта) и нажмите на фактор Страницы с дублирующимся rel="canonical".

Проблемы с кодировкой могут негативно сказаться на SEO. Также в большинстве случаев они создают неудобства пользователям. Страницы загружаются медленнее или не отображаются в браузерах. Кроме того, это влияет на сканирование страниц поисковыми системами. Поэтому следующий шаг аудита вашего сайта — проверить наличие ошибок в коде. Убедитесь, что сайт понятен поисковым системам (не скрывает ваш контент с помощью фреймов). Также он не должен быть слишком "тяжелым", потому что это увеличит время загрузки вашей страницы.

Шаги: Убедитесь, что на страницах не используются фреймы. Проверьте сайт на наличие ошибок и предупреждений W3C. Страницы не должны быть слишком большими. Эти данные вы найдете в разделе Кодировка и технические факторы в модуле SEO-анализ вебсайта.

Для любых факторов со статусом Информация, Предупреждение или Ошибка рекомендуется проверить список проблемных страниц и ознакомиться с рекомендациями по их устранению.

Совет: 1. Проверьте адаптированность сайта для мобильных устройств. Фактор Адаптированность для мобильных устройств показывает, подходит ли ваш сайт для мобильных устройств по мнению Google. Если нет, вы можете потерять позиции в Мобильном поиске, что приведет к резкому снижению трафика.

2. Следите за нечитаемыми URL-адресами. Проверьте раздел URL-адреса в модуле SEO-анализ вебсайта. Убедитесь, что вы исправили слишком длинные и неудобные в использовании URL-адреса. Что касается динамических URL-адресов, их нужно использовать только при необходимости. Их довольно трудно читать и они не являются информативными. Несколько версий одного и того же URL с разными параметрами могут также вызвать проблемы с дублированием контента, если поисковые системы их найдут.

Проблемы с внутренними ссылками делают сайт неудобным в использовании. Также они путают поисковые системы при сканировании сайта. Внешним ссылкам с сайта также следует уделять внимание, поскольку поисковики могут считать страницы со слишком большим количеством ссылок спам-страницами.

Шаги: 1. Найдите все битые ссылки. Битыми считаются ссылки, которые указывают на неверные URL-адреса. Это могут быть старые несуществующие страницы или просто неправильно написанные версии URL-адресов. Очень важно проверять сайт на наличие битых ссылок. Если их нет, поисковые системы и посетители никогда не зайдут в тупик во время передвижения по вашему сайту.

Чтобы получить список всех битых ссылок на сайте, нажмите на Битые ссылки в разделе Ссылки (модуль Seo-анализ вебсайта). Вы увидите страницы с неработающими ссылками, URL-адреса этих ссылок и их анкор текст.

2. Найдите страницы со слишком большим количеством исходящих ссылок. Если на одной странице слишком много ссылок, это может создать определенные трудности для посетителей. Поисковые системы расценивают это как спам-сигнал. Обычно рекомендуется размещать до 100 ссылок на странице.

Чтобы увидеть список страниц со слишком большим количеством исходящих ссылок, нажмите на Страницы с чрезмерным количеством ссылок в разделе Ссылки (Seo-анализ вебсайта). Вы получите страницы с количеством исходящих ссылок более 100 (учитываются и внутренние, и внешние ссылки).

3. Определите перенаправленные ссылки. Такие ссылки могут создать вам некоторые проблемы. Из-за них, как правило, целевая страница дольше загружается. Также вы тратите свой "краулинг бюджет" для поисковых систем на страницы с перенаправлением. Обратите внимание на такие ссылки и исправьте их. Они должны сразу указывать на целевую страницу.

В модуле Seo-анализ вебсайта найдите страницы с перенаправлением 302 и 301 в разделе Перенаправления. Если такие страницы есть, вы увидите их список справа. Также здесь будут указаны URL-адреса, на которые они перенаправляют, и количество указывающих на них внутренних ссылок. Нажмите на кнопку с тремя горизонтальными линиями рядом с количеством ссылок на страницу. После этого откроется полный список страниц, которые ссылаются на нее.

Совет: Получите подробную информацию о любой внутренней / внешней ссылке. Для получения подробной информации о любой ссылке (анкор текст / alt текст, инструкции и т. д.), перейдите в модуль Страницы. Нажмите на одну из страниц в таблице. Перейдите во вкладку Ссылки со страницы ниже, чтобы просмотреть каждую ссылку на странице, ее код статуса HTTP, анкор текст и инструкции для роботов (nofollow / dofollow).

Проблемы с изображениями на вашем сайте также создают трудности как пользователям сайта, так и поисковым системам. Поисковые системы не могут прочитать контент на изображении, поэтому крайне важно предоставить им краткое описание изображения с помощью альтернативного текста.

1. Найдите все битые изображения. Битыми считаются изображения, которые не отображаются. Это может произойти, если файлы изображений были удалены или путь к файлу был указан с ошибкой.

Чтобы получить список всех проблемных изображений на вашем сайте, проверьте фактор Битые изображения в разделе Изображения (в модуле Seo-анализ вебсайта).

2. Найдите изображения с пустым alt текстом. Когда alt текст изображения отсутствует, поисковые системы не смогут определить, что представляет собой изображение и какую роль оно играет в контенте страницы. Вот почему важно использовать уникальный альтернативный текст для своих изображений. В него даже можно включать ключевые слова, если они вписываются в описание.

Чтобы получить список изображений без альтернативного текста, нажмите на фактор Пустой alt текст в разделе Изображения (в модуле Seo-анализ вебсайта).

Через заголовок и мета-описание вы можете сообщать поисковым системам о своих страницах. Правильные теги могут помочь вам подняться выше в поисковике. Кроме того, содержимое этих тегов будет использоваться в сниппете - текстовом фрагменте, который отображается при появлении вашего сайта в результатах поиска.

Шаги: Избегайте пустых, слишком длинных или повторяющихся заголовков и мета-описаний. В разделе Онпэйдж (модуль Seo-анализ вебсайта) вы сможете просмотреть проблемные страницы (если они есть), а также получить дополнительную информацию и рекомендации.

Повторяющиеся заголовки и описания могут запутать поисковые системы. Им будет сложно понять, какая страница должна появляться в результатах поиска. Вполне вероятно, что они не захотят ранжировать ни одну из них. Если ваши заголовки или мета-описания пустые, поисковые системы сами составят текстовый фрагмент (сниппет) для страницы. Но тогда он может выглядеть непривлекательно для пользователей. Кроме того, слишком длинные заголовки и описания будут обрезаны для сниппета и не смогут передать весь смысл.

Техническая часть закончена!

Поздравляем! Вы исправили все технические проблемы, которые могли помешать вашему сайту занимать более высокие позиции. Пришло время перейти к креативной части, а именно созданию и оптимизации контента ваших целевых страниц.


SEO PowerSuite — все, что нужно для успешной SEO-кампании:

  • Определите целевые ключевые слова
  • Проверьте текущие позиции сайта в поисковых системах
  • Найдите технические проблемы на сайте и устраните их
  • Оптимизируйте контент страниц
  • Удалите опасные ссылки
  • Постройте новые качественные ссылки