Яндекс Вебмастер: полное руководство. Часть 2

Это вторая часть руководства по Яндекс Вебмастеру. Первую часть можно найти по ссылке.

Индексирование – все, что робот Яндекса знает о сайте

Страницы сайта попадают в результаты поиска или выпадают из него после того, как робот Яндекса побывает на них и присвоит им определенный статус. Обходы роботов происходят регулярно. Поэтому важно следить за динамикой индексирования.

Статистика обхода

На графике видно количество страниц, недавно добавленных в индекс, и страниц, изменивших свой статус:

Яндекс Вебмастер

По умолчанию график строится за последнюю неделю. Но период можно изменить, нажав на ссылку внизу и передвинув ползунок:

Яндекс Вебмастер

В таблице перечислены адреса страниц и их статусы. Вот основные обозначения, которые стоит отслеживать.

  • N/a – статус страницы не был известен до последнего обхода; 
  • 200 ОК – ответ сервера правильный, страница работает корректно; 
  • 301 Moved Permanently – на странице настроен редирект, то есть постоянное перенаправление на другой URL
  • 404 Not Found – страница не существует или недоступна на сервере.

Статусы можно отфильтровать. Для примера выделим страницы, которые по какой-либо причине стали недоступны:

Яндекс Вебмастер

Если необходимо проверить страницы из конкретной части сайта, например, раздела каталога, выберете его в меню вверху страницы:

Яндекс Вебмастер

Страницы в поиске

Когда нужно быстро узнать, какие страницы были добавлены в индекс, а какие удалены (и главное, почему) загляните в этот подраздел. 

График вверху показывает общую сводку добавления и выпадения страниц. Настроить его можно аналогично графику из предыдущего раздела – по времени изменений и по разделам сайта.

Яндекс Вебмастер

Снизу указан полный перечень страниц с адресами и заголовками. Для выбывшей страницы Яндекс указывает точную причину исключения. Нажмите на троеточие рядом с ней, и вы узнаете более подробную информацию. Там же есть ссылки, которые помогут решить возникшую проблему при необходимости.

Яндекс Вебмастер

Если вам, допустим, нужно найти все страницы, удаленные роботом из-за запрета в robots, воспользуйтесь фильтром:

Яндекс Вебмастер

Структура сайта

Яндекс видит структуру вашего сайта по-своему. Именно поэтому здесь могут быть отображены не все разделы. Если в каталоге сайта меньше 10 страниц, он не будет учтен.

Добавить нужный раздел вы можете самостоятельно, нажав на кнопку внизу:

Яндекс Вебмастер

Закрыть от индексации определенный раздел сайта можно через специальную запись в файле robots.txt.

Все страницы

В этом подразделе вы можете скачать архив страниц, находящихся в поиске. Архив формируется на основе файла Sitemap.xml и содержит все важные сведения о проиндексированных страницах.

Проверка страницы

Здесь владелец сайта может узнать, как поисковые роботы видят сайт. При анализе URL Вебмастер выдает следующую информацию:

  • meta-данные страницы;
  • статус ответа сервера; 
  • данные о работе JS скриптов;
  • дата последнего обхода роботом;
  • скриншот и текстовая версия страницы.

В этом подразделе также есть ссылка на настройку обработки JavaScript сценариев на сайте. JS компоненты влияют на скорость загрузки страниц и поведенческие факторы.

Яндекс Вебмастер

Проверить статус URL

Подраздел предназначен для проверки статусов отдельных страниц. Вбив нужный URL-адрес в строку, вы получите краткую информацию о доступности страницы. Нажав «Подробнее», вы увидите HTTP-статус и дату последнего обхода. Здесь же можно добавить URL в список важных для постоянного мониторинга.

Яндекс Вебмастер

Мониторинг важных страниц

Получить отчет о состоянии самых важных для продвижения сайта страниц можно здесь. Обычно это посадочные страницы, разделы каталога и карточки товаров (в случае интернет-магазинов).

Создать список для контроля можно самостоятельно или воспользовавшись рекомендациями Яндекса. 

Нажмите на ссылку, чтобы перейти к списку рекомендованных страниц:

Яндекс Вебмастер

Добавьте страницы к мониторингу по отдельности или все вместе:

Яндекс Вебмастер

Уведомления об изменениях на страницах будут приходить вам на почту. Настроить уведомления можно в соответствующем разделе.

Яндекс Вебмастер

Переобход страниц

Чтобы робот быстрее проиндексировал ваши новые статьи или только что добавленные в каталог товары, сообщите ему о них через этот подраздел.

Просто загрузите список адресов и нажмите Отправить.

Все отправленные страницы будут отображаться в списке внизу. Там же вы увидите статус обхода.

Яндекс Вебмастер

Суточный лимит на переобход страниц зависит от показателя ИКС сайта. Для сайтов с ИКС меньше 10 это всего 30 страниц. На сайтах с показателем от 1000 на переобход можно отправить до 240 страниц в сутки, далее число страниц пропорционально растет. Дневной лимит для вашего сайта показан под полем ввода URL:

Яндекс Вебмастер

Файлы Sitemap

Файл sitemap.xml создается, чтобы помочь роботу понять структуру вашего ресурса. Он представляет собой карту сайта в формате xml с перечислением всех значимых страниц.

При наличии Sitemap сайт должен быстрее индексироваться и корректнее ранжироваться в поиске.

Если ссылки на файлы указаны в robots.txt, они автоматически отобразятся в Вебмастере. При этом вы можете добавить Sitemap самостоятельно, указав его адрес:

Яндекс Вебмастер

В подразделе также можно проследить, корректно ли проиндексированы карты сайта:

Яндекс Вебмастер

Обход по счетчикам

Чтобы робот тщательнее обходил ваш сайт, а Яндекс быстрее узнавал о новых страницах, включите функцию обхода по счетчикам. Сделать это можно в разделе «Настройки» / «Привязка к Яндекс Метрике».

Когда счетчик будет привязан, включите обход.

Яндекс Вебмастер

Посмотреть примеры страниц, найденных Яндексом, можно нажав на кнопку:

Яндекс Вебмастер

Среди новых страниц могут быть те, которые не должны появляться в поиске. Скройте их от робота удобным для вас способом.

Переезд сайта

Этот подраздел может понадобиться, если вы:

  • Установили на сайт SSL-сертификат безопасности и переходите на версию сайта с префиксом https. 
  • Меняете главное зеркало сайта с версии без www в начале на версию с www или наоборот.

Чтобы осуществить переезд, выполните 3 несложных действия:

1. Добавьте в Вебмастер новую версию сайта. 

2. В старой версии в подразделе Переезд сайта поставьте нужную галочку.

Яндекс Вебмастер

3. Нажмите Сохранить.

Помните, что переезд может занять до двух недель.

Совет по правильному переносу сайта. При смене адреса не забудьте обновить директиву Host в файле robots.txt, а также сгенерировать новые файлы Sitemap.

Скорость обхода

Под скоростью обхода подразумевается то, с какой интенсивностью роботы будут проверять сайт. Яндекс дает возможность установить ваши рекомендации по скорости.

Выберите пункт «Задать вручную» и сдвиньте ползунок в нужную сторону:

Яндекс Вебмастер

Уменьшить скорость обхода рекомендуется, если ваш сервер испытывает перегрузки от частой активности поисковых агентов. 

Увеличить скорость стоит, если контент на вашем сайте обновляется очень часто и вам важно, чтобы он индексировался быстро.

Заголовки и описания

Это инструмент, который позволяет быстро выявить одинаковые title и description на сайте. С марта 2021 года можно не пользоваться сторонними сервисами, а получить отчет прямо в интерфейсе Вебмастера.

Яндекс Вебмастер

Что полезного есть в этом отчете:

  • сводные данные по количеству и проценту URL с дублирующимися title и description; 
  • советы со ссылками на рекомендации Яндекса, как исправить проблему;
  • примеры страниц с дублями заголовков и описаний (можно воспользоваться переключателем); 
  • дата последнего обхода этих страниц роботом;
  • возможность выгрузить данные из отчета в таблицу XLS или CSV.

Информация о дублях title и description также отображается в специальном блоке раздела «Сводка»:

Яндекс Вебмастер

Инструмент полезен сайтам с большим количеством страниц, в первую очередь – блогам и интернет-магазинам, в которых часто возникают дубли заголовков и описаний из-за особенностей CMS.

Если на вашем сайте обнаружены дубли, уникализируйте заголовки и описания, закройте от индексации «мусорные» страницы и отправьте URL-адреса на переобход.

Рендеринг страниц JavaScript

Здесь владелец сайта может напрямую указать роботу, как следует обрабатывать встроенные скрипты на страницах. Всего доступно 3 опции:

  • рекомендую рендерить – опция подходит для большинства сайтов; 
  • на усмотрение робота Яндекса – опция для ресурсов с большим количеством JS скриптов, которые могут негативно сказываться на загрузке и отображении сайтов; 
  • не рендерить – рекомендуется для сайтов с настроенным пререндерингом.

В этом же подразделе можно проверить, как конкретная страница сайта отображается с прогрузкой JS и без нее.

Представление в поиске – первое знакомство пользователя с сайтом

Свежее и актуальное

Чтобы новая информация на сайте быстрее попадала в результаты поиска, настройте RSS ленту через этот подраздел. Это особенно актуально для новостных и спортивных сайтов.

С инструкцией по созданию и размещению RSS фида можно ознакомиться здесь.

Сниппеты и ответы

Все рекомендации Яндекса по улучшению сниппета сайта собраны в этом подразделе.

Сниппет – это оформление ссылки на ваш сайт на странице результатов поиска. Работать со сниппетом важно, ведь от него напрямую зависит показатель кликабельности.

Яндекс Вебмастер

Расширенный сниппет с быстрыми ссылками сайта PromoPult

В меню справа зелеными галочками отмечены рекомендации, которые уже выполнены на вашем сайте. Знаки восклицания стоят напротив рекомендаций, на которые Яндекс советует обратить особое внимание:

Яндекс Вебмастер

Раздел содержит множество ссылок на статьи Яндекс Справки. Рекомендуем с ними ознакомиться.

Региональность

Чтобы ваш сайт показывался только пользователям из городов, в которых вы работаете, настройте региональную привязку. Действуйте двумя путями:

  • Через информацию об организации в Яндекс Бизнесе. Способ подходит компаниям, имеющим филиалы в разных регионах. 
  • Через настройки в разделе «Региональность» Вебмастера. Нажмите на значок шестеренки. В открывшихся полях задайте желаемый регион и укажите подтверждающую ссылку (например, страницу Контакты).

Яндекс Вебмастер

Для сайтов, которым не важна региональная привязка (например, информационных ресурсов) есть возможность сообщить об этом Яндексу, нажав на кнопку «Нет региона».

Быстрые ссылки

Ссылки, показываемые в сниппете, формируются Яндексом автоматически. Вы можете лишь отключить их показ (нажав на галочку) или убрать из списка конкретные страницы (нажав на значок слева).

Для некоторых ссылок Яндекс предлагает несколько вариантов названий. Выбрать тот, что вам больше нравится, можно нажав на стрелочку.

Яндекс Вебмастер

Отметка «new» означает, что ссылка добавлена недавно. Значок «cng» появится, если у ссылки сменится название или появятся новые доступные варианты.

Совет по формированию быстрых ссылок. Чтобы важные для вас страницы попали в сниппет, включайте их в основное меню на главной странице и прописывайте в title короткие понятные названия.

Товары и предложения

Источники данных

Здесь вебмастера загружают фиды для добавления своих предложений в товарный блок поиска Яндекса. В этом же подразделе можно посмотреть информацию об уже загруженных фидах, а также получить знак проверенного магазина.

Если по какой-то причине Яндекс отклоняет загруженные офферы, он сообщает об этом во вкладке Ошибки и рекомендации.

Яндекс Вебмастер

Во вкладке «Статистика» хранятся данные о переходах и конверсиях из поиска. Для корректной работы инструмента необходимо подключить Яндекс Метрику.  

Сводка

Здесь хранится общая статистика по принятым и отклоненным офферам вашего магазина. 

Яндекс Вебмастер

Ссылки – проблемы внутренней перелинковки и динамика линкбилдинга

Внутренние ссылки

То, как страницы связаны между собой внутри сайта, имеет важное значение в SEO-продвижении.

Внутренняя перелинковка служит для перераспределения веса страниц. Чем больше ссылок имеет та или иная страница, тем важнее она выглядит в глазах поисковика.

Удобная навигация улучшает поведенческие факторы, уменьшая показатель отказа и увеличивая среднее время пребывания пользователя на сайте.

На графике в подразделе показана динамика количества неработающих внутренних ссылок.

Во вкладке вверху можно отфильтровать причину, по которой ссылка не работает:

Яндекс Вебмастер

В таблице указаны конкретные URL-адреса битых ссылок и ссылающихся страниц.

Яндекс Вебмастер

Внешние ссылки

Значение внешнего продвижения для SEO снизилось за последние годы. Но все же качественные внешние ссылки еще учитываются при ранжировании.

В подразделе можно ознакомится с общим количеством ссылок и его динамикой:

Яндекс Вебмастер

Также можно узнать статистику показателей ИКС ваших сайтов-доноров:

Яндекс Вебмастер

Внизу подраздела указаны конкретные адреса ссылок и их анкоры. Таблицу можно отфильтровать по разным параметрам, в том числе по показателю ИКС ссылающихся сайтов:

Яндекс Вебмастер

Эффективный и безопасный метод линкбилдинга – продвижение ссылками с PBN-сетей. Настройте PBN-проект в PromoPult и получите рост позиций, трафика и лидов из Яндекса и Google уже через 30-40 дней. Есть финансовая гарантия: не будет результата через 40 дней с момента старта продвижения, вам вернут деньги за первый месяц работ. Подробно о технологии рассказали здесь

Неработающие ссылки

На этой вкладке собрана вся информация о битых ссылках: внутренних, внешних и исходящих. В таблице указываются источник и донор ссылки, а также код ошибки.

Для удобства обработки все данные можно скачать в форматах XLS и CSV. 

Яндекс Вебмастер

Турбо-страницы для контентных сайтов – быстрая загрузка статей и новостей

Пользователи мобильных устройств не любят тратить большое количество трафика на загрузку страниц. Также естественно, что никому не нравится когда страницы «тормозят» и долго не открываются. Чтобы избежать этих проблем, Яндекс дает возможность создать ускоренные версии страниц или Турбо-страницы.

Рассмотрим, как такие страницы настраиваются и контролируются через Вебмастер.

Сводка по Турбо

В подразделе собрана вся необходимая информация о Турбо-страницах: обнаруженные проблемы, динамика трафика и рекомендации по улучшению.

Если рекомендация выполнена, рядом с ней появится зеленая галочка:

Яндекс Вебмастер

Источники

Чтобы начать пользоваться Турбо-страницами, вам понадобится RSS-канал или API. Подробно о том, как создать канал, можно узнать здесь. Загрузите источник одним из двух способов:

Яндекс Вебмастер

После добавления источника следуйте инструкции от Яндекса.

Настройка

В этом подразделе задается внешний вид Турбо страниц – от шапки и меню до рекламных блоков. Вы даже можете подключить свои CSS стили, чтобы сформировать дизайн всех элементов.

Яндекс Вебмастер

О тонкостях всех настроек читайте в Справке.

Отладка

Проверить на ошибки можно как код RSS-канала, так и CSS код дизайна страницы.

Яндекс Вебмастер

Диагностика

Здесь Вебмастер сообщает об ошибках, обнаруженных на Турбо-страницах.

Инструменты – проверка технической оптимизации сайта

Анализ robots.txt

В файле robots.txt можно закрыть от индексации отдельные страницы и целые разделы сайта, которые не должны попасть в поиск. Обычно это дубли страниц, административные разделы и конфиденциальные данные пользователей.

Вебмастер подгрузит файл robots.txt автоматически, когда вы добавите его в корневой каталог сайта. 

Чтобы проверить robots на наличие ошибок, нажмите соответствующую кнопку. Если в результатах вы увидите надпись «0 ошибок» – файл составлен корректно.

Яндекс Вебмастер

Еще одна полезная функция подраздела – проверка отдельных страниц на запрет индексации.

Введите в специальное поле адреса интересующих вас страниц и нажмите «Проверить»:

Яндекс Вебмастер

Если в результатах появилась зеленая галочка – страница доступна для робота и он ее проиндексирует.

Красная надпись отражает правило, по которому страница закрыта для индексации.

Анализ файлов Sitemap

Карты сайта в xml формате размещаются в корневом каталоге сайта. Сгенерировать их можно с помощью плагина CMS или в сторонней программе.

В подразделе Вебмастера можно проверить файлы sitemap.xml на наличие ошибок.

Скопируйте текст полностью или загрузите готовый файл. Самый простой способ проверки – через URL-адрес.

Если файл составлен правильно, Вебмастер сообщит, что ошибок не найдено.

Яндекс Вебмастер

При наличии проблемы сервис подскажет ее тип и укажет конкретную строку.

Проверка ответа сервера

Для корректной работы сайта важно, чтобы:

  • сервер при обращении отдавал правильный код ответа – 200 ОК; 
  • ответ сервера был быстрым – не больше 1000 мс, в идеале меньше 200 мс.

В ином случае пользователи не смогут попасть на сайт или будут покидать его из-за слишком медленной загрузки.

При проверке страницы в Вебмастере вы получите все необходимые данные. Для этого просто введите URL:

Яндекс Вебмастер

Удаление страниц из поиска

Чтобы удаленные с сайта или недавно закрытые от индексации страницы быстрее покинули поиск, воспользуйтесь этим инструментом.

Яндекс Вебмастер

Для страниц, принадлежащих одному разделу сайта или содержащих в URL одинаковые символы, доступно массовое удаление:

Яндекс Вебмастер

По правилам Яндекса, удалить из поиска можно только те страницы, которые:

  • при обращении робота к их адресу дают ответ сервера с кодом 404, 403 или 410; 
  • запрещены для индексации через файл robots.txt или метатег noindex.

Проверка мобильных страниц

Яндекс не отстает от Google в плане активного развития мобильной выдачи. Это вполне объяснимо, ведь с каждым годом доля пользователей, запускающих поиск с мобильных и планшетов, только растет.

Проверить, соответствует ли ваш сайт трендам, легко с помощью данного подраздела.

В идеале сайт должен получить зеленые галочки рядом с каждым из пунктов чек-листа.

Яндекс Вебмастер

XML-валидатор

У Яндекса существует несколько партнерских программ, через которые различные компании могут публиковать свои предложения и услуги. Например, риэлторским агентствам выгодно размещать свои объекты на сервисе Яндекс Недвижимость. Для этого нужно периодически отправлять Яндексу большое количество данных через специальный файл – XML-фид.

Чтобы данные загрузились и отображались корректно, XML-фид должен быть настроен правильно.

Для проверки XML кода выберете интересующий вас сервис Яндекса и способ отправки данных.

Яндекс Вебмастер

Валидатор микроразметки

Микроразметка нужна, чтобы поисковик лучше понимал. какие именно данные размещены на странице – адрес организации, отзывы пользователей или карточки товаров. Часто наличие микроразметки улучшает вид сниппета в результатах выдачи.

Проверить валидность кода микроразметки можно указав адрес интересующей вас страницы.

Яндекс Вебмастер

При наличии ошибки (например, отсутствии нужного поля разметки) Вебмастер выдаст предупреждение.

Проверка наличия НУЦ сертификата 

Здесь можно проверить наличие сертификата безопасности от Национального удостоверяющего центра. Сертификат обеспечивает защищенное соединение для домена и полностью заменяет международные аналоги.

Настройки – упрощаем работу с сервисом

Уведомления

Для каждого вебмастера, SEO-специалиста и интернет-маркетолога важно как можно оперативнее получать сообщения о последних изменениях на сайте. Чтобы быть всегда в курсе событий, настройте уведомления Вебмастера удобным для себя способом:

  • на почту; 
  • внутри сервиса.

Кликните дважды по точке в нужном столбце и сделайте иконку уведомления активной:

Яндекс Вебмастер

Если вы не внесете изменения, уведомления будут приходить с настройками по умолчанию. Посмотреть их можно по ссылке https://webmaster.yandex.ru/settings/.

Права доступа

Если вам нужно передать права на управление сайтом стороннему исполнителю, введите адрес его Яндекс Почты в строку внизу. Выше перечислены все пользователи, у которых уже есть доступ к Вебмастеру этого сайта.

Яндекс Вебмастер

Привязка к Яндекс Метрике

Чтобы связать Вебмастер и Метрику, нажмите кнопку «Добавить счетчик». В открывшемся окне введите номер счетчика.

Яндекс Вебмастер

Подтвердить права на управление нужно будет и в Метрике. После подтверждения вы сможете воспользоваться функцией «Обход по счетчикам» в разделе «Индексирование».

Иконка ИКС

Если вы хотите сообщить посетителям и потенциальным партнерам, что ваш сайт качественный и заслуживает доверия по мнению Яндекса, это легко сделать, добавив на страницы иконку показателя ИКС.

  • Выберите нужный цвет и язык иконки. 
  • Скопируйте сгенерированный код. 
  • Вставьте код в футер на сайте.

Яндекс Вебмастер

Вебмастер дает комплексную картину того, как Яндекс видит ваш сайт. Пользуясь доступными в сервисе инструментами, вы сможете значительно улучшить свое положение в выдаче, наладить стабильный поток трафика и конверсии.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *