Тема SEO на просторах рунета напоминает бермудский треугольник — чем больше параметров мы пытаемся синхронизировать с поисковыми алгоритмами, тем больше сомневаемся. Влияет ли это на ранжирование? Стоит ли прописывать кейворды в метатэгах? Какие поведенческие факторы нужно поправить?
Одним из таких вопросов является проблема с индексированием карты сайта — sitemap.xml. В целом, поисковая оптимизация довольно сложный и отнюдь не дешевый процесс, поэтому если есть всего два выхода: делать всё самому, либо использовать SEO услуги по часам — и то, и другое позволит существенно сэкономить бюджет. Для решения небольших задач не обязательно заказывать комплексную диагностику или услуги продвижения, которые могут затянуться на неделю. Гораздо проще оплатить специалисту несколько часов его работы.
Карта сайта не индексируется?
Всё начинается с того, что на почту приходит соответствующее уведомление:
Открываем Google Search Console и видимо ошибку в категории «Покрытие»:
Ошибка подразумевает запрет к индексации конкретного URL через метатег noindex:
При просмотре кода страницы (CTRL+SHIFT+I или F12 в Google Chrome) вы действительно найдете соответствующий метатег, запрещающий индексацию:
Нужно ли открывать для индексации sitemap.xml?
Если вы используете Генератор XML-карты сайта (плагин XML-Sitemap Generator), то в настройках вы не увидите опции об открытии файла для индексации. Это ведь не просто так?
Никаких конкретных советов ни справка Яндекса, ни справка Гугла по этому вопросу не даёт. Поэтому попробуем разобраться самостоятельно. XML-карта помогает поисковикам структурировать и определять важность всех страниц сайта, их местонахождение и частоту обновления, а так же правила индексации.
Последний параметр очень важен. Если открыть индексацию, то важные страницы будут проиндексированы именно на карте сайта, что нам совершенно не нужно. К тому же все ненужные документы попадут в индекс — метки, авторы сайтов, архивы категории и прочие нерелевантные для поисковиков страницы, что скорее навредит сайту, чем поможет ему.
ИТОГ:
Открывать sitemap.xml чревато для владельца сайта попаданием в индекс ненужных разделов и страниц сайта, которых там быть не должно. А это уже в свою очередь может навлечь санкции со стороны поисковых систем. Закрытие для индексации файла sitemap.xml не означает, что его не будут учитывать Яндекс и Google. Суть в том, чтобы робот перешёл по указанным ссылкам в карте сайта и проиндексировал контент именно на самом ресурсе, а не в XML-документе
Как вам статья?
Здравствуйте. Хочу сказать, что сейчас поисковики умеют сочетать сайтмап и роботс. У меня в сайтмапе есть ненужные страницы для индекса, но они в него не попали, поскольку закрыты в роботсе.
Согласны. Тут больше вопрос стоял, стоит ли открывать сайтмап для индексации, в принципе. Т.к. ошибка в search console мозолит глаза. А так, да, можно такой кроссовер использовать
Хороший вопрос-ответ! Но последнее время есть проблема с файлом sitemap.xml в Серч Консоль. Не хочет обрабатывать файл, пишет не обработано. Посмотрела что в интернете пишут, аналогично у многих есть такая проблема.
Вряд ли это связано с тэгом noindex. А на других страницах бот гугла как себя чувствует?