Содержание
что это такое за тег для Яндекса
Оглавление
Преимущества тега noindex
Принцип действия
Noindex – это тег, с помощью которого можно управлять функцией индексации поискового робота. Если выделить отдельный фрагмент текста и закрыть его тегом noindex, он не будет проиндексирован поисковой системой и, соответственно, не попадет в ее кэш. Впервые данный инструмент был предложен специалистами Яндекса, чтобы у веб-мастеров появился простой способ отделения части текстового контента, которая не несет смысловой нагрузки и не должна учитываться при оценке страницы.
Вторая, не менее важная функция тега noindex, состоит в том, чтобы блокировать индексацию отдельных страниц сайта, предназначенных для публикации пользовательского контента. К таким относятся страницы с отзывами, комментариями, сообщениями и др. В данном случае noindex позволяет избежать распространения нежелательной информации и использовать менее жесткий режим модерирования пользовательских сообщений.
Тег noindex учитывает только Яндекс. Google игнорирует его присутствие и проводит полную индексацию текстового содержания страницы. Для задействования блокировки индексации, актуальной для всех поисковиков, следует прописывать соответствующий метатег для отдельных страниц или всего сайта в файле robots.txt. Недостаток данного способа очевиден: запрет на индексацию возможен только по отношению ко всей странице, но не отдельному текстовому фрагменту.
Преимущества тега noindex
- Сокрытие второстепенной информации позволяет повысить релевантность индексируемой страницы за счет возрастания относительной плотности ключевых фраз.
- С помощью noindex можно спрятать содержимое сквозных блоков, информация в которых будет дублироваться на нескольких страницах, что отразится на пессимизации сайта в поисковой выдаче Yandex.
- В некоторых случаях в сниппет может попасть нежелательная или служебная информация, которую проще всего скрыть тегом noindex.
Принцип действия
Noindex может находиться в любом месте HTML-кода вне зависимости от уровня вложенности. Для сохранения валидности кода тег следует использовать в следующем формате:
<!—noindex—>Здесь находится закрытый для индексации текст<!—/noindex—>.
Несмотря на тот факт, что noindex был изначально предложен разработчиками Yandex, использование данного инструмента может быть расценено в качестве серого метода оптимизации. Это связано с тем, что некоторые веб-мастера применяют его не по прямому назначению. В частности, от робота прячется неуникальный контент или качественный текст, не содержащий ключевых слов, рассчитанный на прочтение посетителем сайта. Одновременно поисковику предлагается насыщенный ключевыми фразами текст, тяжелый для восприятия человека.
Для борьбы с подобными методами оптимизации Yandex анализирует текст, закрытый тегом noindex, проводя его индексацию, но впоследствии отфильтровывая скрытое содержимое. В результате изучения контента страницы поисковик может принять решение о наложении санкций на сайт, если сочтет, что его владелец использует неправомерные способы влияния на результаты поисковой выдачи.
что такое за HTML-тег и как его использовать
Noindex – метатег, с помощью которого вы можете управлять индексацией поискового робота. Если вы выделите отдельный текстовый фрагмент и закроете его тегом noindex, то он не проиндексируется поисковой системой. Соответственно, он не будет находиться в его кеше.
Функции
Первый раз этот инструмент предложили специалисты «Яндекса», чтобы веб-мастеры могли быстро и с минимальными усилиями отделить часть текстового контента, не несущую смысловой нагрузки и нежелательную для оценки страницы.
Другая функция метатега noindex, не менее важная, заключается в блокировании индексации отдельных страниц ресурса, на которых публикуется контент пользователей. Как правило, это страницы, на которых размещены отзывы, комментарии, сообщения и др. В этом случае с помощью noindex можно использовать не самый жесткий режим модерации сообщений пользователей и избежать популяризации нежелательной информации.
Метатег noindex учитывается только «Яндексом». Для Google его наличие не играет роли. Поисковик проводит полную индексацию текстового контента страницы. Чтобы заблокировать индексацию для всех поисковиков, нужно прописать соответствующий метатег для всего сайта или отдельных страниц в файле robots.txt. Этот способ имеет очевидный недостаток: у вас не будет индексироваться целая страница, а не только отдельный текстовый фрагмент.
Преимущества noindex
-
Когда скрыта второстепенная информация, можно увеличить плотность ключевых слов и повысить релевантность индексируемой страницы.
-
Метатег noindex позволяет скрыть контент сквозных блоков, дублирующихся на нескольких страницах и негативно влияющих на позиции сайта в выдаче «Яндекса».
-
С помощью этого метатега можно скрыть нежелательную или служебную информацию, которая иногда попадает в сниппет.
Принцип действия
Noindex может располагаться в любом месте HTML-кода. Уровень вложенности не имеет значения. Чтобы сохранить валидность кода, тег нужно использовать в таком формате:
[!—noindex—] текст, спрятанный от индексации[!—/noindex—].
Несмотря на то, что noindex изначально предложили разработчики Yandex, применение этого инструмента может расцениваться как серый метод оптимизации. Причиной являются недобросовестные веб-мастеры, которые не всегда применяют его по прямому назначению и прячут от робота контент с низкой уникальностью или текст без ключевых фраз, рассчитанный на прочтение посетителями ресурса. Вместе с ним поисковику предлагается текст с обилием ключей, тяжелый для восприятия обычным человеком.
«Яндекс» борется с серыми методами оптимизации, поэтому выполняет анализ текста, закрытого метатегом noindex, проводит его индексацию, а затем отфильтровывает скрытое содержимое. После изучения контента поисковик может наложить санкции на сайт, если решит, что его владелец пользуется неправомерными способами влияния на поисковую выдачу.
Google рассказал, как метатег noindex может вызывать проблемы
Джон Мюллер из Google ответил на вопрос об использовании метатега noindex на страницах товаров, которых временно нет в наличии. Джон ответил на вопрос и поделился мнением о том, как такое использование может немного сбить Google с толку и вызвать больше проблем.
Метатег Robots
Метатег robots — это директивный способ запретить поисковым системам индексировать веб-страницу. Под «индексацией» веб-страницы подразумевается ее включение в список веб-страниц, которые будут отображаться на страницах результатов поиска (также известных как SERP).
«Директива » — это код, которому поисковые системы обязаны подчиняться.
Метатег robots noindex сообщает поисковым системам, что страница не должна быть включена в индекс. Страница, исключенная из индекса, означает, что страница исключена из результатов поисковой выдачи.
Вопрос о страницах продуктов, которых нет в наличии
Вопрос, на который ответил Джон Мюллер, был задан издателем, который добавлял метатег noindex на страницы продуктов, где товаров нет в наличии.
Таким образом Google мог исключить страницу с товаром, которого нет в наличии, из результатов поиска Google.
Затем издатель обновил метатег noindex на команду «index», когда товар снова появился на складе. Изменив директиву noindex на директиву index, издатель сказал Google, чтобы он продолжал показывать страницу в результатах поиска.
Вот заданный вопрос:
«Мы часто обновляем наши мета-роботы, index и noindex. А в прошлом месяце мы внесли последнюю модификацию на страницы продуктов, которые вернулись в продажу за последние семь дней, и пометили их как «индексные», но мы не заметили никакого влияния на отправленные URL-адреса, помеченные как неиндексированные. Я вручную проверил некоторые URL-адреса последних модификаций.
Google, кажется, никогда не следит за ними».
Переключение тега мета-индекса роботов между noindex и index не помогло издателю.
В ответ Джон Мюллер рассказал, как Google обрабатывает метатег noindex.
«В целом, я думаю, что эти колебания между индексированными и неиндексированными могут немного сбить нас с толку.
Потому что, если мы увидим страницу, которая не индексируется в течение длительного периода времени, мы будем считать, что это что-то вроде страницы 404, и нам не нужно сканировать ее так часто.
Так что, вероятно, происходит то, что мы видим эти страницы как неиндексированные и решаем не сканировать их так часто, независимо от того, что вы отправляете в файле карты сайта.
Так что это то, где… колебание метаданных noindex здесь контрпродуктивно, если вы действительно хотите, чтобы эти страницы время от времени индексировались».
Как Google обрабатывает Noindex-теги
Интересно, что способ, которым Google обрабатывает метатеги noindex для роботов, аналогичен тому, как они обрабатывают код ответа 404.
Тег robots noindex является мощным инструментом, и лучше всего его использовать на страницах, которые издатель никогда не хочет индексировать.
Согласно странице разработчика метатега Google robots:
«Метатег robots позволяет вам использовать детальный, специфичный для страницы подход к управлению тем, как отдельная страница должна быть проиндексирована и показана пользователям в результатах поиска Google».
На той же странице Google говорится о метатеге noindex:
«…указывает поисковым системам не показывать страницу в результатах поиска».
В нем ничего не говорится о том, что Google обрабатывает его аналогично ответу 404 страница не найдена, что заставит Google реже посещать страницу, если вообще будет.
Как работать со страницами продуктов, которых нет в наличии
Существует несколько рекомендаций по работе с веб-страницами, которых нет в наличии.
Страницы категорий
На страницах категорий, где перечислены товары, которые есть в наличии и которых нет в наличии, а также на страницах поиска по веб-сайту, рекомендуется по умолчанию сначала отображать товары в наличии.
Затем покажите товары, которых нет в наличии, в нижней части страниц поиска и страниц категорий.
Скриншот страницы поиска розничного магазина, показывающей последние товары, которых нет в наличии
Клиенты также рассматриваются
Наилучшей практикой при работе со страницами продуктов, которых нет в наличии, является отображение раздела «Клиенты также рассматриваются» в верхней части списка страницы продукта на складе.
Таким образом, вы можете показать посетителю сайта похожие товары в наличии, которые могут его заинтересовать.
Оповещение о наличии на складе
Дополнительным передовым методом является отображение заметной кнопки «Оповещение о наличии на складе», чтобы потребители могли выбрать получение уведомления о появлении товара на складе.
Скриншот кнопки подписки на оповещение по электронной почте о наличии на складе
Структурированные данные об отсутствии на складе
Свойство структурированных данных «предложение» продукта имеет тип ItemAvailability , который можно использовать для сообщения поисковым системам о наличии товара на складе. или нет в наличии.
Тип ItemAvailability указан Google как рекомендуемый, но не обязательный.
Снимок экрана со структурированными данными, которых нет в наличии
Если структурированные данные ItemAvailability помечены как недоступные, поисковые системы могут не показывать эту веб-страницу в результатах поиска, а продолжать ее индексировать. Неясно, будут ли поисковые системы ранжировать эти страницы, но похоже, что именно так поисковые системы обрабатывают данные.
Смотреть, как Джон Мюллер обсуждает метатег Noindex о роботах
Категория
Новости
SEO
Как Google справляется с директивами Noindex — Советы по поисковой оптимизации
Директива rel=”noindex” используется для указания поисковым системам не включать страницу в свой индекс, чтобы предотвратить ее появление в результатах поиска. В приведенных ниже примечаниях о рабочих часах SEO объясняется использование этой директивы, а также дополнительные рекомендации, составленные на основе сеансов Google в рабочие часы и реальных примеров.
Подробнее о директивах noindex читайте в нашей статье: Noindex, Nofollow и Disallow.
Используйте новый метатег robots «indexifembedded» для управления индексацией встроенного контента.
Пользователь спросил, как заблокировать отдельное индексирование встроенных видео. Джон рекомендует использовать новый «indexifembedded» тег роботов (в сочетании со стандартными тегами noindex robots), чтобы контролировать, какие версии встроенных видео индексируются.
21 июля 2022 г.
Если URL-адреса, заблокированные файлом robots.txt, индексируются Google, это может указывать на недостаточное содержание доступных страниц сайта. txt (и иметь канонический) по-прежнему индексируется Google? Поможет ли добавление тега
noindex ? Джон ответил, что тег noindex в этой ситуации не поможет, так как блокировка robots. txt означает, что Google его не увидит.
Он указал, что в этой ситуации URL-адреса могут быть проиндексированы без контента (поскольку Google не может сканировать их с помощью блока в robots.txt), но вряд ли они будут отображаться для пользователей в поисковой выдаче, поэтому не должны вызывать вопросы. Далее он упомянул, что если вы видите, что эти заблокированные URL-адреса возвращаются для практических запросов, то это может быть признаком того, что остальную часть вашего веб-сайта трудно понять Google. Это может означать, что видимого контента на вашем веб-сайте недостаточно, чтобы Google понял, что обычные (и доступные) страницы релевантны этим запросам. Поэтому он сначала порекомендовал бы выяснить, действительно ли поисковики находят те URL-адреса, которые заблокированы robots.txt. Если нет, то все должно быть в порядке. В противном случае вам, возможно, придется просмотреть другие части веб-сайта, чтобы понять, почему Google не может его понять.
21 фев. 2022
Отсутствие индексации страниц с перенаправлением по географическому IP-адресу не идеально
Один пользователь спросил об использовании перенаправления по географическому IP-адресу в сочетании с тегами noindex . В примере были отдельные страницы, предназначенные для пользователей из разных мест, но с использованием тегов noindex, чтобы обеспечить индексацию только одной из них.
Джон упомянул, что Google обычно сканирует из одного места (в основном с использованием калифорнийского IP-адреса). Если IP-адрес направляет Google на один из URL-адресов, для которых вы установили значение noindex, это может привести к тому, что эти страницы не будут проиндексированы с полной остановкой. Поэтому этот подход не рекомендуется. Вместо этого вы должны сосредоточиться на том, чтобы упростить поиск контента для конкретного местоположения после того, как пользователь зашел на сайт.
27 января 2022
Показ меньшего количества контента для поисковых систем, чем для пользователей, не обязательно является проблемой маскировки
Джона спросили о веб-сайте, на котором было много неиндексированных страниц с ошибками HTTP. Они спросили, считается ли « маскировкой » показ пустой HTML-страницы ботам, чтобы деиндексировать эти URL-адреса, но при этом показывать пользователям страницу.
Джон упомянул, что часть «маскировки», которая является проблемой, заключается в том, что поисковые системы получают на больше или значительно другой контент , чем пользователи. Google не хочет обещать пользователям что-то, чего они не смогут найти при переходе на страницу по запросу. Однако отображение пустой страницы с noindex приведет к тому, что Google отбросит эти URL-адреса, и им будет все равно, если пользователи увидят что-то другое, потому что страница не будет отображаться в результатах поиска.
17 ноября 2021 г.
Наличие высокого соотношения «неиндексируемых» и индексируемых URL-адресов может повлиять на возможность сканирования веб-сайта
Наличие неиндексируемых URL-адресов обычно не влияет на то, как Google сканирует остальную часть вашего веб-сайта — , если только у вас нет большого количества неиндексированных страниц, которые необходимо просканировать, чтобы достичь небольшого числа индексируемых страниц.
Джон привел пример: если веб-сайт содержит миллионы страниц, 90% из которых noindexed , поскольку Google необходимо сначала просканировать страницу, чтобы увидеть noindex , Google может увязнуть в сканировании миллионов страниц только для того, чтобы найти эти 100 индексируемых. Если у вас нормальное соотношение индексируемых и неиндексируемых URL-адресов, а индексируемые можно быстро обнаружить, он не видит в этом проблемы для сканирования. Это связано не с соображениями качества, а скорее с технической проблемой из-за большого количества URL-адресов, которые необходимо будет просканировать, чтобы увидеть, что там есть.
17 ноября 2021 г.
Ускорение повторного сканирования ранее не проиндексированных страниц путем временной ссылки на них на важных страницах URL-адреса, если сканирование замедлилось из-за более раннего наличия тега
noindex . В приведенном примере были ранее неиндексированных страниц продуктов, и Джон предложил разместить на них ссылку на пару недель через специальный раздел продукта на главной странице. Google увидит изменения внутренних ссылок, а затем просканирует эти URL-адреса, на которые есть ссылки. Это помогает показать, что они являются важными страницами по отношению к веб-сайту. Однако он также заявил, что если во внутренние ссылки будут внесены значительные изменения, это может привести к тому, что другие части вашего сайта, которые едва проиндексированы, выпадут из индекса — вот почему он предлагает использовать эти ссылки в качестве временной меры для их повторного сканирования. по обычному курсу, прежде чем изменить его обратно.
17 ноября 2021 г.
Если страница не индексируется в течение длительного периода времени, ее сканирование замедлится. Как только страница снова станет индексируемой, сканирование возобновится, но для первоначального повторного сканирования может потребоваться некоторое время. Он также упомянул, что отчеты Search Console могут показывать худшую ситуацию, чем она есть на самом деле, но вы можете использовать такие вещи, как карты сайта и внутренние ссылки, чтобы ускорить их повторное сканирование.
17 ноября 2021 г.
Чтобы лучше контролировать индексацию страниц, используйте теги noindex на страницах вместо тегов nofollow во внутренних ссылках
Добавление тегов rel=”nofollow” к внутренним ссылкам не рекомендуется в качестве способа контроля индексация. Вместо этого Джон предлагает добавить теги noindex к страницам, которые вы не хотите индексировать, или вообще удалить внутренние ссылки на них.
1 ноябрь 2021 г.
Непроиндексированные страницы обычно не учитываются алгоритмами качества контента
Google уделяет особое внимание качеству проиндексированного контента. Если он не отображается в поиске, он вообще не учитывается.
30 октября 2021 г.
Разрешить индексацию одного варианта страниц категорий
В настоящее время у Google нет рекомендаций по индексированию различных версий страниц категорий, но он движется к рекомендации разрешить индексацию одной версии, например порядок сортировки, а альтернативные варианты с другими фильтрами и порядком сортировки не должны индексироваться.