Использование тега noindex и атрибута nofollow. Отличие noindex и nofollow.

Правильное использование тега noindex и атрибута nofollow – самый первый шаг в грамотной оптимизации. Ведь noindex и nofollow играют огромную роль при передаче веса с одной страницы сайта на другую. Тег noindex используется для запрета индексации какой-то части html-кода страницы. Тег noindex не является валидным, поэтому некоторые html-редакторы отказываются его воспринимать. Ноиндекс воспринимается исключительно поисковиком Яндексом, а Гугл на него никак не реагирует.

Не стоит путать обычный тег <noindex> с мета-тегом noindex, прописываемым вначале страницы, их задачи разные. Простой тег запрещает для индексации только ту часть кода страницы, которая находится между открывающимся <noindex> и закрывающимся </noindex> тегами. Что же касается мета-тега, то он запрещает индексировать всю страницу (запрет прописывается в файле robots.txt) – такую страницу Яндекс вообще не индексирует.

Тег работает безотказно: вся текстовая информация внутри него не попадает в индекс яндекса. Однако некоторые оптимизаторы утверждают, что порой текст внутри ноиндекс индексируются – увы, такое действительно бывает. Дело в том, что Яндекс все же изначально индексирует весь html-код, даже тот, что внутри тега, но потом проводит фильтрацию. В начале служебного фрагмента поставьте — <noindex>, а в конце — </noindex>, и Яндекс не будет индексировать данный участок текста. Тег noindex не чувствителен к вложенности.

Используя открывающийся тег (<noindex>), не забудьте поставить закрывающийся — (</noindex>), иначе весь текст, следующий после <noindex> не будет проиндексирован.

Поскольку тег noindex не входит в официальную спецификацию языка HTML, то большинство HTML-валидаторов считает его ошибкой. Потому для того, чтобы сделать код с noindex валидным, рекомендуется использовать следующую конструкцию:

<!–noindex–>Текст или код, который нужно исключить из индексации<!–/noindex–>

Немалая часть оптимизаторов очень часто высказывают мнения, насчет того, что Яндекс не обращает внимания на этот тег. Обычно аргументируется это тем, что текст, закрытый в ноиндекс, есть в сохраненной копии страницы в Яндексе, следовательно, поисковик видит его. Другая же часть оптимизаторов считает, что это просто на просто очередной миф, и ноиндекс есть ноиндекс, т.е. Яша не видит текст (ссылку) заключенный в него.

Атрибут NOFOLLOW появился в январе 2005-го года как продукт борьбы со спамом в комментариях по инициативе Google. Его поддержку тогда сразу же объявили Yahoo и MSN/Bing. Спустя пять лет, в начале мая 2010 года, nofollow поддержал и Яндекс.

Атрибут nofollow предназначен для закрытия от индексации ссылок как для Гугла, так и для Яндекса. Он используется для того, чтобы не передавать вес со ссылающегося сайта на ссылаемый. Атрибут “nofollow” запрещает поисковой системе переходить по ссылкам на данной странице или по конкретной ссылке. Изначально атрибут nofollow использовался в метатеге уровня страницы и запрещал поисковым системам сканировать все внешние ссылки на этой странице. Например:

До т

| HTML | WebReference

Поисковый робот Яндекса «ходит» по сайтам, просматривает и анализирует их содержимое, после чего сохраняет указатель на текст и изображения в поисковую базу данных Яндекса. Такой процесс называется индексированием. Часть веб-страницы можно закрыть от индексирования, поместив её внутрь элемента <noindex>. Тогда при следующем посещении веб-страницы поисковый робот проигнорирует такое содержимое и не станет добавлять его в свою базу данных. Это делается по разным причинам, к примеру, закрытые от индексации ссылки не передают ТИЦ (тематический индекс цитирования).

Важно понимать, что это нестандартный элемент и придуман Яндексом для своих целей. Браузеры никак не поддерживают <noindex> и просто выводят его содержимое как обычно.

Если вам нужно закрыть ссылку для поисковиков, добавьте к ней атрибут rel со значением nofollow:

<a href="//webref.ru" rel="nofollow">Ссылка не индексируется</a>

Если требуется закрыть для поисковиков всю страницу используйте элемент <meta>, добавив его в код HTML:

<meta name="robots" content="noindex">

Или добавьте в файл robots.txt следующую строку:

Disallow: /private.html

Где private.html адрес страницы.

Закрывающий тег

Пример

<!DOCTYPE html> <html> <head> <meta charset=»utf-8″> <title>noindex</title> </head> <body> <noindex> <p>Данный текст Яндекс не будет индексировать.</p> </noindex> </body> </html>

Браузеры

В таблице браузеров применяются следующие обозначения.

•  — элемент полностью поддерживается браузером;
•  — элемент браузером не воспринимается и игнорируется;
•  — при работе возможно появление различных ошибок, либо элемент поддерживается с оговорками.

Число указывает версию браузреа, начиная с которой элемент поддерживается.

Автор и редакторы

Автор: Клим Щербаков

Последнее изменение: 28.02.2020

Редакторы: Влад Мержевич

Как правильно использовать noindex и nofollow

Грамотное использование тегов  noindex и nofollow — важная составляющая правильной seo-оптимизации страниц сайта.

Пренебрегать их использованием не стоит, так как ноуиндекс и ноуфоллоу играют важную роль в передачи веса сайта, а так же делают ваш ресурс более привлекательным в «глазах» как добавить сайт в сервис Яндекса  и Google. 

Noindex

Сразу стоит сказать, что теги <noindex></noindex> учитываются только поисковой системой яндекса, Гугл просто их не замечает. Ноуиндекс применяют для сокрытия от ян-са, а точнее для запрета индексации какого-то участка html- кода.

Помещённый текст между <noindex> и </noindex> не будет проиндексирован. Ссылки же и картинки закрыть не получится, с ними он не работает и они попадут в индекс.

Тег <noindex> считается не валидным и многие html-редакторы его просто выбрасывают. В таком случае его надо прописывать как <!— noindex —> и <!— /noindex —>, в этом виде он становиться вполне для них съедобен и валиден.

Весь текст после открывающего тега <noindex> не будет проиндексирован, поэтому (если есть необходимость) не забывайте нужные участки текста закрывать тегом </noindex>.

Ноуиндекс можно использовать, когда необходимо спрятать от яндекса ненужные «загрязняющие» страницы части html-кодов:

• не уникальный или повторяющийся контент

• вставленные цитаты с других источников

• различные формы- рассылки, подписки, почта

• закрыть ненужные неприличные слова

    

Nofollow – это атрибут тега <a>, запрещающий индексацию и передачу веса по ссылке поисковиком Google, и так же учитывается Яндексом. Хотя на счёт ян-кса существуют и другие мнения.

Пример написания ноуфоллоу в ссылке: <a href=»http://kakoyto.ru» rel=»nofollow»>текст ссылки</a>.

Nofollow применяют:

• чтобы запретить передачу веса по ссылке на сайт с плохой репутацией у поисковиков

• чтобы не переносить вес на не соответствующий тематике ресурс

• для уменьшения общего количества исходящих ссылок со страницы

• когда нежелательно передавать вес на супер-сайты с очень большим ТИЦ и PR

• закрыть ссылки в комментариях, когда это не нужно

   

 Некоторые оптимизаторы применяют совместное использование noindex и nofollow, заключая ссылки в оба тега. На мой взгляд это не эффективно, так как ноуфоллоу запрещает перенос веса, а добавление ноуиндекс закроет лишь текст ссылки — анкор от индексации яндексом, что не имеет никакого смысла.

В заключении стоит сказать, что применение того или иного тега, не гарантирует, что поисковые системы полностью будут следовать этим указаниям. Хозяин — барин…

***

• < Назад
• Вперёд >

Тег noindex, валидный метатег, что значит запрещен к индексированию, настройки

Тег noindex служит для обозначения фрагментов текста, запрещенных для индексирования поисковой системой Яндекс.
Тег введен в оборот системой яндекс и используется только ей и, возможно, Рамблер.
Google его не понимает и никак не учитывает.

Первоначально, чтобы закрыть часть текста от индексации, нужно было обернуть его, как указано ниже:

<noindex>текст, закрытый от индексации</noindex>

Поскольку тег не является частью утвержденных стандартов, возникают проблемы валидации страницы при ее проверке в любом сервисе проверки валидностью кода html.

Из-за этого яндекс ввел другую версию тега вида <!–noindex–>неиндексируемый текст<!–/noindex–>. При таком использовании страница нормально проходит проверку. Первый вариант также до сих пор работает, но более правильно использовать второй вариант.

Применять данный тег можно, например, чтобы закрыть счетчики, комментарии. Но нет смысла закрывать, например, меню в целях перераспределения ссылочного веса на сайте.

Передача веса закрытой ссылке

Тег закрывает от индексации только текст, заключенный в него, но не влияет на индексирование ссылок внутри этого текста и передачу веса по ним. Для закрытия ссылки нужно использовать атрибут rel=”nofollow”, как писал здесь.

Метатег noindex

Метатег в коде страницы вида:

<meta name=»robots» content=»noindex,nofollow»/>

запрещает от индексации содержимое всей страницы (за это отвечает noindex), а также индексацию ссылок на этой страницы (за это отвечает nofollow).

Для массового проставления данного метатега, например, для архивов и других таксономий в wordpress можно использовать плагин Yoast SEO. В нем можно прописать метатеги в том числе и для отдельных страниц.

В robots.txt тег noindex не работает и не используется.

Сообщение – url запрещен к индексированию тегом noindex

В некоторых случаев вебмастер яндекс выдает сообщение, что адрес страницы, например, главной запрещен от индексации. Это значит, что на странице появился обнаружен этот метатег. Чаще всего такое бывает в двух случаях. Когда создавали сайт, то указали настройку “Попросить поисковые системы не индексировать сайт” на время разработки. Теперь нужно просто убрать эту пометку и отправить сайт в вебмастере на перепроверку. Или второй вариант – у вас стоит SEO плагин вроде Yoast Seo, в настройках которого вы указали запрет индексации, соответственно теперь его нужно убрать.

Нужно ли использовать тег NOINDEX и зачем? — Devaka SEO Блог

23.6К просмотров

В последнее время, анализируя проблемные сайты клиентов, часто сталкиваюсь с тем фактом, что многие из них активно используют тег <noindex> для скрытия части контента от Яндекса. Для тех, кто не знаком с этим тегом, привожу ссылку на документацию. Как там указано, он предназначен для запрета индексирования служебных участков текста.

Стоит заметить, что в документации указан ответ на вопрос “как использовать этот тег”, но совсем не сказано “зачем он введён”. Отчасти, это и является причиной возникновения многих вопросов от вебмастеров.

Если мы поищем в Google ответ на вопрос какая польза от тега noindex или любые рекомендации от сотрудников Яндекса по этому поводу, то ожидаемого ответа на вопросы, зачем он всё-таки был введён и в каких случаях его рекомендуется использовать, мы не получим. Сотрудники Яндекса не берут на себя ответственность в подобных рекомендациях, но при этом и не запрещают использовать noindex в своих целях.

Какие были преимущества у этого тега?

1. Можно было закрыть блок внешних ссылок от индексации (как это делает, например, студия Артемия Лебедева в легендарном смайлике).

Действительно, удобно было закрывать таким способом немодерируемые ссылки, в том числе и в комментариях. Но после введения Яндексом возможности использовать rel=nofollow, как это делают другие крупные поисковые системы, можно смело отказаться от тега noindex, если он использовался только для закрытия внешних ссылок.

2. Можно управлять сниппетом (описанием сайта) в поисковой выдаче.

Так как Яндекс не всегда умеет формировать из контента страницы хорошие сниппеты для своей выдачи, оптимизаторы нашли выход использовать <noindex>, подбирая оптимальные варианты. Кто из вас так делает? Наверняка меньшинство, так как это трудная и долгая работа. Вместо того, чтобы решить проблему на своей стороне (в алгоритмах), Яндекс предлагает решать проблему вебмастерам. Кстати, в Google нет подобного тегу noindex функционала 😉

3. Для Google показывать одно, для Яндекса – другое!

Тегом <noindex> вебмастера пытались оптимизировать контент сайта и для Яндекса (от которого надо было спрятать некоторые участки кода) и для Google, используя совместно другие техники. Не это ли является явным манипулированием поисковыми алгоритмами или подменой контента, против которой так яро борятся яндексоиды? 🙂

4. Подбирать оптимальную плотность ключевых фраз.

Доходит до того, что в тексте оптимизаторы лишние фразы закрывают этим тегом, чтобы Яндекс не счел этот текст спамным. При этом, для посетителей он-таки часто остаётся спамным 🙂 Отсюда и корни большинства бед в SEO, а нужно было лишь дать оптимизаторам этот тег. С другой стороны, Яндекс всегда может узнать по таким маркерам, работал ли с текстом оптимизатор или это нормальный контент.

Кстати, Яндекс не рекомендовал использовать noindex для подбора оптимальной плотности ключевиков, это уже происки оптимизаторов (об этом яндекс и не мог подозревать при введении поддержки тега), зато он активно пессимизирует документы, где часто встречается этот тег.

5. Закрывать счетчики и баннеры.

Экономя на каждой ссылке, вебмастера закрывали в noindex и счетчики посещаемости. Прошло много лет, сейчас Яндекс прекрасно понимает, где что у вас расположено на сайте (в том числе и счетчики). Закрывать их от индексации смысла нет, лучше убрать всё неиспользуемое.

Как мы видим, <noindex> используется лишь оптимизаторами и всё, для чего используется это не попытка сделать ресурс лучше, а попытка управлять поисковым алгоритмом в свою сторону, хотя это и не всегда получается. Также все рекомендации, присутствующие в сети по использованию noindex даны оптимизаторами и ни одной от А.Садовского или И.Сегаловича.

Учитывая всё вышеперечисленное, настоятельно не рекомендуется использовать инструмент серой оптимизации noindex, особенно если он раньше не использовался на сайте и существуют дополнительные проблемы с ресурсом (фильтры, подмена релевантной страницы, и другие).

И ещё… У яндекса нет ни одной причины продолжать поддерживать тег noindex (разве что “не трогать то, что работает”). После ввода поддержки атрибута nofollow для ссылок, сложно понять мотив яндексоидов оставить noindex. Возможно, скоро его поддержка будет прекращена.

Таков мой взгляд на однобокий тег noindex. А что вы думаете по этой теме?

Использование тега noindex и атрибута nofollow. Отличие noindex и nofollow.

Правильное использование тега noindex и атрибута nofollow — самый первый шаг в грамотной оптимизации. Ведь noindex и nofollow играют огромную роль при передаче веса с одной страницы сайта на другую. Тег noindex используется для запрета индексации какой-то части html-кода страницы. Тег noindex не является валидным, поэтому некоторые html-редакторы отказываются его воспринимать. Ноиндекс воспринимается исключительно поисковиком Яндексом, а Гугл на него никак не реагирует.

Не стоит путать обычный тег с мета-тегом noindex, прописываемым вначале страницы, их задачи разные. Простой тег запрещает для индексации только ту часть кода страницы, которая находится между открывающимся и закрывающимся тегами. Что же касается мета-тега, то он запрещает индексировать всю страницу (запрет прописывается в файле robots.txt) — такую ​​страницу Яндекс вообще не индексирует.

Тег работает безотказно: вся текстовая информация внутри него не попадает в индекс яндекса.Однако некоторые оптимизаторы утверждают, что порой текст внутри ноиндекс индексируются — увы, такое действительно бывает. Дело в том, что Яндекс все же индексирует весь html-код, даже тот, что внутри тега, но потом проводит фильтрацию. В начале служебного фрагмента поставьте — , а в конце — , и Яндекс не будет индексировать данный участок текста. Тег noindex не чувствителен к вложенности.

Используя открывающийся тег (), не забудьте поставить закрывающийся — (), иначе весь текст, следующий после не будет проиндексирован.

тег noindex не входит в официальную спецификацию языка HTML, большинство HTML-валидаторов считает его ошибкой. Для того, чтобы сделать код с noindex валидным, рекомендуется использовать следующую конструкцию:

   Ссылка не индексируется   

  Disallow: /private.html