История тега NOINDEX достаточно интересна. С развитием коммерческих ссылок актуализировался вопрос возможности блокировки передачи индекса цитирования, наращиваемого за счет ссылочной массы. Для блокировки от учета поисковым роботом естественных внешних ссылок при ранжировании ресурса на страницах поисковой выдачи, компания Google презентовала REL=»NOFOLLOW» — атрибут ссылочного тега A. Яндекс же презентовал NOINDEX — тег, закрывающий от индексирования фрагменты текста на странице. Первоначально в NOINDEX помещали элементы страниц, содержащие внешние ссылки, однако, практичные для применения в рамках ресурса (такие как счетчики посещаемости, коды интеграции с сервисами подписки и социальными сетями). Со временем Яндекс начал учитывать атрибут REL=»NOFOLLOW» для ссылок, поэтому закрывать ссылки стало практичнее внутри ссылочного кода. В то же время тег NOINDEX никуда из функционала Яндекс не делся, тогда как в Google о такой разработке никто и не думал. На самом деле, а зачем закрывать текст от поисковиков? Далее мы приведем несколько примеров.
- Когда Яндекс запустили новое оружие против коммерческой поисковой оптимизации, под фильтр полетели многие сайты, контент которых был расценен как поисковой спам. Пытаясь выжить в столь тяжелых условиях, многие вебмастера попробовали закрыть от индексации определенный процент ключевых слов, встречающихся в текстах. Таким образом пользователям остались все те же переоптимизированные портянки, а вот поисковые системы уже увидели более чистый с машинной точки зрения контент.
- Некоторые вебмастера использовали тег NOINDEX для того, чтобы продвигать ресурс сразу по двум ведущим поисковым системам следующим образом: контент был разделен на оптимизированный под Яндекс и под Google. Тексты под Яндекс были открыты поисковым системам, а фрагменты статей под Google закрыты тегом NOINDEX, который поисковая система Google не учитывает. Соответственно, и здесь пострадало качество текстового контента.
Для чего еще мог использоваться тег NOINDEX? Кроме как в качестве манипулятора вниманием поискового робота в принципе больше никак, так как другие потребности в ограничении доступа к контенту сайта поисковым системам практичнее оказалось реализовывать либо через ROBOTS.TXT, либо через REL=»NOFOLLOW». В результате маркер NOINDEX так же появился в широком списке идентификаторов низкого качества контента Яндекс, а за такой текст предполагается наложение фильтров. Поэтому про тег NOINDEX сегодня уже точно можно забыть.