Как известно нестандартный тег noindex был введен в обиход популярной российской поисковой системой Яндекс.
С помощью него веб-программисты могли закрыть от индексирования часть интернет-странички. Тег использовался, чтобы скрыть от поисковых машин письма, комментарии, ссылки читателей.
Однако алгоритмы поиска Яндекса постепенно совершенствовались, и теперь поисковик может спокойно отличить, где на странице область, за которую отвечает разработчик, а где письма и ссылки читателей.
Благодаря нововведению хитрости с сокрытием нежелательного контента стали просто невозможны. С другой стороны, отмена тега привела к увеличению проиндексированных сайтов.
Тег rel=nofollow был введен основным конкурентом Яндекса – компанией Google. В основном он предназначался для поддержки развития нового поколения интернета Web 2.0. C помощью него веб-мастера отделяли свои ссылки от ссылок читателей, а поисковая машина не учитывала вес читательских ссылок. Сделано это было для того, чтобы пресечь возможность продвижения сайтов с помощью ссылок в спамных сообщениях.
В Яндексе решили пойти навстречу конкуренту и ввели поддержку rel=nofollow. Однако одновременно с этим в Google отказались от него – и в этом весь парадокс ситуации. Как сообщил представитель Гугла, их компания теперь может проверять ссылки на качество с помощью более надежных методов.