x-роботы, невидимые директивы

Плохо известная функция для поисковых систем, которая может удивить веб-мастеров, потому что она не отображается в содержании страниц, но имеет тот же эффект, что и мета-тег.

Потому что стало возможным помещать внешние ссылки в нофоллоу совершенно незаметно, тем более что она может быть даже выборочной и работать только с роботами от Google! Что, кстати, делает инструменты для обнаружения нофоллоу, такие как расширение SeoQuake для Firefox, неработающими и вводящими в заблуждение.

Нофоллоу

Напомним, что атрибутом nofollow является игнорирование внешней ссылки Google. Этот атрибут можно добавить к тегу ссылки:

<a href="xxxx" rel="nofollow">Lien</a>

Она также может применяться ко всей странице, если она имеет метку:

<meta name="robots" content="nofollow">

Этот тег используется для страниц, которые не индексируются поисковиками, таких как регистрационные формы, правовая информация и другие.

x-роботы

Именно в этом и заключается важность директивы X-Robots.

В PHP она может написать себя

header(’X-Robots-Tag: noindex, nofollow’, true);

А в файле .htaccess это можно включить в правило:

Header set X-Robots-Tag "nofollow"

В обоих случаях маневр совершенно необнаружим для пользователя или программного обеспечения для отчетности nofollow.

Последствия...

Обмен ссылками на футбол или контент позволяет сайтам получить искусственную популярность. Google может оштрафовать сайт за это.

При обмене ссылками переданное значение PageRank, как правило, отменяется, если ссылки многочисленны и взаимны, но если один из партнеров помещает ссылки на другой сайт в nofollow, он извлекает выгоду.

Причина придерживаться естественных связей, которые действительно полезны посетителям, потому что они дополняют статью.

Google объявляет о поддержке X-роботов. В частности, свойства noindex, noive, nosnippets и период доступности.

См. также Руководство по руководству по двигателям.