Произошли изменения в обработке директивы "Allow" файла robots.txt, с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.
По новым правилам, если страница сайта попадает под действие нескольких директив "Allow" и/или "Disallow", то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол " * " не учитывается.
Если на вашем сайте в robots.txt совместно используются директивы "Allow" и "Disallow", пожалуйста, проверьте их на соответствие новым стандартам. В этом вам поможет форма проверки robots.txt.
Подробнее об использовании директив вы можете прочитать в Помощи.
Изменениях в обработке директивы "Allow" файла robots.txt Яндексом.
Автор темы Сергей (ex-Gudvin), 09 мар 2012 10:32
В этой теме нет ответов
Количество пользователей, читающих эту тему: 0
0 пользователей, 0 гостей, 0 скрытых пользователей