Индексация в поисковых системах: различия между версиями

[непроверенная версия][непроверенная версия]
Содержимое удалено Содержимое добавлено
м Откат правок 93.85.24.78 (обс) к версии X7q
Строка 6:
 
Для управления индексацией (например, запрета индексации той или иной страницы) используется файл robots.txt и такие директивы как Disallow, Allow, User-agent, Crawl-delay и другие. Также, для управления индексацией применяют теги [[Noindex|<noindex>]] и [[Nofollow|<nofollow>]], закрывающие содержимое сайта от роботов Яндекса и Google соответственно (Yahoo использует тег <nofollow>).
== Ссылки ==
[http://www.raskruty.ru/tools/index/ Индексация сайта в поисковых системах]
 
== Методы ==