Индексация в поисковых системах: различия между версиями
[непроверенная версия] | [непроверенная версия] |
Содержимое удалено Содержимое добавлено
X7q (обсуждение | вклад) м ← Откат правок 93.85.24.78 (обс) к версии X7q |
|||
Строка 6:
Для управления индексацией (например, запрета индексации той или иной страницы) используется файл robots.txt и такие директивы как Disallow, Allow, User-agent, Crawl-delay и другие. Также, для управления индексацией применяют теги [[Noindex|<noindex>]] и [[Nofollow|<nofollow>]], закрывающие содержимое сайта от роботов Яндекса и Google соответственно (Yahoo использует тег <nofollow>).
== Методы ==
|