Индексация в поисковых системах: различия между версиями

[отпатрулированная версия][отпатрулированная версия]
Содержимое удалено Содержимое добавлено
Нет описания правки
м Bot: HTTP→HTTPS (v465)
Строка 8:
Для управления индексацией (например, запрета индексации той или иной страницы) используется файл [[Стандарт исключений для роботов|robots.txt]] и такие директивы как Disallow, Allow, User-agent, Crawl-delay и другие. Также, для управления индексацией применяют теги [[Noindex|<noindex>]] и атрибут [[Nofollow|<nofollow>]], закрывающие содержимое сайта от роботов [[Яндекс]]а и [[Google (поисковая система)|Google]] соответственно ([[Yahoo]] использует тег <nofollow>).
 
Скорость индексации новых сайтов в поисковой системе Яндекс занимает от одной недели до четырех недель<ref>{{Cite web|url = httphttps://www.youtube.com/watch?v=8Af2RExBldc|title = Индексация сайтов в Яндекс|author = |work = |date = |publisher = }}</ref>, в Google — от нескольких минут до одной недели<ref>{{Cite web|url = httphttps://www.youtube.com/watch?v=wQK2zaslSlQ|title = Индексация сайтов в Google|author = |work = |date = |publisher = }}</ref>.
 
== Методы ==