Поисковый робот: различия между версиями
| [непроверенная версия] | [отпатрулированная версия] |
Содержимое удалено Содержимое добавлено
Нет описания правки |
AKA MBG (обсуждение | вклад) нет АИ |
||
Строка 7:
Также многие поисковые системы предоставляют пользователю возможность самостоятельно добавить сайт в очередь для [[индексация в поисковых системах|индексирования]]. Обычно это существенно ускоряет индексирование сайта, а в случаях, когда никакие внешние ссылки не ведут на сайт, вообще оказывается практически единственной возможностью указать на его существование. Еще одним способом быстрой индексации сайта является добавление на сайт систем веб-аналитики. Например, таких как [[Google Analytics]] и [[Яндекс.Метрика]].
Ограничить индексацию сайта можно с помощью файла [[robots.txt]], все индексирующие боты современных поисковых систем его учитывают{{нет АИ|13|09|2013}}. Полная защита от индексации может быть обеспечена другими механизмами, например установкой пароля на странице либо требованием заполнить регистрационную форму перед тем, как получить доступ к содержимому.
== См. также ==
| |||