Поисковый робот – это программа, которая «ходит» по Сети и формирует список URL-адресов с различной информацией (поисковый индекс). После формирования этого списка в дело вступает индексирующий робот. Его цель – сканировать информацию, которая находится в том или ином документе, чтобы проверить ее на соответствие запросу пользователя. Затем поисковая система принимает решение, какой именно документ и на какой позиции выводить в ответ на запрос.
Библия интернет-маркетолога 2.0
·
Иван Барченков