| worldname | Дата: Вторник, 2011-09-27, 16:58 | Сообщение # 1 |
Генералиссимус
Группа: lown
Сообщений: 202
Статус: Offline
|
Бот - так называют поискового робота. Бот, он же Web crawler, он же паук. Поисковые роботы являются одной из главных составляющих поисковой системы. В задачу входит сбор и обход страниц интернета, а так же получение и занесение информации в поисковую базу.
На самом деле разновидностей как самих ботов, так и задач выполняемых ими очень много. Одни работают с текстами, другие с картинками, третьи с новостями, четвертые прослушивают сайт на доступность, пятые проверяют изменения на проиндесированных страницах и так далее
Все что касается индексации сайта напрямую связанно с работой поисковых ботов
|
| |
|
|
