Поисковый робот (веб-паук, веб-краулер, бот)

Определение

Поиско́вый ро́бот (веб-пау́к, веб-краулер, бот) — программа, являющаяся составной частью поисковой системы и предназначенная для перебора страниц Интернета с целью занесения информации о них в базу данных поисковика.

Связанные термины: Интернет (глобальная сеть, всемирная сеть, сеть, Internet)  Веб-страница (web page)  Поисковая система 

Материалы позаимствованы с сайта "Википедия" или других открытых источников информации.

Логотип ООО «Инфра»
Не знаете с чего начать?
Опишите в свободной форме нам свои бизнес-задачи, и мы предложим проверенные решения