Запросите коммерческое предложение
ГлавнаяГлоссарий терминовПоисковый робот

Поисковый робот

Программа, которая является составной частью поисковой машины. В ее функции входит посещение страниц Интернета с целью занесения их в базу поисковика. Алгоритмы программы задают порядок обхода страниц сайтов, частоту визитов и т.п. Запретить индексацию (т.е. работу поискового робота) всего сайта или его части можно, используя файл robots.txt, он содержит инструкции для поисковых роботов.

Контакты
+38 (044) 238 8475
02002, Украина, Киев
ул. Раисы Окипной, 4, офис 81