Поисковые работы (краулеры, пауки) – специальные программы для обхода сайтов и записи полученной информации о них в базу данных ПС.
Различают несколько вариантов роботов: