Один з варіантів назви автоматизованих програм браузерного типу ( роботів ) пошукових систем, Що займаються занесенням сайтів в їх БД (індексуванням).

У перекладі з англ. « crawler » – « гусениця ».

Також часто використовуються позначення: бот, Спайдер, павук, spider, Краулер, мураха, ant і ін.

В « обов'язки » краулерів входить виявлення нових невідомих пошуковику веб-сайтів з подальшим внесенням їх інформаційного вмісту в кеш пошуковика для участі в пошукових видачах. також боти займаються регулярними відвідинами сайтів, які вже перебувають в базі даних ( БД ) пошукової системи, для виявлення змін на їх сторінках і занесення в кеш оновлених даних.

Новим сайтам, які ще жодного разу не індексувалися краулерами, необхідно привернути їхню увагу для того, щоб почати просування в пошукових системах. Для цього зазвичай досить розмістити кілька зворотних посилань на ресурсах, які вже перебувають в індексі, або повідомити пошуковику про новий сайт за допомогою функції «AddUrl».