web crawler

Sustantivo
  1. Programa que navega e indexa automáticamente páginas web.
    Los motores de búsqueda usan web crawlers para recopilar información.