En automatiseret program, der søger på internettet for nyt webdokumenter og placerer deres adresser og indhold-relaterede oplysninger i en database, som kan tilgås med en søgemaskine. Generelt anses for at være en form for bot eller Internet robot.