Egy automatizált program, amely megkeresi az interneten, az új webes dokumentumok és helyezi a címét és a tartalomhoz kapcsolódó adatokat egy adatbázis, melyik lehet kitört egy keresőmotor. Általában úgy tekintenek, hogy egyfajta bot, illetve Internet robot.