Yeni Web belgelerin Internet arama yapan ve adresleri ve içeriği ile ilgili bilgileri bir veritabanında, bir arama motoru ile erişilebilen yerler otomatik bir program. Genellikle bot veya Internet robot bir türü olarak kabul.