Software automatico che senza sosta esamina tutte le pagine di tutti i siti Internet che riesce a raggiungere per registrarne l'indirizzo, una breve descrizione tratta dal suo contenuto e per effettuarne l'indicizzazione in un motore di ricerca.
Spesso lo spider utilizza vari agenti crawler.