Conosciuto anche come Crawler o Robot, a ragno è un programma del motore di ricerca che "scansiona" il Web, raccogliendo dati, seguendo collegamenti, facendo copie di siti nuovi e aggiornati e memorizzando URL nell'indice del motore di ricerca. Ciò consente ai motori di ricerca di fornire elenchi più rapidi e aggiornati.