Googlebot este un bot de căutare folosit de Google. Colectează documente de pe web pentru a construi un index care poate fi căutat pentru motorul de căutare Google. Dacă un webmaster dorește să restricționeze informațiile de pe site-ul său disponibile unui robot Google sau unui alt păianjen bine comportat, poate face acest lucru folosind directivele corespunzătoare într-un fișier robots.txt.
