المعروف أيضًا باسم الزاحف أو العنكبوت ، أ رجل الالي هو برنامج محرك بحث يقوم "بالزحف" إلى الويب ، وجمع البيانات ، وتتبع الروابط ، وعمل نسخ من المواقع الجديدة والمحدثة ، وتخزين عناوين URL في فهرس محرك البحث. يتيح ذلك لمحركات البحث تقديم قوائم أسرع وأكثر حداثة.
