A ловушка для пауков представляет собой бесконечный цикл, в который может попасться паук, если он исследует динамический сайт, на котором URL-адреса страниц постоянно меняются. Например, домашняя страница может иметь другой URL-адрес, и поисковая машина не сможет определить, что это домашняя страница, которую она уже проиндексировала, но под другим URL-адресом. Если бы поисковые системы полностью индексировали динамические веб-сайты, они неизбежно имели бы большие объемы избыточного контента и загружали бы миллионы страниц.
