In deze lijst zitten meer dan 300 spiders. Deze lijst is niet volledig en zal
continu veranderen. Spiders zijn softwareprogramma's die het net afschuimen van link naar
link en alle pagina's die zij tegenkomen indexeren.
De lijst is freeware en kan door iedereen gebruikt worden. Vooral
netwerkbeheerders en webmasters
zullen deze informatie kunnen gebruiken voor het beheren van een robots.txt
Voor alle andere internetgebruikers is deze lijst vooral informatief.