crawler

Een spider van het eerste uur die het internet afstruint naar toegankelijke bestanden, voor persoonlijk gebruik of voor een zoekmachine. Nu ook een algemene naam.

CRAWLER

Ook wel Wanderer, spider of ant genoemd. Een programma dat over het internet "kruipt" op zoek naar nieuwe, openbaar toegankelijke bronnen, zoals World Wide Web-documenten, bestanden die in FTP-archieven toegankelijk zijn en Gopher-documenten. Spiders zijn alleen al noodzakelijk vanwege de enorme groei van het informatieaanbod. Spiders worden ook wel crawlers genoemd. De spider van de zoekmachine AltaVista heet Scooter en die van HotBot heet Slurp. Zie ook TRAP.