Crawler | Spider

Een crawler of spider is een intelligente software agent die informatie van het internet verzameld zonder tussenkomst van een gebruiker. Crawlers of spiders worden bijvoorbeeld gebruikt door zoekmachines om het internet in kaart te brengen.