Web Crawler

Bot, Spider: Softwareprogramme, die das Web scannen – z. B. um Keywords zu finden, Webseiten zu indexieren (Suchmaschinen), Content zu aktualisieren, spezielle Daten zu sammeln (Web-Scraping), …