Crawler oder auch Webcrawler sind Programme, die das Internet durchsuchen und Daten analysieren. Vor allem Suchmaschinen nutzen diese, um Websites zu erfassen und zu bewerten. Hier werden häufig auch die Begriffe Searchbot oder Spider verwendet.
« Zurück zur Glossar Übersicht