Web, Domain und E-Mail
Crawler
Kurz und einfach erklärt
Ein Crawler ist ein Programm. Es ruft Websites von selbst auf, folgt Links und liest die Inhalte ein.
Das macht er zum Beispiel für eine Suchmaschine.
Was ein Crawler gut lesen kann, lässt sich leichter erfassen. Es kommt dann auch leichter in die Ergebnisse einer Suche.
Definition
Ein Crawler ist ein Programm, das Websites automatisch aufruft, Verweisen folgt und Inhalte einliest, etwa für eine Suchmaschine. Was ein Crawler gut lesen kann, lässt sich leichter erfassen und in Suchergebnisse aufnehmen.