Begin main content

Webroboter

Ein Webroboter (engl.: search bot, web crawler) ist ein Hilfsprogramm einer Suchmaschine, das sytematisch Information aus dem Internet zu sammelt. Aus den gesammelten Inhalten wird die Metainformation, wie Titel, Erstellungsdatum, Datum der letzten Änderung erfasst und der Inhalt der gefundenen Dokumente analysiert und der Suchmaschine zur Indizierung übergeben.

Mehr dazu in: Kapitel 6