Robot

Robot ist ein anderer Begriff für Webcrawler und Spider, das sind Programme, die neue Daten im Internet suchen. Selbstverständlich hat jede größere Suchmaschine ihre eigenen Robots. Diese sind immer im Internet unterwegs um Internetseiten zu crawlen. Damit Webseiten in den Datenbestand der Suchmaschinen aufgenommen werden können, erfassen die Robots deren Inhalte. Beschleunigt werden kann dieser Vorgang durch eine Anmeldung bei einer Suchmaschine. In der Regel arbeitet der Robot selbständig im Netz. Dabei verfolgt er selbständig den Link und kann auf die neue Webseite auf diese Art finden.