|
||||||||
Sie sind hier:Suchmaschinen-Glossar auf » R » Robot |
||||||||
RobotRobots bewegen sich durch das Internet und lesen die Inhalte der Webseiten. Diese Inhalte werden später von den Suchmaschinen indexiert. Die Webseiten die vom Robot besucht werden wurden vorher bei der Suchmaschine anmeldet. Der Spider kann auch Links folgen und kommt dabei auf neue Seiten die nicht bei der Suchmaschine angemeldet wurden. Der Meta-Tag "robot" bestimmt wann der Spider auf die Webseite zurückkehren soll, im Falle dass die Webseite aktualisiert wurde. |
|