5.3 Aktuelle Inhalte -- Web crawler steuern bei der Website optimierung
User Agent
Als User Agent bezeichnet man den Namen mit dem sich ein Programm beim Anfordern eines Dokuments
beim Webserver anmeldet.
Dieser Name wird durch den Http Header übermittelt. Durch diese Kennung können Software Programme und
Suchmaschinen-Roboter
identifiziert werden.
Dies kann sehr hilfreich beim auswerten von Logfiles für die Zugriffsstatisitken
der Website sein, da man an der Kennung des Usaer Agents genau erkennen kann wann ein Suchmaschinen-Crawler
die Website indexiert hat.
Allerdings können sich Roboter auch als andere User Agents tarnen (da die Kennung völlig frei
gewählt werden darf). So können Suchmaschinen
Roboter dem Webserver z.B. eine Browser Kennung "vorgaukeln" und inkognito die Website überprüfen. Da
der Suchmaschienn Roboter so nicht als Robot sondern als normaler Browser erkannt wird,
kann der Crawler so überprüfen ob Suchmaschinen und Usern unterschiedliche Inhalte präsentiert werden
und so SPAM-Websites identifizieren.
weiterführende Links
SEO - LexikonMehr User durch Suchmaschinen
Zur Startseite:
Ranking durch User-Bindung
copyright© by ranking-abc.de