Crawler nennt man die Software, die von den Suchmaschinen eingesetzt wird, um die Websites systematisch zu untersuchen und zu indexieren. Dabei rufen die Crawler die Websites auf und folgen den Links auf den Seiten. Die dabei gesammelten Daten werden bei Google auf dem Server gesammelt und die Informationen dienen der Kategorisierung bei der Indexierung. Um der Suchmaschine das Crawling zu erleichtern, insbesondere bei ganz neuen Seiten und vielen Website-Aktualisierungen, stellt man die Sitemap zur Verfügung.

So funktioniert die Google Suche: www.google.de/insidesearch/howsearchworks/crawling-indexing.html

Twitter Facebook

Cookie-Einstellung

Bitte triff eine Auswahl. Weitere Informationen zu den Auswirkungen deiner Auswahl findest du unter Hilfe.

Triff bitte eine Auswahl um fortzufahren

Deine Auswahl wurde gespeichert!

Hilfe

Hilfe

Um fortfahren zu können, musst du eine Cookie-Auswahl treffen. Nachfolgend erhälst du eine Erläuterung der verschiedenen Optionen und ihrer Bedeutung.

  • Cookies zur Webanalyse mit Google Analytics zulassen.:
    Cookies z.B. Tracking- und Analytische-Cookies werden gesetzt.
  • Keine Cookies zulassen:
    Es werden keine Cookies gesetzt, es sei denn, es handelt sich um technisch notwendige Cookies.

Du kannst deine Cookie-Einstellung jederzeit hier ändern: Datenschutzerklärung.

Zurück