Freshbot

Freshbot ist ein Spider von Google, für neue aktuelle Inhalte. Kontinuierlich wird das Netz vom Freshbot auf neue Webseiten, Foren u.a. durchsucht. Die besuchte Seite wird der Aktualisierung entsprechend mit einem Index versehen. In relativ kurzen Abständen wird diese Seite wiederum vom Freshbot besucht und auf Aktualisierungen abgefragt. Werden beim erneuten Besuch der Seite keine Aktualisierungen erkannt, sinkt das Ranking im Index. Bleiben Aktualisierungen aus fallen die Seiten ganz aus dem Index. Sie tauchen jedoch in der Regel nach ein bis zwei Monaten, infolge der permanenten Treffer beim nächsten Googledance wieder im Hauptindex auf. Der Freshbot greift nur auf Text und HTML zu. Seiten mit anderen Formaten, wie Exel, PDF, Word, etc. werden nicht besucht. Der Freshbot erfasst (crawlt) nicht so gründlich. Er besucht in der Regel nur die Seiten die direkt mit der Seite verlinkt sind, die er zuerst findet. Freshbot sind an IP-Adressen aus dem 64.er und 66.er- Bereich zu erkennen.