Was ist ein Googlebot?
Aussprache: /ˈɡuːɡlbɒt/
Definition: Der Googlebot ist der Crawler der Suchmaschine Google. Spider, Bots oder auch Crawler genannt sind Programme, die das World Wide Web nach neuen Inhalten durchsuchen. Die Suchmaschine Google hat ihren Bot die Kennung “Googlebot” gegeben. Über die Robots.txt Datei lässt sich das Verhalten des Bots steuern.
