Die Informationen zum Internetbrowser, dem Betriebssystem und die IP-Adresse schickt jeder Browser automatisch mit.
Die Interseiten können dadurch bei Bedarf an den jeweiligen Browser angepasst werden.

Die Information von Ihrem Browser lautet:

CCBot/2.0 (https://commoncrawl.org/faq/)