RE: Cookies für Bots/Crawler
es gibt ja die funktion „Cookies für Bots/Crawler“. nach welchen kriterien stuft borlabs einen zugriff als bots/crawler ein ? wird eine messung über gtmetrix/pingdom etc. so eingestuft ?
Dabei wird der Browser-Agent ausgewertet. Anhand der Keywörter Crawler, Spider, Bot oder auch Lighthouse, wird er als Bot gewertet.