Was ist adsbot-google?
indexiert und analysiert Inhalte von Webseiten.
Der Webrobot adsbot-google indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 108.177.2.65 und unter Verwendung des User Agent AdsBot-Google (+http://www.google.com/adsbot.html). Mit 0.007% Marktanteil ist adsbot-google auf Platz 96 der aktivsten Webrobots im Internet.
„See which robots Google uses to crawl the web“Crawler“ is a generic term for any program (such as a robot or spider) that is used to automatically discover and scan websites by following links from on"
— Offizielle Beschreibung des Betreibers
Technische Einordnung von adsbot-google
adsbot-google wurde in Webserver-Logs als Bot oder Crawler erkannt. Die wichtigsten technischen Hinweise findest du auf dieser Seite: bekannte User-Agents, beobachtete IP-Adressen, Aktivitätsdaten und passende robots.txt-Regeln.
Für eine konkrete Entscheidung solltest du zusätzlich prüfen, welche URLs adsbot-google abruft, wie häufig die Zugriffe sind und ob der Bot deine robots.txt-Regeln respektiert.
Gefahreneinschätzung und Bewertung
Sollte man adsbot-google blockieren?
Prüfe zuerst Zugriffshäufigkeit, aufgerufene URLs und User-Agent. Danach kannst du entscheiden, ob eine Blockierung sinnvoll ist.
robots.txt – adsbot-google blockieren
Füge diese Zeilen in deine robots.txt ein, um adsbot-google den Zugriff auf deine Website zu verwehren:
User-agent: adsbot-google
Disallow: /
Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
User-agent: adsbot-google
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /
Häufige Fragen zu adsbot-google
Ist adsbot-google gut oder schlecht?
Das hängt vom Einsatzzweck ab. adsbot-google ist als Web-Crawler eingeordnet. Entscheidend sind Nutzen, Serverlast, Crawl-Verhalten und ob der Bot deine robots.txt-Regeln respektiert.
Wie erkenne ich adsbot-google in Server-Logs?
Suche nach dem User-Agent-Namen adsbot-google. Ein beobachteter User-Agent ist AdsBot-Google (+http://www.google.com/adsbot.html). Vergleiche ausserdem IP-Adressen, Zugriffsmuster und aufgerufene URLs.
Reicht robots.txt zum Blockieren?
robots.txt ist ein Hinweis für regelkonforme Crawler. Unerwünschte oder aggressive Bots können diese Regeln ignorieren. In solchen Fällen helfen zusätzlich Firewall-Regeln, WAF-Regeln oder Blockierungen im Hosting/CDN.
Kann ein Bot seinen User-Agent fälschen?
Ja. Ein User-Agent ist leicht zu fälschen. Für wichtige Entscheidungen solltest du zusätzlich IP-Adresse, Reverse-DNS, Zugriffsmuster, Häufigkeit und aufgerufene URLs prüfen.
IP-Adressen 171 bekannte IPs
Diese IP-Adressen wurden bisher von adsbot-google verwendet:
108.177.2.65
108.177.2.66
108.177.2.67
209.85.238.10
209.85.238.22
209.85.238.54
209.85.238.63
209.85.238.64
209.85.238.8
66.249.87.104
66.249.87.146
66.249.87.148
66.249.87.150
66.249.87.18
66.249.87.2
66.249.87.20
66.249.87.22
66.249.87.3
66.249.87.4
66.249.87.50
66.249.87.52
66.249.87.58
66.249.89.10
66.249.89.12
66.249.89.127
66.249.89.13
66.249.89.14
66.249.89.146
66.249.89.148
66.249.89.150
66.249.89.2
66.249.89.200
66.249.89.202
66.249.89.204
66.249.89.210
66.249.89.212
66.249.89.214
66.249.89.219
66.249.89.22
66.249.89.235
66.249.89.24
66.249.89.26
66.249.89.33
66.249.89.35
66.249.89.36
66.249.89.39
66.249.89.42
66.249.89.5
66.249.89.50
66.249.89.52
66.249.89.54
66.249.89.60
66.249.89.62
66.249.89.64
66.249.89.66
66.249.89.74
66.249.89.76
66.249.89.84
66.249.89.86
66.249.89.87
66.249.89.90
66.249.89.92
66.249.89.93
66.249.89.94
66.249.89.95
66.249.89.96
66.249.89.98
66.249.90.101
66.249.90.104
66.249.90.106
66.249.90.109
66.249.90.112
66.249.90.113
66.249.90.115
66.249.90.118
66.249.90.119
66.249.90.121
66.249.90.26
66.249.90.32
66.249.90.33
66.249.90.54
66.249.90.72
66.249.90.80
66.249.90.89
66.249.91.104
66.249.91.105
66.249.91.112
66.249.91.113
66.249.91.12
66.249.91.120
66.249.91.124
66.249.91.125
66.249.91.127
66.249.91.174
66.249.91.176
66.249.91.178
66.249.91.180
66.249.91.183
66.249.91.190
66.249.91.207
66.249.91.50
66.249.91.52
66.249.91.65
66.249.91.66
66.249.91.67
66.249.91.71
66.249.91.72
66.249.91.78
66.249.91.80
66.249.92.104
66.249.92.11
66.249.92.110
66.249.92.112
66.249.92.116
66.249.92.118
66.249.92.123
66.249.92.124
66.249.92.13
66.249.92.200
66.249.92.210
66.249.92.212
66.249.92.214
66.249.92.217
66.249.92.22
66.249.92.28
66.249.92.34
66.249.92.36
66.249.92.43
66.249.92.44
66.249.92.52
66.249.92.55
66.249.92.56
66.249.92.59
66.249.92.63
66.249.92.64
66.249.92.69
66.249.92.71
66.249.92.74
66.249.92.75
66.249.92.77
66.249.92.79
66.249.92.80
66.249.92.82
66.249.92.83
66.249.92.84
66.249.92.85
66.249.92.91
72.14.199.104
72.14.199.110
72.14.199.112
72.14.199.116
72.14.199.118
72.14.199.124
72.14.199.156
72.14.199.162
72.14.199.18
72.14.199.188
72.14.199.191
72.14.199.36
72.14.199.43
72.14.199.52
72.14.199.53
72.14.199.63
72.14.199.69
72.14.199.71
72.14.199.75
72.14.199.77
72.14.199.83
72.14.199.84
74.125.216.163
74.125.216.164
User Agents
Mit diesen User-Agent-Strings identifiziert sich adsbot-google:
AdsBot-Google (+http://www.google.com/adsbot.html)AdsBot-Google ( http://www.google.com/adsbot.html)Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; AdsBot-Google-Mobile; http://www.google.com/mobile/adsbot.html)AdsBot-Google-Mobile ( http://www.google.com/mobile/adsbot.html) Mozilla (iPhone; U; CPU iPhone OS 3 0 like Mac OS X) AppleWebKit (KHTML, like Gecko) Mobile Safari