spiderbot

Der Webrobot spiderbot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 188.40.70.205 und unter Verwendung des User Agent Mozilla/5.0 (compatible; NetpeakSpiderBot/3.0; https://netpeaksoftware.com/spider). Mit 0.0001% Marktanteil ist spiderbot auf Platz 201 der aktivsten Webrobots im Internet.

12Zugriffe
0,000%Marktanteil
Feb. 2015Erstmals gesehen
28.03.2018Zuletzt aktiv

Was ist spiderbot?

indexiert und analysiert Inhalte von Webseiten.

Der Webrobot spiderbot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 188.40.70.205 und unter Verwendung des User Agent Mozilla/5.0 (compatible; NetpeakSpiderBot/3.0; https://netpeaksoftware.com/spider). Mit 0.0001% Marktanteil ist spiderbot auf Platz 201 der aktivsten Webrobots im Internet.

Betreiber & Risiko

? Risiko unbekannt
  • ℹ Keine öffentlichen Betreiber-Infos bekannt

robots.txt – spiderbot blockieren

Füge diese Zeilen in deine robots.txt ein, um spiderbot den Zugriff auf deine Website zu verwehren:

robots.txt 
User-agent: spiderbot
Disallow: /

Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:

robots.txt (selektiv) 
User-agent: spiderbot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /

IP-Adressen 6 bekannte IPs

Diese IP-Adressen wurden bisher von spiderbot verwendet:

188.40.70.205
FR 5.135.164.228
FR 5.135.165.89
FR 62.210.113.216
FR 62.210.38.242
92.60.177.109

User Agents

Mit diesen User-Agent-Strings identifiziert sich spiderbot:

  • Mozilla/5.0 (compatible; NetpeakSpiderBot/3.0; https://netpeaksoftware.com/spider)
  • Spiderbot/Nutch-1.7