SearviaBot
SearviaBot ist der Crawler von Searvia, einem Service für Suchsichtbarkeit. Er liest öffentliche Seiten, damit Searvia-Kunden ihre eigenen Websites prüfen, Wettbewerber vergleichen und sehen können, welche Websites aufeinander verlinken.
So erkennst du ihn
Jede Anfrage verwendet diesen User-Agent:
Mozilla/5.0 (compatible; SearviaBot/1.0; +https://searvia.com/bot)Was es kann
- Er befolgt die robots.txt. Regeln für „SearviaBot“ gelten zuerst, sonst die Regeln für alle Crawler (*).
- Er sendet höchstens eine Anfrage pro Sekunde an denselben Host und drosselt, wenn ein Server mit 429 oder 503 antwortet.
- Er liest nur öffentliche Seiten: keine Formulare, keine Logins, keine Warenkörbe, keine privaten Netzwerkadressen.
- Er schaltet keine Werbung, sammelt keine personenbezogenen Daten und verkauft deine Inhalte nicht. Die gelesenen Seiten werden für Website-Audits und den Searvia-Link-Index verwendet.
So blockierst du ihn
Füge diese Zeilen zur Datei robots.txt im Stammverzeichnis deiner Website hinzu. SearviaBot liest die robots.txt innerhalb eines Tages erneut.
User-agent: SearviaBot Disallow: /
Website-Audits, die Website-Inhaber in Searvia starten, folgen denselben Regeln. Blockierte Pfade werden daher auch nicht geprüft.
So überprüfst du es
Einen User-Agent kann jeder kopieren. Wenn du starken Traffic siehst, der sich als SearviaBot ausgibt, schick uns die IP-Adresse und die Uhrzeit per E-Mail, dann sagen wir dir, ob wir es waren.
Kontakt
Fragen oder Probleme: info@searvia.com. Wir antworten innerhalb von zwei Werktagen.