Crawler

ProvenVisibleBot

Wenn Sie diese Adresse in Ihren Server-Logs gefunden haben, ist diese Seite der Grund. ProvenVisibleBot ruft Seiten einer Website ab, wenn deren Betreiber uns um ein Audit bittet.

So erkennen Sie ihn

Der User-Agent lautet genau:

ProvenVisibleBot/0.1 (+https://provenvisible.com/bot)

Was er tut

• Ruft Seiten ab, die ohnehin öffentlich sind. Er meldet sich nie an und sieht nie etwas, das ein Besucher nicht sehen könnte.
• Liest zuerst robots.txt und überspringt jeden Pfad, den Sie sperren.
• Wartet zwischen Anfragen und versucht es bei Fehlern höchstens zweimal erneut: er ist als langweiliger Traffic gebaut.
• Läuft, wenn ein Website-Betreiber ein Audit startet, nicht dauerhaft.

Warum er Ihre Website besucht hat

Jemand hat Ihre Domain in ProvenVisible registriert und ein Audit gestartet. Unsere Bedingungen erlauben nur die Registrierung einer Website, die Ihnen gehört oder die Sie verwalten. Wenn das hier nicht zutrifft, sperren Sie den Bot unten und schreiben Sie uns: wir löschen die Registrierung.

So blockieren Sie ihn

Fügen Sie dies in Ihre robots.txt ein; der nächste Lauf hält sich daran:

User-agent: ProvenVisibleBot
Disallow: /

Eine Sperre kostet den Website-Betreiber sein Audit, sagen Sie es ihm also auch. Fragen: schreiben Sie uns.