Über RankProofBot
RankProofBot ist der Crawler von RankProof. Er prüft Websites im Auftrag ihrer Inhaber auf SEO- und GEO-Schwächen. Wenn Sie RankProofBot in Ihren Server-Logs sehen, hat jemand mit Zugriff auf Ihre Domain eine Analyse beauftragt.
Wir crawlen erst nach Bestätigung
Bevor eine Website geprüft wird, muss die Inhaberschaft nachgewiesen werden — per DNS-TXT-Eintrag, Meta-Tag oder einer Datei unter /.well-known/. Ohne diesen Nachweis wird keine einzige Seite abgerufen. Damit kann RankProof nicht benutzt werden, um fremde Websites zu belasten.
Wie wir uns verhalten
- Wir halten uns an Ihre robots.txt, einschließlich Crawl-delay.
- Höchstens zwei gleichzeitige Anfragen pro Host, mit Pausen dazwischen.
- Wir laden nur HTML. Bilder, Videos und Schriften werden übersprungen.
- Die Zahl der geprüften Seiten ist je Tarif begrenzt.
So sperren Sie uns aus
Fügen Sie dies in Ihre robots.txt ein:
User-agent: RankProofBot Disallow: /
Wir halten uns daran, auch wenn der Inhaber eine Analyse beauftragt hat. Die Analyse schlägt dann mit einem entsprechenden Hinweis fehl.
KI-Crawler, die wir prüfen
Ein Teil unserer Analyse besteht darin zu prüfen, ob Ihre robots.txt diese Crawler blockiert. Wir sind keiner von ihnen und verwenden Ihre Inhalte nicht zum Training von Modellen.
| Bot | Anbieter | Zweck |
|---|---|---|
| GPTBot | OpenAI | Modell-Training |
| OAI-SearchBot | OpenAI | Suche |
| ChatGPT-User | OpenAI | Abruf auf Anfrage |
| ClaudeBot | Anthropic | Modell-Training |
| Claude-User | Anthropic | Abruf auf Anfrage |
| Claude-SearchBot | Anthropic | Suche |
| PerplexityBot | Perplexity | Suche |
| Perplexity-User | Perplexity | Abruf auf Anfrage |
| Google-Extended | Modell-Training | |
| Applebot-Extended | Apple | Modell-Training |
| CCBot | Common Crawl | Modell-Training |
| meta-externalagent | Meta | Modell-Training |
| Bytespider | ByteDance | Modell-Training |
Kontakt
Wenn RankProofBot Ihnen Probleme macht, schreiben Sie uns. Unser User-Agent verweist auf diese Seite: http://localhost:5180/bot