Cloudflare SEO Log-Analyse

Cloudflare sieht jeden Bot und searchVIU wertet die Logs aus.

searchVIU holt deine Cloudflare-Logs jeden Tag ab. Du siehst, wie Googlebot und KI-Bots deine Seiten abrufen.

Was ausgewertet wird

Vier Reports aus deinen Cloudflare-Logs.

Die Logs deiner Cloudflare-Zone landen in deinem searchVIU-Projekt. Dort liegen sie neben Crawl, Search Console und Alerts.

Bot Dynamicsalle verifizierten Bots im Verlauf, Suchmaschinen und KI-Bots getrennt
Crawl Budget & WasteAbrufe auf Weiterleitungen, Parameter-URLs und Fehlerseiten
Coverage & HealthStatuscodes, die deine Seiten an Bots ausliefern
Performance & CacheAntwortzeiten für Bots und Anteil aus dem Cache
Mehr zur Logfile-Analyse
KI-Bots

Welche KI liest deine Seiten, und wofür?

Abrufe von ChatGPT-User zeigen, wann eine KI deine Seite für eine konkrete Antwort liest. Bots fürs Training siehst du getrennt davon. Dazu kommen Anfragen auf llms.txt und MCP-Endpunkte.

  • Abruf auf NutzerwunschAbrufe für eine konkrete Frage
  • Agent-Signalellms.txt, .well-known, MCP
Mehr zum KI-Crawler Monitoring
KI-Bots in den Logsbeispiel-shop.de · letzte 7 Tage
OAI-SearchBot5.410
ChatGPT-User3.720
GPTBot2.960
ClaudeBot1.870
PerplexityBot760
Anfragen auf /llms.txtvon KI-Bots und Agenten184
Gefälschte Bots und Firewall

Die WAF schützt deine Seite und searchVIU zeigt, wen sie aussperrt.

Cloudflare-Regeln blockieren manchmal auch echte Bots. Die Firewall-Events zeigen dir, welche Bots betroffen sind. Gleichzeitig prüft searchVIU, ob ein Googlebot wirklich von Google kommt.

  • Firewall Eventsblockierte Anfragen je Bot
  • Verificationechte und gefälschte Bots getrennt
Firewall Eventsbeispiel-shop.de · KW 41
Bingbot blockiert1.240 Anfragen · Regel „Rate Limit Shop“
Hoch
OAI-SearchBot blockiert310 Anfragen · Regel „Bot-Schutz“
Mittel
Gefälschter Googlebot blockiert4.130 Anfragen · IP nicht von Google
Info
Einrichtung

Nach der Einrichtung kommen die Logs jeden Tag.

Die Einrichtung machen wir gemeinsam mit dir. Du legst dazu in Cloudflare einen Logpush-Job oder einen API-Token an. Welche Rechte er braucht, steht unten in den Fragen.

1 · Zone verbindenPer Logpush-Job oder API-Token bekommt searchVIU Zugriff auf die Logs deiner Cloudflare-Zone.
2 · Täglicher ImportsearchVIU holt die Logs jeden Tag ab und prüft jeden Bot.
3 · AuswertenDie Reports liegen in deinem Projekt, neben Crawl und Search Console.
Firewall und Import

Die Firewall lässt die Richtigen rein.

  • Keine echten Bots blockiertGooglebot, Bingbot und KI-Bots
  • Googlebot-Abrufe im üblichen Rahmenim Verlauf der letzten Wochen
  • Logs vollständig importiertjeden Tag
KW 37 · keine echten Bots blockiert

Häufige Fragen zu Cloudflare-Logs

Wie oft kommen die Logs in searchVIU an?

searchVIU importiert die Cloudflare-Logs jeden Tag.

Welchen Cloudflare-Tarif und welche Rechte braucht es?

Jeder Tarif reicht, auch Free. Enthält dein Tarif Logpush, richten wir bevorzugt mit dir einen Logpush-Job ein, der die Logs deiner Zone an searchVIU schickt. Der API-Token braucht dafür das Recht „Logs Write“ für deine Zone. Cloudflare rechnet Logpush nach Volumen ab, wobei 25 GB im Monat inklusive sind. Auf Free und anderen Tarifen ohne Logpush liest searchVIU die Daten über die Cloudflare-API, mit einem Token, der nur „Account Analytics“ lesen darf.

Wir nutzen kein Cloudflare. Was dann?

Die Logfile-Analyse funktioniert auch mit Logs per Upload, FTP oder aus Amazon S3. Andere Quellen binden wir an. Zur Logfile-Analyse

Wo liegen die Daten?

Deine Projektdaten liegen in der Google Cloud in der EU. searchVIU ist nach ISO/IEC 27001:2022 zertifiziert. Mit deinen Daten wird keine KI trainiert. Mehr zu Sicherheit

Enthalten die Logs personenbezogene Daten?

Ja, Server-Logs enthalten IP-Adressen. Wir bekommen aber nur die Zeilen mit Bot-User-Agents und nutzen die IP-Adressen, um echte Bots zu erkennen. Die Verarbeitung regelt der Auftragsverarbeitungsvertrag.

Was kostet die Auswertung der Cloudflare-Logs?

Die Auswertung läuft über die Logfile-Analyse. Sie ist ein Zusatzmodul zum SEO-Monitoring, ab 199 € im Monat für alle Logquellen. Für den Preis zählen nur die Zugriffe von Bots. Alle Preise findest du auf der Preisseite.

Demo

Lass uns über deine Website sprechen.

In der Demo zeigt dir Michael, wie searchVIU funktioniert. Dafür nutzen wir deine Website und ein Beispielprojekt.

  1. Anfrage in drei kurzen Schritten
  2. Kurze Abstimmung zu Crawler-Freigabe, NDA und Search Console
  3. Demo mit deiner Website und dem Beispielprojekt
  4. Start gemeinsam geplant und begleitet
  1. Website
  2. Bedarf
  3. Kontakt

Um welche Website geht es?