Verifizierte Bots statt User-Agents
Über 110 Crawler werden erkannt und mit den offiziellen IP-Listen der Betreiber und Reverse-DNS geprüft. Gefälschte Googlebots werden markiert, nicht gezählt.
Neu: robots.txt-Konformität und KI-Referral-Berichte
Ihre Server-Logs wissen, was Google und KI-Bots wirklich tun
Ein kostenloser Logfile Analyser für SEO. OctopusOn Log Analyser macht aus rohen Access-Logs Crawl-Erkenntnisse: welche Seiten Googlebot und KI-Crawler abrufen, wo sie auf Fehler stoßen, welche Bots gefälscht sind und wohin Ihr Crawl-Budget fließt.
100 % kostenlos und Open Source · Windows, macOS & Linux · Ihre Logs bleiben auf Ihrem Rechner
Liest die Logs, die Sie schon haben — Format wird automatisch erkannt
- Nginx
- Apache
- IIS
- CloudFront
- AWS ALB
- HAProxy
- Traefik
- Caddy
- Cloudflare
- Google Cloud
- JSON
- CSV
Von rohen Logzeilen zu SEO-Entscheidungen
Von SEOs entwickelt für Agenturen, die jeden Monat Dutzende Websites analysieren.
KI-Sichtbarkeit
Sehen Sie, was GPTBot, ClaudeBot, PerplexityBot und ChatGPT-User abrufen — und welche Besuche ChatGPT, Perplexity oder Gemini Ihnen schicken.
robots.txt-Konformität
Welche Bots gesperrte URLs anfragen und welche Ihre robots.txt komplett aussperrt — genau so ausgewertet wie bei Google.
Crawl-Budget
Crawl-Häufigkeit pro URL und Verzeichnis, Tage seit dem letzten Crawl, Parameter-URLs, Weiterleitungen und statische Dateien, die Budget fressen.
Verwaiste und nicht gecrawlte Seiten
Crawler-Exporte und XML-Sitemaps mit den Logs abgleichen; weitere Spalten werden wie per SVERWEIS ergänzt.
39 Berichte + Abfragesprache
Fertige Berichte und ein einfaches Formular für eigene Filter. Speichern, teilen und als Excel, CSV oder JSON exportieren.
Länder & Netzwerke
Land und Netzwerk (ASN) jeder Client-IP zeigen Scraper-Clouds und die Herkunft gefälschter Bots. Lokal nachgeschlagen.
Crawl-Warnungen
Plötzliche Googlebot-Einbrüche, KI-Crawl-Spitzen und Häufungen von Serverfehlern werden in der Übersicht hervorgehoben.
KI-Suche ist da
Erfahren Sie, wann KI-Assistenten Ihre Seiten lesen — und empfehlen
Trainings-Crawler, KI-Suchindexer und Echtzeitabrufe von Assistenten werden getrennt erfasst. So sehen Sie, welche Inhalte Modelle füttern, welche zitiert werden und welche Besucher KI-Assistenten zurückschicken.
- Eigene Kategorien für KI-Training, KI-Suche und KI-Assistenten
- Fehler, die KI-Bots erhalten — jeder fehlgeschlagene Abruf ist ein verlorenes Zitat
- Besuche über ChatGPT, Perplexity, Gemini, Copilot und Claude
- Bandbreite und geschätztes CO₂ pro Crawler
In drei Schritten zur ersten Erkenntnis
- 1
Logs ablegen
Klartext, gzip, zstd, bzip2 oder zip — Dateien oder ganze Ordner. Erneute Importe sind sicher.
- 2
Wir verifizieren die Bots
Jeder Bot-Hit wird mit offiziellen Daten als verifiziert, gefälscht oder unverifiziert eingestuft.
- 3
Handeln
Fehler beheben, Crawl-Verschwendung stoppen, Wichtiges freigeben und KI-Sichtbarkeit verfolgen.
110+erkannte Crawler
12+Logformate
39fertige Berichte
750KZeilen pro Sekunde
Automatisieren
Ein Befehl für jeden Bericht
Die octopuson-log-CLI teilt die Daten mit der Desktop-App. Monatsberichte skripten, Importe auf Servern planen und direkt nach Excel exportieren.
- ~750.000 Zeilen pro Sekunde
- Läuft zu 100 % auf Ihrem Rechner
$ octopuson-log import acme.com /var/log/nginx/ Format combined (detected) Hits 4,812,330 stored · 0 duplicates Throughput 768,104 lines/s $ octopuson-log query acme.com --template googlebot-errors 'date:last7d' url status hits last_seen /old-category/shoes 404 1,204 2026-10-12 /api/cart 500 311 2026-10-12 $ octopuson-log robots acme.com bot group blocked disallowed verified gptbot gptbot yes 24,320 24,320 googlebot * 12 0
Bot-Erkennung und Verifizierung
User-Agents lassen sich leicht fälschen. Jeder Bot-Hit wird geprüft, damit Berichte nur echte Crawler zählen.
- Über 110 Crawler in Kategorien: Suche, KI-Training, KI-Suche, KI-Assistenten, Werbung, SEO-Tools, Social, Monitoring
- Offizielle IP-Listen von Google, Bing, OpenAI, Anthropic, Perplexity, Apple u. a. sowie Forward-Confirmed-Reverse-DNS
- Urteil pro Hit: verifiziert, gefälscht oder unverifiziert — jederzeit neu prüfbar
- Eigene Bots: User-Agent-Muster mit IP-Bereichen, IP-Listen-URLs oder Reverse-DNS
KI-Crawler und KI-Suche
Verstehen Sie, wie KI-Plattformen Ihre Inhalte nutzen — und was sie zurückschicken.
- Tägliche Aktivität jedes KI-Crawlers und die abgerufenen URLs
- Fehler, die KI-Bots und Assistenten erhalten
- Von KI-Assistenten vermittelte Besuche mit Einstiegsseiten
- Bandbreite und geschätzte Emissionen pro Bot
robots.txt-Konformität
Prüfen Sie jede protokollierte Bot-Anfrage gegen Ihre aktuelle robots.txt oder eine beliebige Version.
- Auswertung wie bei Google: spezifischste User-Agent-Gruppe, längster Treffer, bei Gleichstand gewinnt Allow
- Gesperrte Anfragen pro Bot, von verifizierten und gefälschten IPs
- Komplett ausgesperrte Bots, etwa KI-Trainings-Crawler
- Jeden Verstoß mit der entscheidenden Regel exportieren
Crawl-Budget und technische Gesundheit
Finden Sie heraus, wo Crawler Zeit verschwenden und was sie nicht erreichen.
- URL-Übersicht: letzter Status, letzter Crawl, Tage seit dem letzten Crawl, Größe, Tempo und Hits pro Bot
- Statuscodes pro URL mit 1xx–5xx-Spalten und inkonsistenten Antworten
- Weiterleitungen, 4xx/5xx, langsame und große URLs, Parameter-URLs, statische Dateien
- Warnungen bei Crawl-Einbrüchen, -Spitzen und Serverfehlern
Nicht gecrawlte und verwaiste Seiten
Verbinden Sie Ihre Crawl-Daten mit dem, was Bots tatsächlich getan haben.
- CSV-Exporte von Crawlern, einfache Listen und XML-Sitemaps (inkl. Sitemap-Indizes)
- Gelistet, aber nie gecrawlt — gecrawlt, aber nicht gelistet (verwaist)
- Alle weiteren Spalten Ihres Exports neben den Logdaten
- Zeitraumvergleich pro URL, Verzeichnis oder Bot — vor und nach einer Migration
Ihre Daten, Ihre Regeln
Schnell, privat und skriptbar.
- Formate werden automatisch erkannt; eigene Nginx- und Apache-Formate werden unterstützt
- Importeinstellungen pro Website: nur Bots, URLs ein-/ausschließen, Parameter entfernen
- Abfragesprache mit gespeicherten Abfragen; Export nach Excel, CSV und JSON
- Ganze Websites als ein Archiv teilen; Kommandozeilen-Tool für Automatisierung
OctopusOn Log Analyser vs Screaming Frog Log File Analyser
Die wichtigsten Unterschiede auf einen Blick.
| Funktion | OctopusOn Log Analyser | Screaming Frog Log File Analyser |
|---|---|---|
| Preis | Kostenlos, $0 | Kostenlos mit Limits; £99 pro Jahr |
| Logzeilen | Kein Limit | 1.000 kostenlos; unbegrenzt mit Lizenz |
| Projekte | Kein Limit | 1 kostenlos; unbegrenzt mit Lizenz |
| Quellcode | Open Source | Proprietär |
| Verifizierung von Suchmaschinen-Bots | Offizielle IP-Listen und Reverse-DNS | Ja |
| Windows, macOS und Linux | Ja | Ja |
Angaben zu Screaming Frog von screamingfrog.co.uk, geprüft im Oktober 2026.
Häufige Fragen
Ist OctopusOn Log Analyser wirklich kostenlos?
Ja. Desktop-App und CLI sind kostenlos und Open Source, ohne Begrenzung bei Logzeilen oder Websites.
Verlassen meine Logs meinen Rechner?
Nein. Alles wird lokal gespeichert und analysiert. Heruntergeladen werden nur öffentliche Crawler-IP-Listen und, falls aktiviert, die IP-Geolokalisierungsdatenbank.
Welche Logformate werden unterstützt?
Nginx und Apache (auch eigene Formate), IIS, CloudFront, AWS-Load-Balancer, HAProxy, Traefik, Caddy, Cloudflare, Google Cloud, JSON- und CSV-Logs. Das Format wird automatisch erkannt.
Wie groß dürfen meine Logs sein?
Hunderte Millionen Zeilen. Logs werden mit rund 750.000 Zeilen pro Sekunde importiert und komprimiert mit etwa 8 % der Originalgröße gespeichert.
Welche Sprachen spricht die App?
Die Desktop-App gibt es auf Englisch und Türkisch; Berichte und Exporte funktionieren in beiden gleich.
Kommandozeile
Jede Funktion arbeitet auch im Terminal, für Skripte und geplante Aufgaben.
octopuson-log import acme.com /var/log/nginx/
octopuson-log query acme.com --template url-summary -o urls.xlsxDesktop-App
Windows
- Installationsprogramm · x64OctopusOn.Log.Analyser_0.2.0_x64-setup.exe · 12,5 MB
359971af71843543… - MSI-Paket · x64OctopusOn.Log.Analyser_0.2.0_x64_en-US.msi · 18,1 MB
12a0f338ca14e9ab…
Warnt SmartScreen vor einem unbekannten Herausgeber, klicken Sie auf „Weitere Informationen“ → „Trotzdem ausführen“.
macOS
Linux
- AppImage · x64OctopusOn.Log.Analyser_0.2.0_amd64.AppImage · 94,5 MB
74b966200224068e… - Debian-/Ubuntu-Paket · x64OctopusOn.Log.Analyser_0.2.0_amd64.deb · 22,1 MB
cf20bbde96dfda22… - Fedora-/RHEL-Paket · x64OctopusOn.Log.Analyser-0.2.0-1.x86_64.rpm · 22,1 MB
54221ce58ae7b6a9…
AppImage: ausführbar machen (chmod +x) und starten – oder das .deb- bzw. .rpm-Paket installieren.
Kommandozeile
| Datei | Größe | SHA-256 |
|---|---|---|
| octopuson-log-log-v0.2.0-aarch64-apple-darwin.tar.gz | 16,1 MB | bd585fa5fdba057caefe… |
| octopuson-log-log-v0.2.0-x86_64-apple-darwin.tar.gz | 17,7 MB | 77f839e15a0e091903e0… |
| octopuson-log-log-v0.2.0-x86_64-pc-windows-msvc.zip | 14,6 MB | b832c325e8f2915fa441… |
| octopuson-log-log-v0.2.0-x86_64-unknown-linux-gnu.tar.gz | 19,2 MB | 715e530f7d8001105040… |
Sehen Sie Ihre Website mit den Augen des Googlebots
App herunterladen, Logdatei ablegen und in Minuten den ersten Bericht erhalten.
Kostenlos herunterladen