Website & SEO

Such- und KI-Crawler-Zugriffstest

Fordern Sie eine öffentliche Seite mithilfe ausgewählter Such- oder AI-Crawler-User-Agent-Zeichenfolgen an.

◈ Online-Suche · Nur öffentliche Informationen

Eingaben und Einstellungen

Zieldomäne oder Ziel-URL wird zur Abfrage an den Server übermittelt; Geben Sie keine Links ein, die geheime Schlüssel enthalten.

Ergebnis-Workbench

Geben Sie die Details ein und klicken Sie dann auf Suche starten.

Illustration einer von einem Crawler abgerufenen URL, sortiert nach empfangenem HTML, Seitenlinks und Crawlbarkeit
So funktioniert es · Es wurde noch nichts abgerufen

Sehen Sie, was ein Crawler tatsächlich erhält

Antworten, Links und Robots-Regeln zusammen, um herauszufinden, warum Seiten übersehen werden.

IHR NÄCHSTER SCHRITT

Verwandeln Sie eine Website-Überprüfung in eine Überwachungsroutine

Erstellen Sie ein Unternehmenskonto, um Websites und Benachrichtigungen zu verwalten. Pro unterstützt 5 Standorte und eine 5-minütige Verfügbarkeitsüberwachung, wobei je nach Plan und Berechtigungen umfassende Diagnosen verfügbar sind.

Neue Unternehmen erhalten eine 14-tägige Pro-Testversion, für die keine Karte erforderlich ist. Bei Testversionen ist der bezahlte monatliche Kreditzuschuss nicht inbegriffen.

Sie haben bereits ein Konto? Öffnen Sie Ihren Arbeitsbereich → (English)

Verwendung des Such- und AI-Crawler-Zugriffstests

  1. Geben Sie die Website-URL ein und passen Sie die Optionen nach Bedarf an.
  2. Führen Sie das Tool aus und überprüfen Sie seine Ergebnisse, Beweise und Einschränkungen.
  3. Kopieren oder laden Sie das Ergebnis herunter und vergleichen Sie es dann mit der tatsächlichen Website, den Quelldaten oder den Geschäftsunterlagen.

Versuchen Sie es mit einem konkreten Beispiel

Vergleichen Sie die Antwort der Seite auf die verfügbaren Crawler-Identitäten und überprüfen Sie ihre HTTP-Header.

So interpretieren Sie Ergebnisse

Nur die User-Agent-Zeichenfolge wird simuliert. Die Anfrage stammt nicht von einem verifizierten Crawler-Netzwerk und stellt kein tatsächliches Crawling-, Indexierungs- oder KI-Trainingsverhalten dar.

Häufig gestellte Fragen

Bedeutet 200, dass es von KI indiziert wurde?

Bedeutet nicht „Bestanden“. Es zeigt lediglich an, dass diese simulierte User-Agent-Anfrage den Statuscode 200 zurückgegeben hat.

Bedeutet 403 definitiv, dass der echte Googlebot blockiert wurde?

Nicht unbedingt. Die tatsächliche Googlebot-Quell-IP unterscheidet sich von diesem Tool; kombiniert mit offizieller IP-Verifizierung und Protokollprüfungen.

Berücksichtigt dieses Ergebnis robots.txt?

Diese Anfrage prüft HTTP-Antworten; robots.txt-Regeln sollten separat mit dem robots.txt-Prüftool angezeigt werden.

Praktischer Leitfaden und häufig gestellte Fragen zum Crawler-Zugriffsprüfer

Was macht ein Crawler-Zugriffsprüfer?

Ein Crawler-Zugriffstest vergleicht HTTP-Antworten mit angegebenen User-Agent-Zeichenfolgen und hilft so bei der Untersuchung von Firewall- oder Inhaltsrichtlinienunterschieden.

Für wen ist das gedacht und wann ist es nützlich?

Webmaster untersuchen Unterschiede in öffentlichen HTTP-Antworten für Crawler-Benutzeragenten.

Wie verwende ich diesen Crawler-Zugriffsprüfer?

Senden Sie eine URL und ein Crawler-Label und vergleichen Sie die zurückgegebenen Beweise. Ein simulierter Benutzeragent führt kein echtes Crawling oder Indizieren durch.

Wie soll ich die Ergebnisse interpretieren?

Vergleichen Sie Antworten mit Serverprotokollen. Unsere Anfrage-IP unterscheidet sich von der eines echten Such-Crawlers, sodass eine simulierte Antwort kein tatsächliches Crawling oder Indizierung nachweisen kann.

Wo wird die Arbeit ausgeführt und welche Dienste erhalten Daten?

Unser Server fordert die öffentliche URL über den ausgewählten User-Agent an. Sie stammt nicht von einem verifizierten Googlebot oder der tatsächlichen IP eines anderen Crawlers.