Agent Experience

Warum kommt ein KI-Agent nicht auf meine Website?

Der Inhalt ist nicht das Problem. Die Tür ist zu.

Hyperize Original Research Juni 2026 4 min Lesezeit

Oft liegt es nicht am Inhalt, sondern an der Tür: Eine Web Application Firewall, der Bot-Schutz der Website, beantwortet die Anfrage des Agenten mit einem 403 oder einem Verbindungsabbruch, bevor Inhalt fließt [S1]. In der DAX-40-Messung blockt Adidas per Akamai-403 jede gemessene Agentenklasse am Eingang [S2]. Bei Bayer sehen einfache Reader und Coding-Agenten einen 403 von Akamai, nur der Browser kommt durch [S3]. Bei E.ON stoppt eine Cloudflare-WAF den einfachen Abruf an der Tür [S4], bei Merck bricht die Verbindung ohne Antwort ab [S5].

Takeaway

Laut Hyperize-Messung (DAX-40 Agent Success Index, Q2 2026) zeigen fünf gemessene Marken denselben Zugangs-Befund: Der Block passiert am HTTP-Layer, vor dem Inhalt und unabhängig von der robots.txt. Das Spektrum reicht vom Totalblock jeder Agentenklasse (Adidas, Akamai-403) über den Block der leichten Klassen (Bayer) bis zum Block nur des einfachen Abrufs (E.ON, Zalando); bei Merck bricht die Verbindung ohne attribuierbare Antwort ab. Wer wissen will, warum der Agent nicht kommt, prüft zuerst die Tür, dann den Inhalt.

Block-Profil

Wer geblockt wird. Und wie tief der Block geht.

Fünf gemessene Marken, fünf Blocks am Zugang: drei vor Akamai-konfigurierten Surfaces, einer vor Cloudflare, einer ohne attribuierbare Antwort. Das Spektrum reicht vom Totalblock bis zum Block nur der leichtesten Klasse.

Marke

Wer geblockt wird

Gemessener Befund

Adidas

Jede gemessene Agentenklasse

Akamai-403 am Startseiten-Einstieg; keine Produkt-, Warenkorb- oder Checkout-Surface wird erreichbar [S2]

Bayer

Einfache Reader und Coding-Agenten

403 von Akamai, bevor sie Inhalt sehen; nur der Browser kommt durch [S3]

Merck

Text- und Code-Agenten

Verbindungsabbruch auf sigmaaldrich.com ohne jede Antwort; der Vendor ist aus der Messung nicht attribuierbar [S5]

E.ON

Der einfache HTTP-Abruf

Cloudflare-WAF blockt an der Tür; ein Coding-Agent liest dagegen den Strom-Basistarif [S4]

Zalando

Der einfache HTTP-Abruf

Akamai-gegatete Shell statt Inhalt; die Browser-Discovery funktioniert [S6]

Messrahmen: gemessene DAX-40-Marken, je eine reale Kauf- oder Abschlussfrage pro Marke, fünf Agent-Klassen, Stand Q2 2026. Der Bot-Schutz tut, was seine Konfiguration ihm sagt; attribuiert wird nur, was die Messung zeigt [S1].

Warum der Agent nicht ankommt

Die Tür entscheidet, bevor der Inhalt sprechen darf.

Die Reihenfolge macht den Schaden

KI-Tools rufen zuerst die leichten Klassen auf: den einfachen Fetcher, den Reader, den Coding-Agenten. Genau diese Klassen fängt eine strenge WAF am HTTP-Layer ab. Für Menschen läuft die Website einwandfrei, der Ausfall bleibt unsichtbar [S1].

Ein Block ist Konfiguration, nicht Schicksal

Dieselbe Messung zeigt alle Abstufungen: Totalblock (Adidas), Block der leichten Klassen (Bayer), Block nur des einfachen Abrufs (E.ON, Zalando). Der Bot-Schutz tut, was seine Konfiguration ihm sagt; der Hebel liegt in der Einstellung, nicht im Produkt [S2][S3][S4][S6].

Die robots.txt beantwortet die Frage nicht

Der Block passiert am HTTP-Layer, unabhängig davon, was in der robots.txt steht. Eine Website kann jeden KI-Crawler erlauben und ihn trotzdem an der WAF verlieren [S1].

Warum das relevant ist

Ein unsichtbarer Ausfall, den kein Dashboard meldet.

Für Menschen läuft die Website einwandfrei, deshalb taucht der Block in keinem Monitoring auf. Sichtbar wird er erst aus der Perspektive der Agenten: genau die Klassen, die KI-Tools zuerst aufrufen, bekommen einen 403 oder gar keine Antwort. Der Agent bewertet dann nicht den Inhalt, er zieht weiter zu Quellen, die antworten.

Die Diagnose beginnt deshalb an der Tür, nicht im Content. Was der Block betriebswirtschaftlich kostet, steht in der Kosten-Frage zum Bot-Schutz. Was hinter der Tür bedienbar sein muss, beschreibt die Agent Surface, die Gesamtwertung pro Marke steht im DAX-40 Agent Success Index.

FAQ

Drei Anschluss-Fragen.

Wie finde ich heraus, ob meine Website KI-Agenten blockt?

Nicht im Browser prüfen, sondern auf den Wegen, die KI-Tools zuerst nehmen: ein einfacher HTTP-Abruf, ein Reader, ein Coding-Agent. Antwortet die Seite dort mit einem 403 oder einem Verbindungsabbruch, sehen genau die Klassen nichts, die zuerst kommen. Der kostenlose Snapshot fährt diesen Test mit fünf Agent-Klassen gegen die eigene Seite.

Soll ich den Bot-Schutz einfach abschalten?

Nein. Bot-Schutz hat legitime Gründe, von Scraping bis zu echten Angriffen. Der Hebel ist Differenzierung statt Pauschalsperre: gewollte Agent-Klassen durchlassen oder ihnen einen definierten, kontrollierten Weg geben. Was die Konfiguration heute kostet, zeigt die Kosten-Frage zum Bot-Schutz.

Mein Inhalt ist gut, reicht das nicht?

Inhalt zählt erst, wenn er ankommt. Ein Agent, der einen 403 sieht, bewertet keinen Inhalt; er zieht weiter zu Quellen, die antworten. Deshalb steht in der Messung der Zugang vor jeder Inhaltsfrage: erst die Tür, dann die Agent Surface dahinter.

Drei Wege, tiefer einzusteigen.

Kosten

Was der Block kostet.

Die Kosten-Frage zum Bot-Schutz: welche Agent-Klassen zuerst kommen und was ihr Ausfall bedeutet.

Lesen

Index

DAX-40 Agent Success.

Die gemessenen Profile über 34 Marken, je Marke der Zugangs-Befund und die beiden Achsen.

Öffnen

Test starten

Kostenloser Snapshot · 48h.

Fünf Agenten gegen deine Seite. Sieh, ob deine Tür offen ist, bevor der Inhalt bewertet wird.

Anfordern

Sources

Evidenz und Provenienz.

internal

Was kostet ein Bot-Schutz, der KI-Agenten aussperrt? — der Mechanismus

Hyperize Answers · Stand Juni 2026

https://www.hyperize.ai/de/answers/was-kostet-bot-schutz-der-ki-agenten-aussperrt

Stützt: KI-Tools rufen zuerst den einfachen Fetcher, den Reader oder den Coding-Agenten auf; genau diese Klassen fängt eine strenge WAF am HTTP-Layer ab, mit einem 403 oder einem Verbindungsabbruch, unabhängig davon, was in der robots.txt steht.

internal

Adidas BrandScore — Konsumgüter