68 Millionen AI-Crawler-Besuche zeigen, was die Sichtbarkeit der KI-Suche steigert

Eine neue Analyse von 858.457 auf der Duda-Plattform gehosteten Websites zeigt, wie KI-Crawler in großem Maßstab mit Websites interagieren. Die Daten bieten einen klareren Überblick darüber, wie die Crawling-Aktivität zunimmt und was SEOs und Unternehmen tun sollten, um den Traffic durch die KI-Suche zu steigern.

KI-Crawling hat bereits eine Größenordnung erreicht

Das KI-Crawling nimmt schnell zu, immer mehr Anfragen sind mit Antworten in Echtzeit verknüpft und die meisten dieser Aktivitäten kommen von einem einzigen Anbieter. Die Daten erzeugen ein Muster, das zeigt, welche Websites gecrawlt werden und, was noch wichtiger ist, warum.

Wachstum der LLM-Empfehlungen im Jahresvergleich

Der LLM-Empfehlungsverkehr hat im vergangenen Jahr stark zugenommen, wobei mehrere Plattformen aus sehr unterschiedlichen Ausgangspunkten erhebliche Zuwächse verzeichnen konnten.

KI-Empfehlungsverkehrsmuster

• Gesamtzahl der LLM-Empfehlungen: 93.484 bis 161.469 (+72,7 %)
• ChatGPT: 81.652 auf 136.095 (+66,7 %)
• Claude: 106 auf 2.488 (23-faches Wachstum)
• Copilot: 22 auf 9.560 (von nahezu Null)
• Ratlosigkeit: 11.533 auf 13.157 (+14,1 %)

Das Wachstum erfolgt nicht gleichmäßig, aber der Empfehlungsverkehr von KI-Systemen nimmt insgesamt zu. Das macht die durch KI generierte Entdeckung zu einer wachsenden Traffic-Quelle und nicht zu einer Randerscheinung.

Crawler rufen zunehmend Inhalte ab, um Antworten zu erhalten

KI-Crawler werden nicht mehr hauptsächlich zur Indizierung verwendet, da die meisten Aktivitäten jetzt mit dem Abrufen von Inhalten in Echtzeit verbunden sind, um Antworten für Benutzer zu generieren.

Der Großteil des Crawlings erfolgt heute als Reaktion auf Benutzeranfragen und nicht mehr zum Erstellen eines Index, wodurch sich die Art und Weise ändert, wie auf Inhalte zugegriffen und diese verwendet werden.

• Benutzerabruf (Antworten in Echtzeit): 56,9 % aller Crawler-Aktivitäten, fast ausschließlich durch ChatGPT gesteuert
• Training (Modelllernen): 28,8 %, aufgeteilt auf GPTBot und andere Modell-Crawler
• Discovery (Inhaltsindizierung): 14,3 %, verteilt auf mehrere Systeme
• ChatGPT-Benutzerabrufvolumen: ~39,8 Millionen Besuche

Die Trends werden größtenteils von ChatGPT vorangetrieben, das für fast alle Echtzeit-Abrufaktivitäten verantwortlich ist. Das bedeutet, dass der Trend zum antwortbasierten Crawling nicht gleichmäßig verteilt ist, sondern sich auf eine Plattform konzentriert, die bestimmt, wie auf Inhalte zugegriffen wird. Dieser Trend könnte sich mit dem neuen Google-Agent-Crawler von Google ändern.

Marktkonzentration im KI-Crawling

Die Aktivität der KI-Crawler ist stark konzentriert, wobei OpenAI für die überwiegende Mehrheit der Anfragen verantwortlich ist, was seine Position als primäres Tool widerspiegelt, auf das sich Benutzer verlassen, um Informationen zu finden und abzurufen.

• OpenAI: 55,8 Millionen Besuche (81,0 %)
• Anthropisch (Claude): 11,5 Millionen (16,6 %)
• Ratlosigkeit: 1,3 Millionen (1,8 %)
• Google (Zwillinge): 380.000 (0,6 %)

Die meisten KI-Crawling-Aktivitäten stammen von OpenAI, was mit der Rolle von ChatGPT als primäres Tool zum Suchen und Abrufen von Informationen übereinstimmt. Claude folgt mit einem viel geringeren Anteil, was auf ein anderes Nutzungsmuster hindeutet, während der Rest des Marktes nur einen minimalen Anteil der Crawler-Aktivität ausmacht.

Maßstab und was das eigentlich bedeutet

KI-Crawling ist bereits in weiten Teilen des Webs im Einsatz, erreicht Hunderttausende Websites und generiert in einem einzigen Monat zig Millionen Anfragen.

Mehr als die Hälfte aller Websites im Datensatz erhielten mindestens einen KI-Crawler-Besuch, was zeigt, dass diese Aktivität nicht auf eine kleine Untergruppe von Websites beschränkt ist.

• Insgesamt analysierte Websites: 858.457
• Websites mit mindestens einem AI-Crawler-Besuch: 506.910 (59 %)
• Gesamtzahl der KI-Crawler-Besuche (Februar 2026): 68,9 Millionen

KI-Crawling ist nicht auf hochkarätige oder stark frequentierte Websites beschränkt. Es ist bereits weit verbreitet und verzeichnet in einem Großteil des Internets anhaltende Aktivität.

Die Beziehung zwischen Crawling und echtem Verkehr

Websites, die von KI-Systemen gecrawlt werden können, zeigen durchweg ein stärkeres Engagement bei mehreren Metriken.

Was die Daten tatsächlich zeigen, ist:

1. Websites, die KI-Crawling ermöglichen, erhalten deutlich mehr menschlichen Traffic
2. Websites mit höherem Traffic werden eher gecrawlt

Websites, die das Crawlen durch KI-Systeme ermöglichen, erhalten deutlich mehr menschlichen Traffic, nämlich durchschnittlich 527,7 Sitzungen im Vergleich zu 164,9 bei Websites, die nicht gecrawlt werden. Dies stellt keinen Kausalzusammenhang dar, zeigt aber eine klare Übereinstimmung zwischen Websites, die menschliche Besucher anziehen, und der Häufigkeit, mit der KI-Systeme sie erneut besuchen.

• Durchschnittlicher menschlicher Traffic (KI-gecrawlt vs. nicht): 527,7 vs. 164,9 (3,2x höher)
• Durchschnittliche Formularausfüllungen: 4,17 vs. 1,57 (2,7-mal höher)
• Durchschnittlicher Click-to-Call: 8,62 vs. 3,46 (2,5-mal höher)
• Websites mit mehr als 10.000 Sitzungen: Crawling-Rate von 90,5 %

KI-Systeme erkennen schwache oder inaktive Websites nicht und heben sie nicht hoch. Sie kehren zu Websites zurück, die bereits menschliche Besucher anziehen. Für Vermarkter verlagert sich der Fokus dadurch weg von dem Versuch, „gecrawlt“ zu werden, und hin zum Aufbau einer echten Zielgruppennachfrage, da die Sichtbarkeit in KI-Systemen dieser scheinbar folgt.

Was mit mehr Krabbeln zusammenhängt

Die Untersuchung verglich Websites, die spezifische Drittanbieter-Integrationen, strukturierte Funktionen und Inhaltstiefe enthalten, mit solchen, die dies nicht tun, und fand heraus, welche Websites für die KI-Crawler-Aktivität und Verweise am wichtigsten waren.

Im gesamten Datensatz erhielten 59 % der Websites im Februar 2026 mindestens einen KI-Crawler-Besuch. Websites, die häufiger gecrawlt werden, neigen dazu, drei Arten von Signalen zu kombinieren: externe Integrationen, strukturierte Geschäftsdaten und Inhaltstiefe.

1. Externe Integrationen

Diese Integrationen verbinden die Site mit externen Systemen, die Geschäftsinformationen validieren und verteilen.

• Yext-Integration: 97,1 % Crawling-Rate vs. ~58 % ohne (+38,9 PP)
• Bewertungen Integrationen: 89,8 % Crawling-Rate vs. 58,8 % ohne, 376,9 durchschnittliche Crawler-Besuche

Websites, die mit externen Daten- und Bewertungssystemen verbunden sind, werden immer häufiger gecrawlt, was darauf hindeutet, dass KI-Systeme auf diese Integrationen als Signal dafür angewiesen sind, dass ein Unternehmen echt, überprüfbar und einen erneuten Besuch wert ist.

2. Strukturierte Site-Funktionen und Geschäftsdaten

Diese sind in die Website integriert und helfen KI-Systemen, die Unternehmensidentität zu verstehen und zu überprüfen.

• Google Business Profile-Synchronisierung: 92,8 % Crawling-Rate vs. 58,9 % ohne, 415,6 durchschnittliche Crawler-Besuche
• Lokales Schema: 72,3 % vs. 55,2 % (+17,1 Prozentpunkte), 22,3 % Akzeptanz
• Dynamische Seiten: 69,4 % vs. 58,2 % (+11,2 pp)
• E-Commerce: 54,2 % vs. 59,2 % (-5,0 Prozentpunkte)

Websites, die ihre Geschäftsidentität klar definieren und ihre Informationen maschinenlesbar strukturieren, werden häufiger gecrawlt. Dies zeigt, dass KI-Systeme Websites bevorzugen, die sie leicht interpretieren, überprüfen und Informationen extrahieren können.

3. Inhaltstiefe (Volumen nutzbarer Daten)

Websites mit mehr Inhalten bieten KI-Systemen mehr Möglichkeiten, Informationen in Antworten abzurufen, zu referenzieren und wiederzuverwenden.

• Websites mit mehr als 50 Blogbeiträgen: 1.373,7 durchschnittliche Crawler-Besuche gegenüber 41,6 ohne Blog (~33x höher)

Websites mit mehr Inhalten werden viel häufiger gecrawlt, was darauf hindeutet, dass KI-Systeme möglicherweise auf Quellen zurückgreifen, die einen größeren Vorrat an nutzbaren Informationen bieten, aus denen sie bei der Generierung von Antworten schöpfen können.

Vollständigkeit des lokalen Unternehmensschemas = mehr Crawling

Dieser Teil der Forschung konzentriert sich speziell auf lokale Geschäftsschemata und vergleicht, wie die Vollständigkeit der Schemaimplementierung zur Kommunikation von Geschäftsdetails mit der KI-Crawler-Aktivität zusammenhängt. Zu den gemessenen Feldern gehören Firmenname, Telefonnummer, Adresse, Öffnungszeiten und soziale Profile.

• Keine lokalen Schemafelder: Crawling-Rate von 55,2 %
• 10–11 ausgefüllte Schemafelder: 82 % Crawling-Rate
• Websites mit einem vollständigeren lokalen Schema weisen eine um 26,8 Prozentpunkte höhere Crawling-Rate auf (82 % gegenüber 55,2 %).

Websites, die umfassendere lokale Geschäftsinformationen in strukturierter Form bereitstellen, werden häufiger gecrawlt und erhalten mehr Crawler-Besuche. Je mehr dieser Felder ausgefüllt werden, desto höher sind sowohl die Crawling-Rate als auch die Crawling-Frequenz.

Die Daten zeigen, dass klar definierte lokale Geschäftsdaten es KI-Systemen erleichtern, auf einer Website alle Voraussetzungen für den Empfang von Datenverkehr aus der KI-Suche zu identifizieren, zu überprüfen und anschließend erneut zu prüfen.

Imbissbuden

KI-Crawling ist eine parallele Methode zur Inhaltserkennung und die Forschung zeigt klare Muster für Websites, die von Crawlern am häufigsten besucht werden.

• KI-Crawling funktioniert parallel zur herkömmlichen Suche und verändert die Art und Weise, wie auf Inhalte zugegriffen und sie wiederverwendet wird
• Websites mit strukturierten lokalen Signalen, tiefergehendem Inhalt und vollständigerem Schema werden häufiger gecrawlt
• Mehrere verstärkende Signale treten gemeinsam an denselben Stellen auf, nicht isoliert
• Die Daten zeigen eine Richtung, nicht einen Kausalzusammenhang, aber die Muster sind konsistent

Die Daten zeigen, dass Websites, die es KI-Crawlern erleichtern, sie zu indizieren und erneut aufzurufen, tendenziell eine bessere Leistung erbringen. Interessanterweise werden Websites, die klare, strukturierte und überprüfbare Informationen präsentieren und gleichzeitig eine echte Zielgruppennachfrage wecken, mit größerer Wahrscheinlichkeit von KI-Systemen erneut besucht und profitieren von dem durch KI-Suche generierten Datenverkehr.

Lesen Sie die Forschung: Laut Duda-Studie generieren KI-optimierte Websites 320 % mehr Traffic für lokale Unternehmen

Ausgewähltes Bild von Shutterstock/Preaapluem