Reuters Institute: Wie viele Nachrichtenseiten KI-Crawler sperrenHow many news websites block AI crawlers?

Fletcher · Reuters Institute for the Study of Journalism (Factsheet) · 2024

Ende 2023 sperrten viele reichweitenstarke Nachrichtenseiten KI-Crawler; in Deutschland sperrten 60 % auch Google-Extended, der höchste Wert unter zehn Ländern, obwohl das Token AI Overviews gar nicht steuert.

5,3MFK-Score von 10 · Ergebnis: bestätigt

Studiendesign6

Datenbasis3

Unabhängigkeit10

Replikation3

Übertragbarkeit3

Systematische Vollerhebung, unabhängig, aber klein und veraltet. Die verbreitete Aussage hält der Prüfung stand. Wie der Score entsteht →

Die Zahlen

60 % / 60 %	deutsche Top-15-Nachrichtenseiten mit Sperre für OpenAI-Crawler bzw. Google-Extended
48 % / 24 %	Anteil über alle Länder für OpenAI bzw. Google
7 %	niedrigster Google-Wert (Polen, Spanien)

Methode: Systematische Auswertung der robots.txt-Dateien.
Datenbasis: je 15 Top-Nachrichtenseiten in 10 Ländern, Stand Ende 2023
Einschränkungen und häufige Fehlzitate: Alt (vor OAI-SearchBot) und kleine Stichprobe je Land; Sperre von Google-Extended wirkt laut Google nicht auf Suche und AI Overviews.
Interessenlage: Akademisch (Oxford); keine bekannt
Quelle: https://reutersinstitute.politics.ox.ac.uk/sites/default/files/2024-02/Fletcher_How_Many_News_Websites_Block_AI_Crawlers.pdf (frei zugänglich)

Im Podcast

Folge 39 (erscheint demnächst)

Zitieren

Marketing Facts Kompakt (Hrsg.): „Reuters Institute: Wie viele Nachrichtenseiten KI-Crawler sperren“. MFK-Studiendatenbank, Stand 2026-11-06. https://marketing-facts.de/studien/fletcher-news-websites-block-ai-crawlers-2024/

bestätigtGEO & KI-SucheRecht & Datenschutz

← Alle Studien