Studiendatenbank · Laborexperiment
C-SEO Bench: Wirkt Optimierung für KI-Antworten überhaupt?C-SEO Bench: Does Conversational SEO Work?
Ein breiter Nachtest findet kaum Wirkung von GEO-Umschreibtaktiken: nur 3 von 54 Kombinationen verbesserten das Zitier-Ranking signifikant, die Statistik-Taktik schadete meist. Klassisch weiter oben in den Treffern zu stehen wirkte deutlich stärker.
5,6MFK-Score von 10 · Ergebnis: widerlegt
Die Zahlen
| 3 von 54 | Kombinationen aus Methode und Themenfeld mit statistisch signifikanter Ranking-Verbesserung (bei Wissensfragen keine) |
| 19 von 24 | Settings, in denen die Statistik-Taktik das Ranking verschlechterte |
| 1–10 | konkurrierende Akteure im Testaufbau |
| 2 × 3 | Aufgaben (Frage-Antwort, Produktempfehlung) × Domänen |
- Methode
- Zwei Aufgaben (Wissensfragen, Produktempfehlungen) mit je drei Themenfeldern; mehrere LLMs ranken Quellen; Wilcoxon-Test mit Holm-Bonferroni-Korrektur; Simulation steigender Zahl optimierender Anbieter.
- Datenbasis
- Modelle GPT-4o-mini, Claude 3.5 Haiku, o3, o4-mini; 6 Themenfelder
- Einschränkungen und häufige Fehlzitate
- Laborsetting mit vorgegebenen Quellen, misst Zitier-Rangfolge, keine Klicks. Preprint. Je mehr Anbieter optimieren, desto kleiner der Gewinn.
- Interessenlage
- Akademisch mit Industriebeteiligung (NAVER, Parameter Lab); kein erkennbarer Produktbezug
- Quelle
- https://arxiv.org/pdf/2506.11097 (frei zugänglich)
Im Podcast
- Folge 15: Share of Model
- Folge 31 (erscheint demnächst)
Zitieren
widerlegtGEO & KI-Suche