Kurz gefasst
- Streuung
- Dieselbe Frage, eine andere Antwort. Nicht weil sich an Ihnen etwas geändert hätte, sondern weil das Modell nicht deterministisch ist.
- Momentaufnahme
- Was eine einzelne Messung liefert. Als Ausgangspunkt nützlich, als Beleg gefährlich — besonders wenn jemand darauf eine Erfolgsmeldung baut.
- Rotierendes Messen
- Den Fragensatz wiederholen und rotieren lassen, damit nicht nur der Zufall, sondern auch die Einseitigkeit aus Ihrer Zahl verschwindet.
- Nachmessung
- Dieselben Fragen, dieselbe Methode, nach einem Fix. Ohne das ist eine Verbesserung eine Behauptung.
Was sagt die Studie?
Der Kern ist nicht, dass KI unzuverlässig wäre, sondern dass eine Messung von KI eine Streuung hat — wie jede Messung an etwas Nichtdeterministischem. Wer das übergeht, misst Rauschen und nennt es ein Ergebnis.
| Was gemessen wurde | Wie | Was die Studie nicht sagt |
|---|---|---|
| Markensichtbarkeit in KI-Antworten, wiederholt gemessen | Analyse der Streuung zwischen Durchläufen derselben Messung | wie viele Messungen für Ihre Branche genügen — das hängt davon ab, wie stark Ihre Fragen schwanken |
(GEO research) (2026). Don't Measure Once: Measuring Visibility in AI Search. arXiv 2604.07585
Warum zählt das für Sie?
Weil sie darüber entscheidet, ob Ihre Zahl etwas wert ist. Ein Werkzeug, das einmal misst und dann einen Anstieg behauptet, kann diesen Anstieg nicht von der Streuung der Messung selbst unterscheiden. Das ist keine feine Nuance, sondern der Unterschied zwischen einem Ergebnis und einem Zufallstreffer.
Was macht ceeme damit?
Unsere Überwachung misst rotierend nach und zeigt den Verlauf über die Zeit statt einer Momentaufnahme. Und nach einem Fix messen wir dieselben Prompts mit derselben Methode erneut — fällt etwas ab, rollen wir zurück. Diese Untersuchung ist der Grund, warum wir kein Ergebnis ohne Nachmessung behaupten.
Häufige Fragen
Warum nicht einfach einmal messen?
Weil Sie dann nicht wüssten, ob Sie etwas sehen oder den Zufall. Eine Messung ist ein guter Ausgangspunkt dafür, ungefähr zu wissen, wo Sie stehen; eine Grundlage, um daran eine Veränderung abzulesen, ist sie nicht.
Wie oft messen Sie denn?
Das hängt vom Weg ab. Die Überwachung misst laufend und rotierend nach; nach einem Fix messen wir dieselben Prompts erneut. Der Takt gehört zum Weg und nicht zu dieser Studie, die nur sagt, dass einmal zu wenig ist.
Heißt das, KI-Sichtbarkeit lässt sich nicht steuern?
Nein, im Gegenteil. Gerade weil es Rauschen gibt, lohnt sich eine Methode, die das Rauschen herausnimmt — sonst steuern Sie nach Schwankungen. Was Sie nicht können, ist eine Position garantieren, und das ist eine andere Sache.
Weiterlesen
Kostenlos, ohne Konto und ohne Karte.