Zum Inhalt springen
ceeme

Woran erkennen Sie, ob eine Verschiebung in KI-Antworten echt ist?

Indem man dieselben Fragen auf dieselbe Weise erneut stellt. Eine KI-Antwort unterscheidet sich von Tag zu Tag und sogar von Durchgang zu Durchgang, eine einzelne abweichende Messung ist also Rauschen. Bei ceeme zählt deshalb nur eine Nachmessung: dieselben Prompts, derselbe Markt, dieselben Engines, dieselbe Methode. Was sich dann ändert, bekommt eine Art und eine Ursache — und erst das ist ein Grund zu handeln.

Messen Sie Ihr Unternehmen → Lieber erst sprechen

Was kann sich zwischen zwei Messungen ändern?

Sechs Arten, hier in der Reihenfolge ihres Gewichts. Die Tabelle stammt aus dem Code, der Ihre Messungen klassifiziert, das hier Stehende finden Sie also in Ihrem Bericht wieder — mit denselben Worten.

Art des Befundswas passiert istwo der Fix sitzt
feitEine Engine sagt etwas über Sie, das nachweislich falsch ist — veraltet, verwechselt oder erfunden.Bei der Quelle, die es behauptet, nicht bei Ihnen. Deshalb steht die Adresse dabei.
kanttekeningSie werden mit einem Vorbehalt genannt: gut, aber teuer; stark, aber weit weg; solide, aber klein.In dem Beleg, der den Vorbehalt entkräftet. Das ist das schärfste Signal überhaupt.
kaderingSie werden ungünstig dargestellt, ohne dass ein konkreter Einwand fällt.In den Quellen, die die Engine dafür nutzte — sie stehen dabei, auch ohne Einwand.
afwezigSie kommen in der Antwort nicht vor. Die Engine hat Quellen geholt, und Sie waren nicht dabei.Nicht auf Ihrer eigenen Seite, sondern bei den Quellen, die sie gelesen hat. Ohne diese Liste ist das eine Feststellung ohne Adresse.
niet-geciteerdIhr Name fällt, aber Ihre eigene Seite ist nicht die Quelle. Jemand anders erzählt Ihre Geschichte.In der Form Ihrer eigenen Seite: zitierbar geschrieben, maschinenlesbar strukturiert.
niet-gekozenSie werden zitiert und trotzdem nicht empfohlen. Der teuerste der sechs, denn Sie sind fast da.Meist im Vorbehalt darüber. Fehlt er, ist das das Signal, danach zu suchen.

Wann ist ein Unterschied Rauschen und wann eine Verschiebung?

Ein Unterschied ist erst eine Verschiebung, wenn er dieselbe Frage, denselben Markt und dieselbe Engine betrifft und über mehr als eine Nachmessung Bestand hat. Ändert sich die Reihenfolge bei einer Engine, während die anderen drei stillstehen, ist das fast immer das Modell, das anders gewählt hat, und nicht der Markt, der anders denkt.

Worauf beruht das, außer auf Ihrem Wort?

Auf drei Messungen, die nicht von uns stammen. PetraLabs stellte sechs Kauffragen 600 Mal pro Engine an einem Tag und fand, dass eine Sichtbarkeitszahl bei 21 Wiederholungen allein durch Zufall um bis zu 30 Prozentpunkte schwanken kann — und dass eine echte Verschiebung von 10 Punkten bei 50 Wiederholungen nur in 17 % der Fälle bemerkt wird. Deshalb nennen wir einen Unterschied erst dann eine Verschiebung, wenn er zweimal hintereinander unter der Basislinie liegt.

Stehen Sie im festen Kern oder im Karussell?

Das ist eine andere Frage als „werde ich genannt“, und es ist die entscheidende. Bei einem großen Teil der Fragen gibt es einen festen Kern aus einer Handvoll Namen, der in jeder Runde wiederkehrt, während der Rest wöchentlich rotiert. Zwei Unternehmen mit exakt derselben 50-Prozent-Punktzahl können daher gegensätzliche Fälle sein: das eine war in der Hälfte der Runden dabei und nächste Woche vielleicht nirgends, das andere steht seit Runde sechs jedes Mal dort.

Warum bekommen Sie nicht bei jeder Bewegung eine Meldung?

Weil eine Meldung, die zu oft anspringt, binnen einer Woche abgeschaltet wird und dann weniger wert ist als gar keine Meldung. Sie werden benachrichtigt, wenn ein Befund die Art wechselt oder wenn ein Sachfehler hinzukommt — das sind die beiden Fälle, in denen es wirklich etwas zu tun gibt.

Was kann Monitoring nicht sehen?

Wie viele Menschen Ihren Namen in einer KI-Antwort tatsächlich gesehen haben. Das misst niemand: In einem Chat gibt es keinen Impressionszähler, und jeder Anbieter, der so eine Zahl veröffentlicht, hat sie abgeleitet. Wir nennen es lieber beim Namen, als daraus eine Schätzung zu machen, die verlässlich aussieht.

Häufige Fragen

Wie oft wird erneut gemessen?

Das hängt von Ihrer Route ab und steht auf der Preisseite. Die Regel darunter ist für alle gleich: Eine Nachmessung nutzt dasselbe Promptset und denselben Markt wie die Nullmessung, sonst ist es keine Nachmessung, sondern eine neue Messung.

Kann ich sehen, was sich in der Antwort genau geändert hat?

Ja. Beide Antworten bleiben erhalten, Sie legen also den Text von vorher und nachher nebeneinander, mit den Quellen, die unter jedem lagen. Genau das kann ein Werkzeug, das nur einen Score speichert, nicht mehr zeigen.

Verfolgen Sie auch meine Position in Google?

Heute nicht. SEO gehört dazu und steckt bereits teilweise im Code — Technik und Lesbarkeit werden gemessen, Googlebot und Bingbot werden verifiziert, und Suchbegriffe mit ihrer Absicht werden genutzt. Positionsmessung steht auf der Bauliste, und bis es sie gibt, behauptet keine Seite, dass wir Positionen verfolgen.

Was, wenn eine Engine das Modell wechselt?

Dann steht das im Bericht, denn jede gemessene Antwort trägt das Modell, das tatsächlich geantwortet hat. Eine Verschiebung, die mit einem Modellwechsel zusammenfällt, ist eine Verschiebung der Engine und nicht Ihre — und diese Unterscheidung ist der Grund, warum wir das Modell aufbewahren.

Weiterlesen

Kostenlos, ohne Konto und ohne Karte.