Warum KI-Antworten schwanken
KI-Sprachmodelle sind nicht deterministisch. Das heißt: Dieselbe Frage liefert nicht jedes Mal dieselbe Antwort. Mal wird Ihr Unternehmen genannt, mal ein anderes, mal in anderer Reihenfolge. Das ist kein Fehler, sondern liegt in der Natur dieser Systeme – sie würfeln bei jeder Antwort ein Stück weit neu.
Für die Messung bedeutet das etwas Unbequemes: Ein einzelnes Ergebnis ist ein Zufallszug, keine feste Tatsache. Wer nur einmal fragt, misst genau einen von vielen möglichen Ausgängen.
Ein einzelner Test ist Stichprobe eins
Stellen Sie sich vor, Sie würfeln einmal und wollen daraus schließen, wie oft eine Sechs fällt. Genau das tut ein einmaliger ChatGPT-Test. Werden Sie genannt, denken Sie „alles gut" – obwohl es reiner Zufall gewesen sein kann. Werden Sie nicht genannt, geraten Sie in Panik – obwohl Sie bei der nächsten Frage vielleicht ganz vorn gestanden hätten.
Beide Schlüsse sind wertlos, weil sie auf einer einzigen Stichprobe beruhen. Aussagekraft entsteht erst durch Wiederholung.
Wie man seriös misst
Eine belastbare Messung der KI-Sichtbarkeit folgt ein paar klaren Prinzipien:
- Jede Frage mehrfach stellen: Erst über mehrere Durchläufe zeigt sich, wie stabil Sie genannt werden.
- Über mehrere KIs messen: ChatGPT, Perplexity, Gemini und weitere ziehen aus unterschiedlichen Quellen. Sichtbarkeit in der einen bedeutet nicht Sichtbarkeit in der anderen.
- Nennungs-Rate in Prozent statt Ja/Nein: „In 7 von 10 Durchläufen genannt" sagt viel mehr als ein einzelnes „ja".
- Auf Position, Ton und Quellen achten: Werden Sie zuerst oder beiläufig genannt? Positiv oder neutral? Und worauf stützt sich die KI?
- Wettbewerber mitmessen: Wer taucht stattdessen oder zusätzlich auf? Das zeigt, gegen wen Sie in der Antwort antreten.
Warum das von Hand kaum geht
Rechnen Sie kurz nach: mehrere Kauffragen, jede mehrfach wiederholt, über mehrere KIs – das sind schnell dutzende bis hunderte Einzelabfragen, die Sie sauber protokollieren und auswerten müssten. Von Hand ist das kaum zuverlässig zu schaffen, und schon gar nicht regelmäßig. Deshalb automatisiert man diese Messung: Ein Werkzeug stellt die Fragen systematisch, mehrfach, über alle relevanten KIs und verdichtet das Ergebnis zu einer nachvollziehbaren Rate.
Einmal messen reicht nicht
Und selbst die beste Momentaufnahme ist nur das: eine Aufnahme von heute. KI-Sichtbarkeit ändert sich laufend – neue Quellen, neue Modellversionen, aktivere Wettbewerber. Wer sichergehen will, muss nicht einmal, sondern fortlaufend messen und die Entwicklung beobachten. Nur so erkennen Sie rechtzeitig, wenn Sie aus der Empfehlung rutschen – oder ob Ihre Maßnahmen wirken.