Chatbot-Kennzahlen: die fünf Zahlen, die zählen

„Der Bot hat letzten Monat 1.000 Gespräche geführt" klingt nach einem Report. Ist es nicht. 300 dieser Besucher können genervt abgesprungen sein, die Zahl sähe exakt gleich aus. Wer unseren Kunden beim Verbessern ihrer Bots zusieht, erkennt schnell ein Muster: Die Teams, die vorankommen, verfolgen eine Handvoll konkreter Zahlen und ignorieren den Rest. Das sind die fünf, in der Reihenfolge, in der sie deine Aufmerksamkeit verdienen.

Vorweg: die Blender-Metriken

Gesprächsanzahl misst deinen Website-Traffic, nicht deinen Bot. Nachrichten pro Gespräch ist doppeldeutig: Ein langer Chat ist entweder ein interessierter Besucher oder einer, der viermal nachfragen muss. Antwortzeit ist beim Bot immer schnell und damit aussagefrei. Keine dieser Zahlen ändert, was du am Montag tust – und eine Metrik, die dein Verhalten nie ändert, ist Dekoration.

1. Unbeantwortete Fragen: die To-do-Liste deines Bots

Der Anteil der Fragen, die der Bot nicht aus deiner Wissensbasis beantworten konnte, ist die nützlichste Chatbot-Kennzahl überhaupt. Denn hinter jedem Eintrag steckt eine Anweisung: Das wollten deine Besucher wissen und haben es nicht erfahren. Es ist die einzige Metrik, die ihre eigene Lösung mitliefert.

Das funktioniert nur, wenn die unbeantworteten Fragen im Wortlaut gesammelt werden, nicht bloß gezählt. WebChatAgent führt die komplette Liste im Dashboard, der Kreislauf ist entsprechend kurz: Fragen lesen, fehlende Inhalte ergänzen, fertig. Ein frischer Bot startet oft mit einem zweistelligen Anteil und arbeitet sich runter – entscheidend ist die Richtung, nicht der Startwert.

2. Lösungsquote: wie oft kein Mensch nötig war

Die Lösungsquote (Containment) ist der Anteil der Gespräche, die ohne Übergabe an dein Team enden – kein Live-Chat, kein Ticket, kein „schreiben Sie uns eine Mail". Routinefragen mit dokumentierter Antwort machen bis zu 80 % des typischen Support-Aufkommens aus; ein gut gefütterter Bot sollte das meiste davon tragen.

Die Falle: 100 % als Ziel zu nehmen. Ein Bot, der nie übergibt, ist kein guter Bot, sondern eine Wand zwischen Kunden und Team. Die komplizierten, emotionalen, mehrdeutigen Fälle sollen eskalieren – am besten in eine Live-Chat-Übernahme mit angehängtem Verlauf. Lies die Lösungsquote deshalb immer zusammen mit dem Feedback: hohe Quote plus sinkende Bewertungen heißt, der Bot hält Leute fest, statt ihnen zu helfen.

3. Conversion: Sessions, die zu Lead oder Termin werden

Für die meisten Unternehmen ist der Bot kein Kostenpunkt mit Chatfenster, sondern der schnellste Ansprechpartner auf der Website. Also miss ihn wie einen Funnel-Schritt: Welcher Anteil der Sessions erzeugt einen Lead, einen gebuchten Termin, einen qualifizierten Kontakt? Das ist die Zahl, die dein Steuerberater als Antwort auf „was bringt uns das Ding" gelten lässt.

Sie ist auch die am besten steuerbare der fünf. In den Popup- und Trigger-Benchmarks, die wir ausgewertet haben, konvertieren Warenkorbabbruch-Nachrichten mit 17,12 %, Exit-Intent-Popups mit 3,94 % – dasselbe Feature, Faktor 4 Unterschied, entschieden allein dadurch, wann und wo sich der Bot meldet. Stagniert die Conversion, liegt der Hebel meist beim Trigger, nicht beim Bot.

4. Quellenquote: Antworten aus deinen Inhalten

Kaum jemand misst, welcher Anteil der Antworten auf der eigenen Wissensbasis fußt – seltsam, denn das ist das Frühwarnsystem gegen Halluzinationen. Eine Antwort mit Quelle in deinen Dokumenten lässt sich prüfen und verbessern. Eine frei formulierte Antwort ist eine Vermutung mit guter Grammatik.

WebChatAgent weist das als RAG-Nachrichten neben der Gesamtzahl aus. Sinkt der Quellenanteil bei stabilem Traffic, fragen Besucher nach Dingen, die deine Inhalte nicht abdecken – meist ist dann das Produkt schneller gewachsen als die Doku. Wo genau, steht in der Liste aus Kennzahl 1.

5. Feedback: Stichprobe, kein Urteil

Daumen hoch und runter leiden unter Auswahlverzerrung – es stimmen vor allem die Begeisterten und die Wütenden ab. Nimm das Verhältnis als Trendlinie, nicht als Note. Der echte Wert steckt in den einzelnen Negativ-Bewertungen: wöchentlich lesen. Jede ist entweder eine Inhaltslücke (Wissensbasis fixen), ein Tonproblem (System-Prompt fixen) oder eine falsche Erwartung (Begrüßungsnachricht fixen).

Der 20-Minuten-Wochenrhythmus

Die fünf Kennzahlen verdichten sich zu einer Routine, die vor dem ersten Montagskaffee durch ist:

• Minute 1–10: Unbeantwortete Fragen öffnen, die drei häufigsten nehmen, die fehlenden Inhalte ergänzen oder korrigieren.
• Minute 10–15: Jede Negativ-Bewertung der Woche lesen und einordnen: Inhalt, Ton oder Erwartung.
• Minute 15–20: Lösungsquote und Conversion anschauen. Richtung stimmt? Fertig. Fällt was? Der Grund steht fast immer in den zwei Listen, die du gerade gelesen hast.

Mehr Disziplin braucht es nicht. Chatbot-Analytics ist keine Reporting-Übung, sondern ein Feedback-Kreislauf im Kaffeelängen-Takt. Die Teams, deren Bots nach drei Monaten unheimlich kompetent wirken, sind nicht schlauer – sie lassen den Kreislauf nur nie ausfallen.