Chatbot-KPIs sind Messwerte mit einem konkreten Ziel, etwa eine Supportfrage zu lösen oder einen qualifizierten Lead zu gewinnen. Das Nachrichtenvolumen ist eine Kennzahl. Die bestätigte Lösungsrate mit einem festgelegten Ziel ist ein KPI. Definieren Sie zuerst das Ergebnis, die berücksichtigten Gespräche und den nötigen Erfolgsnachweis.
Für Support eignen sich bestätigte Lösungen, unbekannte Ergebnisse und abgeschlossene Übergaben. Für die Nutzererfahrung kommen Zufriedenheit, Umfrage-Rücklaufquote und Antwortzeit hinzu. Ein Gespräch ohne menschlichen Eingriff ist nicht automatisch gelöst.
Definitionen und Formeln
Die folgenden Definitionen sind ein vorgeschlagenes Berichtsschema, kein allgemeiner Anbieterstandard. Berücksichtigen Sie echte Besuchergespräche für den gewählten Anwendungsfall und Zeitraum. Schließen Sie Tests und Spam nach einer dokumentierten Regel aus. Offene Gespräche bleiben bis zum Ende ihres Beobachtungsfensters separat. Für Prozentwerte wird jeder Bruch mit 100 multipliziert. Ein Nenner von null bedeutet nicht verfügbar, nicht 0 %.
| KPI | Formel | Ergänzende Angaben |
|---|---|---|
| Bestätigte Lösungsrate | Bestätigt durch den Bot gelöste Gespräche / berücksichtigte Gespräche | Bestätigungsmethode und unbekannte Ergebnisse |
| Containment-Rate | Gespräche ohne erfasste menschliche Eskalation / berücksichtigte Gespräche | Erfassungsabdeckung und ungelöste Gespräche |
| Übergabe-Anforderungsrate | Gespräche mit Bitte um menschliche Hilfe / berücksichtigte Gespräche | Angefordert, fehlgeschlagen und angenommen getrennt |
| Übergabe-Abschlussrate | Von Mensch oder Zielwarteschlange angenommene Übergaben / angeforderte Übergaben | Annahmenachweis, nicht Problemlösung |
| CSAT | Positive Bewertungen / gültige Bewertungen | Skala, Positivschwelle und Anzahl |
| Umfrage-Rücklaufquote | Gültige Antworten / Gespräche mit angebotener Umfrage | Auswahl der befragten Nutzer |
| Fallback-Rate | Besuchereingaben mit definiertem Fallback / berücksichtigte Besuchereingaben | Wissenslücken, Ablehnungen und Fehler getrennt |
| Interaktionsrate | Widget-Sitzungen mit Besuchernachricht / beobachtete Widget-Öffnungssitzungen | Einheitliche Sitzungsdefinition |
| Lead-Conversion-Rate | Verkaufsgespräche mit dedupliziertem qualifiziertem Lead / berücksichtigte Verkaufsgespräche | Qualifikationsregel und späterer Verkauf |
| Unbekanntes Ergebnis ohne Eskalation | Nicht eskalierte Gespräche ohne ausreichenden Ergebnisnachweis / berücksichtigte Gespräche | Fehlende Erfassung und mögliche Abbrüche |
Lösung, Containment und vermiedene Kontakte
Bestätigen Sie Lösungen durch eine ausdrückliche Rückmeldung zur Problemlösung, ein geprüftes Aufgabenergebnis oder eine dokumentierte Gesprächsbewertung. Eine gute Bewertung des Tons allein reicht nicht. Aus vermutetem Erfolg berechnete Raten gehören separat ausgewiesen. Auch Microsoft unterscheidet bestätigten und vermuteten Erfolg.
Schweigen, das Schließen des Widgets oder ein Tag ohne Rückkehr können Erfolg, Unterbrechung oder Aufgabe bedeuten. Ohne Nachweis bleibt das Ergebnis unbekannt. Erfassen Sie erneute Kontakte zum selben Problem innerhalb eines festgelegten Zeitfensters, soweit zulässig und beobachtbar. Benennen Sie nicht erfasste Kanäle.
Containment kann ungelöste Gespräche enthalten. Deflection bezeichnet dagegen die geschätzten vermiedenen menschlichen Kontakte gegenüber einer Situation ohne Bot. Dafür brauchen Sie vergleichbare Kontaktraten, möglichst eine geeignete Kontrollgruppe. Ein Vorher-nachher-Vergleich kann durch Besucherzahl oder Themenmix beeinflusst sein. Keine dieser Raten misst unmittelbar eingesparte Arbeitsstunden.
Rechenbeispiel mit 100 Gesprächen
Dieses Beispiel ist hypothetisch, keine Agentkit-Kundenmessung und kein Benchmark. Nach Ablauf des Beobachtungsfensters gibt es 45 bestätigte Bot-Lösungen ohne Eskalation, 20 angeforderte Übergaben und 35 Gespräche ohne Eskalation oder verlässliche Ergebnisbestätigung. Von den Übergaben wurden 15 angenommen, 5 schlugen fehl.
Nach dieser Berichtsdefinition zählen alle 20 erfassten Übergabeanforderungen als Eskalationen, auch die 5 fehlgeschlagenen Übergaben. Der Anteil unbekannter Ergebnisse ohne Eskalation schließt diese Anforderungen aus; ihre endgültige Lösung muss separat verfolgt werden.
Die bestätigte Lösungsrate beträgt 45/100 = 45 %, Containment 80/100 = 80 % und der Anteil unbekannter Ergebnisse ohne Eskalation 35/100 = 35 %. Die Ergebnisse eskalierter Anliegen werden zusätzlich verfolgt. Die Übergabe-Abschlussrate beträgt 15/20 = 75 %; eine angenommene Übergabe bestätigt keine Lösung.
Erhalten alle 100 eine Umfrage und antworten 10 mit 8 positiven Bewertungen, beträgt CSAT 8/10 = 80 % bei 10/100 = 10 % Rücklauf. Daraus folgt keine Zufriedenheit von 80 % aller Besucher. Vermiedene Kontakte und eingesparte Zeit bleiben ohne weitere Daten unbekannt.
Welche KPIs messen die Nutzererfahrung?
Betrachten Sie CSAT zusammen mit Rücklauf, unbekannten oder abgebrochenen Ergebnissen, Antwortzeit und Übergabe-Abschlussrate. Wenige freiwillige Bewertungen können unzufriedene Nutzer übersehen. Prüfen Sie auch Feedbackmöglichkeiten nach Eskalationen.
Messen Sie Antwortzeit ab dem Absenden bis zur ersten sichtbaren Antwort oder bis zur vollständigen Antwort. Benennen Sie den Endpunkt und berichten Sie Median und 95. Perzentil sowie Fehler und Zeitüberschreitungen. Eine schnelle falsche Antwort bleibt falsch.
Nachrichtentiefe ist die Zahl gezählter Nachrichten pro Gespräch. Geben Sie an, ob beide Seiten zählen. Lange Gespräche können hilfreich oder repetitiv sein; kurze können gelingen oder abbrechen. Unterscheiden Sie außerdem wiederkehrende Nutzer mit neuem Anliegen von erneuten Kontakten zum ungelösten Problem.
Ziele setzen und Verbesserungen prüfen
Eine universell gute Prozentzahl lässt sich für diese unterschiedlichen Aufgaben nicht begründen. Vergleichen Sie denselben Anwendungsfall, dieselbe Sprache, denselben Kanal und dieselben Messregeln. Zeigen Sie Zähler und Nenner. Kleine Stichproben und ein veränderter Themenmix begrenzen Schlussfolgerungen.
Erheben Sie eine vollständige Ausgangsperiode, ändern Sie einen Punkt und vergleichen Sie eine spätere vollständige Periode. Erforderliche Eskalationen sind kein Fehler. 60 % Containment bedeutet nicht 60 % weniger Arbeit. Messen Sie menschliche Kontakte und Bearbeitungszeiten separat.
Prüfen Sie Beispiele aus gelösten, unbekannten, eskalierten und Fallback-Gesprächen. Fallbacks können Wissenslücken, angemessene Ablehnungen oder technische Fehler sein. Die Chatbot-Optimierung hilft bei Inhalten, der Support-Leitfaden bei der Eingrenzung. Für Leads untersuchen Sie Absicht, Formularhürden und Angebot anhand der Leadgenerierung. Behalten Sie Ergebnisse beim Wechsel zwischen Chatbot und Live-Chat im Blick.
Verwenden Sie nur tatsächlich verfügbare Gesprächsdaten und Rückmeldungen. Dieser Messplan bedeutet nicht, dass Agentkit alle Formeln automatisch berechnet oder Nutzer über Supportkanäle hinweg zuordnet. Fehlen Ereignisse, kennzeichnen Sie die Kennzahl als nicht verfügbar und benennen Sie die nötige Erfassung oder manuelle Prüfung.
Chatbot kostenlos erstellen → Keine Kreditkarte erforderlich.
