So messen Sie die Leistung von KI-Sprachagenten: Die Kennzahlen, auf die es ankommt

Die meisten Anbieter von Sprachagenten geben die Ablenkungsrate an – den Prozentsatz der Anrufe, die die KI ohne einen Menschen bearbeitet. Diese Zahl lässt sich leicht aufblähen und ist ein schlechter Indikator für die tatsächliche Leistung. Die wichtigen Kennzahlen messen, ob Probleme gelöst wurden, die Kunden zufrieden waren und ob die Wirtschaftlichkeit funktionierte.

Primäre Kennzahlen

• Lösungsrate – Prozentsatz der KI-abgewickelten Anrufe, bei denen das Problem vollständig gelöst wurde. Gemessen am Ausbleiben eines erneuten Kontakts innerhalb von 48 Stunden und/oder einer Bestätigung nach dem Anruf.
• Kundenzufriedenheit (CSAT) – Ergebnisse der Umfrage nach der Interaktion für KI-abgewickelte Anrufe im Vergleich zu von Menschen abgewickelten Anrufen. Der Abstand sollte sich mit der Zeit verringern.
• Kosten pro Lösung – Gesamtkosten der Plattform dividiert durch erfolgreich gelöste Interaktionen. Vergleichen Sie direkt Ihre Kosten pro menschlicher Lösung.
• First Contact Resolution (FCR) – Prozentsatz der Probleme, die in einer einzigen Interaktion ohne Rückruf oder Eskalation gelöst wurden.
• Durchschnittliche Bearbeitungszeit (AHT) – wie lange KI-Gespräche im Vergleich zu menschlichen Äquivalenten dauern. Kürzer ist nicht immer besser, wenn es eine unvollständige Auflösung bedeutet.

Diagnosemetriken

• Eskalationsrate und Gründe – wie viel Prozent der Anrufe erfordern eine menschliche Übergabe und warum? Dies deckt Wissenslücken und Probleme beim Flussdesign auf.
• Drop-off-Punkte – wo im Gespräch legen Anrufer auf? Frühzeitiges Absetzen deutet auf Reibungen bei der Begrüßung oder Identifizierung hin.
• Absichtsgenauigkeit – Erkennt der Agent beim ersten Versuch richtig, was Anrufer wollen?
• Häufigkeit von Wissenslücken – wie oft stößt der Agent auf Fragen, die er nicht beantworten kann? Dies sind Content-Möglichkeiten.

Aufbau eines Messrahmens

Stellen Sie vor der Bereitstellung alles auf den Prüfstand. Messen Sie Ihre aktuellen menschlichen Kennzahlen (AHT, FCR, CSAT, Kosten pro Anruf) für genau die Anruftypen, die Sie automatisieren. Vergleichen Sie die KI-Leistung nach der Bereitstellung mit dieser Basislinie – nicht mit der theoretischen Perfektion. Setzen Sie realistische Ziele: 80 % Lösungsrate im ersten Monat, Verbesserung auf 90 %+, wenn Sie Wissensdatenbanken und Abläufe auf der Grundlage von Analysedaten verfeinern. Für diese kontinuierliche Verbesserungsschleife ist eine Plattform mit Analysen auf Konversationsebene unerlässlich, mit der Sie einzelne Fehler genauer untersuchen können.