Qualität prüfen
Automatisierung, die niemand prüft, driftet ab. Diese Seite ist die Routine zum Prüfen und die Zuordnung von Symptom zu Lösung.
Die wöchentliche Prüfung
Zwanzig Minuten, einmal die Woche.
1. Lesen Sie fünf KI-Antworten vollständig. Nicht die Zusammenfassungen — die tatsächlichen Antworten, in Konversationen, die Sie nicht selbst bearbeitet haben. Stellen Sie eine Frage zu jeder: hätte ich das so gesendet?
2. Sehen Sie sich die wiedereröffneten Konversationen an. Eine automatisch geschlossene und vom Kunden wieder geöffnete Konversation ist eine fehlgeschlagene Antwort, klar und deutlich. Lesen Sie, was der Kunde zurückgeschrieben hat.
3. Prüfen Sie den Stapel ohne Klassifizierung. Konversationen, die der Assistent nicht einordnen konnte, sind eine Landkarte der Lücken in Ihrem Katalog und Ihrer Wissensdatenbank.
4. Sehen Sie sich die vier Zahlen auf Kennzahlen an: Abschlussrate, erste Antwortzeit, KI-Antwortanteil und positive Stimmung.
Was die Zahlen zusammen bedeuten
Keine einzelne Zahl sagt viel. Die Paare tun es.
KI-Anteil steigt, Stimmung sinkt. Der Assistent antwortet mehr und schlechter. Grenzen Sie die Kategorien ein, in denen er antworten darf, oder heben Sie die Zuversichtsschwelle an, und finden Sie die Artikel hinter den schlechten Antworten.
KI-Anteil steigt, Stimmung bleibt. So sieht es aus, wenn es funktioniert. Vorsichtig ausweiten.
Abschlussrate steigt, Wiedereröffnungen steigen. Konversationen werden geschlossen statt gelöst. Meist automatisches Schließen in einer Kategorie, in der Kunden antworten.
Erste Antwortzeit sinkt, sonst alles gleich. Der Assistent nimmt die Routinefragen ab. Das ist der Hauptgewinn.
Übergaben steigen. Entweder fragen Ihre Kunden Neues, oder Ihre Wissensdatenbank ist gegenüber Ihrem Produkt veraltet. Der Stapel ohne Klassifizierung sagt Ihnen, welches.
Symptom und Lösung
| Was Sie sehen | Wo die Lösung liegt |
|---|---|
| Selbstbewusste, aber falsche Antworten | Der Artikel dahinter: veraltet, mehrdeutig oder einem anderen widersprechend |
| „Dazu habe ich keine Informationen" bei etwas, das Sie dokumentiert haben | Der Artikel ist da, wird aber nicht gefunden. Titel in Kundensprache umschreiben und die Antwort in den ersten Absatz setzen |
| Richtige Fakten, falscher Ton | Der Identitäts-Prompt oder ein Prompt der Kategorie |
| Richtige Antwort auf die falsche Frage | Beschreibungen der Klassifizierungen zu vage, oder zwei Kategorien überschneiden sich |
| Antworten zu lang oder zu kurz | Der Identitäts-Prompt. Geben Sie eine Zahl vor |
| Antworten in der falschen Sprache | Der Verhaltens-Prompt sollte sagen, in der Sprache des Kunden zu antworten |
| Zu viele Übergaben | Die Wissensdatenbank ist zu dünn. Die nicht klassifizierten Konversationen nennen die fehlenden Artikel |
| Zu wenige Übergaben bei schlechten Antworten | Zuversichtsschwelle anheben |
Das Muster: Fakten leben in der Wissensdatenbank, Ton lebt in Prompts, Verteilung lebt in Klassifizierungen. Eine Tatsache in einem Prompt zu korrigieren oder ein Tonproblem in einem Artikel ist der häufigste vergeudete Nachmittag.
Nebenbei korrigieren
Zwei Gewohnheiten kosten nichts und wirken kumulativ:
Klassifizierungen korrigieren, wenn sie falsch sind. Eine korrigierte Klassifizierung wird zu einem bestätigten Beispiel, das schwerer wiegt als eine von der KI gesetzte.
Den Artikel schreiben, wenn Sie etwas zum zweiten Mal beantworten. Das zweite Mal, dass Sie dieselbe Erklärung von Hand tippen, ist das Signal, und es kostet fünf Minuten.
Wann ausweiten
Weiten Sie die Automatisierung einer Kategorie aus, wenn zwei Wochen lang:
- Sie die Entwürfe unverändert gesendet hätten.
- Kein Kunde nach einer automatischen Antwort verwirrt zurückgeschrieben hat.
- Die Stimmung in dieser Kategorie stabil geblieben ist.
Weiten Sie eine Kategorie nach der anderen aus, damit Sie bei Problemen wissen, was sich geändert hat.
Wann zurückziehen
Stellen Sie eine Kategorie sofort auf Entwurf zurück, wenn eine falsche Antwort einen Kunden bei etwas Wichtigem erreicht — Geld, Sicherheit, eine rechtliche Zusage. Entwürfe kosten Sie ein paar Minuten am Tag und beseitigen die ganze Problemklasse, während Sie den Artikel dahinter korrigieren.