Wie du deinen Agenten in der Pilotphase am besten Testest

Last updated: July 29, 2025


Warum gutes Testen entscheidend ist

Ein strukturiertes Pilot-Testing liefert dir in nur zwei bis drei Wochen wertvolle Erkenntnisse, damit dein Agent schneller erfolgreicher wird und du zügiger mit Live-Tests bei echten Kunden starten kannst.


1. Erster Testanruf

1.1 Testkontakt anlegen

  • Melde dich in der telli-App an.

  • Wechsle zu Kontakte.

  • Klicke auf Neuen Kontakt hinzufügen, fülle die Daten aus und speichere.

Add Contact GIF.gif

1.2 Testanruf starten

  • Wähle deinen neu angelegten Kontakt.

  • Klicke auf Anrufen, nimm den eintreffenden Anruf an und führe ein natürliches Gespräch mit dem Agenten.

Initiate Call GIF.gif

2. Prüf-Kriterien

2.1 Gesprächsablauf und Skript

  • Fragen­genauigkeit: Stellt der Agent die richtigen Fragen zum passenden Zeitpunkt?

  • Formulierung: Klingt die Wortwahl klar und freundlich für deine Zielgruppe?

2.2 Audio & Aussprache

  • Achte auf Stottern, Knacken oder ungewöhnliche Betonungen.

  • Notiere Wörter, die der Agent regelmäßig falsch ausspricht.

2.3 Tool-Integration

  • Funktionieren externe Tools (z. B. Terminbuchung) zuverlässig?

  • Wie verhält sich der Agent, wenn ein Tool-Aufruf fehlschlägt?

2.4 Analyse der Gesprächsergebnisse

  • Trefferquote: Erfasst die Zusammenfassung alle wichtigen Punkte?

  • Formatierung: Ist die Ausgabe für dein CRM oder Reporting in der gewünschten Struktur?


3. Selbst behebbare Probleme

  1. Falsches Verhalten im Gespräch

    • Passe den System-Prompt an, um Logik oder Ablauf zu korrigieren.

    • Dazu haben wir einen eigene Artikel

  2. Aussprache- oder Audiofehler

    • Wechsel die Stimme oder justiere phonemische Schreibweisen im Prompt.


4. Detailliertes Feedback geben

Wir empfehlen dir, zunächst zu versuchen, ein Problem selbst zu beheben indem du Prompts, Stimmen oder Einstellungen anpasst und einen Downvote erst dann abzugeben, wenn das Problem wirklich außerhalb deiner Kontrolle liegt.

4.1 Feedback auf einzelnen Nachrichten

Transcript Feedback.gif

Gib einen Downvote auf für einen bestimmte Agenten-Nachricht nur ab, wenn eine einzelne Nachricht ein Problem aufweist, das du nicht selbst beheben kannst:

Downvote, wenn (nicht selbst behebbar):

  • Tool‑Fehler (z. B. getAvailableSlots liefert keine Slots)

  • Audio‑Abbrüche oder Latenzprobleme, die durch Prompt‑ oder Stimmänderungen nicht behoben werden können

Meist selbst behebbar

  • Inhaltsfehler (falsche Antwort oder übersprungene Frage) – aktualisiere deinen System‑Prompt. Hier ist unsere vollständige Anleitung:📄 User Manual: Agent Prompt Editor

  • Rechtschreibung/Aussprache in dieser Nachricht – wechsle die Stimme oder füge deinem Prompt einen Abschnitt zur Aussprache eines Wortes hinzu.


4.2 Feedback zur Call-Analyse

Call Analysis Feedback.gif

Verwende einen Downvote auf Analyse‑Ebene, wenn es sich um einen Analysepunkt handelt.

Downvote, wenn (nicht selbst behebbar):

  • Fehler bei der Analyse (z. B. falscher oder fehlender Name, Datum, Betrag)

  • Auslassungen in der Anrufanalyse (wichtige Punkte fehlen)

Beispiel‑Feedback:

„Der Analysepunkt customer_name hat ‚Christie‘ statt ‚Christina‘ extrahiert.“


5. Anzahl der Testaufrufe

Führe 2–5 Testanrufe durch, nimm Anpassungen vor und wiederhole diesen Zyklus dreimal, bis du dich sicher fühlst. Passe die Anzahl nach Bedarf an – entscheidend ist, dass du mit dem Ergebnis zufrieden bist.


6. Hilfe & Kontakt

Bei Fragen oder Problemen schreib uns einfach über den In-App-Kontaktkanal. Wir melden uns umgehend bei dir.