May 2, 2024

Neueste Funktionen (Anrufanalyse, Backchanneling) und Python-Custom-LLM-Update

1. Verbessertes Call Monitoring

Sprach-KI-Agent Assistant

Anrufanalyse:  Wir haben Metriken wie Call Completion Status, Task Completion Status, User Sentiment, Average End-to-End Latency und Network Latency fĂĽr ein umfassendes Monitoring eingefĂĽhrt. Sie können direkt ĂĽber das Dashboard oder per API darauf zugreifen.

Nachverfolgung des Trennungsgrundes: Erhalten Sie Einblicke in Anrufprobleme durch die Ergänzung von "Disconnection Reason" im Dashboard und im "get-call"-Objekt. Weitere Details finden Sie in unserer Fehlercode-Tabelle.

Nachverfolgung von Function Calls: Transkripte enthalten jetzt Ergebnisse von Function Calls und bieten eine nahtlose Ansicht darüber, wann und mit welchen Ergebnissen diese ausgelöst wurden. Verfügbar im Dashboard und in der get-call-API. Nutzer von benutzerdefiniertem LLM können das tool call invocation event und das tool call result event verwenden, um uns die Ergebnisse von Function Calls zu übergeben, sodass Sie das eingewobene Transkript nutzen und im Dashboard sehen können, wann Ihre Funktion ausgelöst wird.

2. Neue Funktionen

Reminder-Einstellungen: Sie können jetzt Reminder-Einstellungen konfigurieren, um die Dauer der Stille festzulegen, bevor ein Agent mit einer Antwort nachfasst. Mehr erfahren.

Backchanneling: Backchannel ist die Fähigkeit des Agenten, während der Sprache des Nutzers kleine Geräusche wie „aha“, „ich verstehe“ usw. von sich zu geben, um das Engagement im Anruf zu verbessern. Sie können festlegen, ob es aktiviert wird, wie häufig es ausgelöst wird und welche Wörter verwendet werden. Mehr erfahren.

„Zahlen langsam vorlesen“: Optimieren Sie das Vorlesen von Zahlen (oder allem anderen), indem Sie sicherstellen, dass es langsam und deutlich vorgelesen wird. So lesen Sie langsam vor.

Metadata-Event für benutzerdefiniertes LLM: Übergeben Sie mit dem neuen Metadata-Event Daten von Ihrem Backend an das Frontend während eines Anrufs. API-Referenz ansehen.

3. GroĂźes Upgrade fĂĽr Python Custom LLM (Wichtig)

Verbesserte async-OpenAI-Performance für bessere Latenz und Stabilität. Bestehenden Nutzern von Python Custom LLM wird dringend empfohlen, auf die neueste Version zu aktualisieren.

Doku ansehen

4. Webhook-Sicherheit

Verbesserte Webhook-Sicherheit mit der Signatur-Funktion "verify" im neuen SDK. Ein Codebeispiel finden Sie in den Custom-LLM-Demo-Repositorys und in der Dokumentation.

Zusätzlich enthält der Webhook eine temporäre Aufnahme für Nutzer, die sich gegen die Speicherung entscheiden; bitte beachten Sie, dass diese Aufnahme nach 10 Minuten abläuft.

Doku ansehen

Das Video dieser Woche

Wir wurden in der neuesten Folge des Podcasts Lightcone von Y Combinator erwähnt.

Revolutionize your call operation with Retell