Fish Audio heeft Live 3 geïntroduceerd, een spraakmodel voor agents dat luistert terwijl het spreekt. Volgens het bedrijf kan het model een beller laten weten dat het die hoort, wachten tot de beller is uitgesproken of stoppen wanneer die van onderwerp verandert. De kortste gemelde reactietijd is 186 milliseconden.
Deze aanpak moet aansluiten bij het onregelmatige ritme van gewone telefoongesprekken. Iemand kan even pauzeren om een telefoonnummer op te zoeken, ‘ja’ zeggen om te laten merken dat die luistert, of een bestelling aanpassen voordat de zin af is. Fish Audio zegt dat Live 3 kort ‘mm-hmm’ of ‘oké’ kan zeggen zonder het gesprek over te nemen, en kan doorpraten als de beller alleen even bevestigt dat die luistert.
Timing zit ingebouwd in het model
Fish Audio stelt dat een snel antwoord niet altijd goed getimed is. Veel spraakagents coördineren spraakherkenning, redeneren, spraakgeneratie en beurtwisseling via afzonderlijke onderdelen van een systeem. Live 3 brengt gesprekstiming daarentegen onder in het spraakmodel, aldus het bedrijf.
Volgens medeoprichter en CEO Rissa Cao van Fish Audio is het model getraind op gesprekken tussen mensen om te leren wanneer het moet bevestigen, wachten, antwoorden of stoppen. De voorbeelden van het bedrijf gaan onder meer over een beller die een nummer in delen doorgeeft en iemand die halverwege een bestelling voor pizza aanpast. Dit zijn demonstraties van Fish Audio, geen onafhankelijke tests van de prestaties van Live 3 tijdens verschillende gesprekken of in rumoerige omgevingen.
Waar kunnen mensen Live 3 gebruiken?
Volgens Fish Audio is Live 3 beschikbaar via het Agent Platform en de API van het bedrijf. Voor ondernemingen is implementatie op locatie mogelijk. Bij de introductie ondersteunt het model Engels. Klanten leveren zelf de instructies, tools en workflows voor hun agents; Live 3 verzorgt de spraak en de timing van het gesprek.
Waarom het ertoe doet
Voor bedrijven die telefoonagents bouwen voor reserveringen, bestellingen of klantenservice is Live 3 bedoeld om bellers zichzelf te laten corrigeren of te laten onderbreken zonder het gesprek opnieuw te hoeven beginnen. Fish Audio heeft geen onafhankelijke resultaten over de prestaties gedeeld, dus het is onduidelijk hoe betrouwbaar het model echte gesprekken afhandelt.
