AILab Howest

Howest Logo

/

Project in de kijker: Avatalk

Binnen het Tetra project Avatalk, gefinancierd door VLAIO, onderzoeken Mensenmaat, DAE Research en AI Lab of AI een meerwaarde kan betekenen voor het inoefenen van uitdagende gesprekken zoals evaluaties, ontslagen of waar er een conflict is tussen meerdere personen.

Om aan de nood vanuit onze eigen opleidingen en het werkveld gemoed te komen zullen we tijdens de looptijd van dit onderzoekstraject een applicatie uitwerken waarin er via tekst, audio en video geconverseerd kan worden met een AI gestuurde persona die gebaseerd zijn op realistische scenario’s.

Cover image

Quick facts

  • /

    AI als oefenpartner voor soft skills

  • /

    Conversatie via tekst, audio en video

  • /

    Feedback op basis van automatische analyse

De applicatie

Applicatie

Dashboard

Het hart van onze applicatie is het dashboard. Hier kunnen gebruikers een overzicht terugvinden van de voor hen beschikbare gesprekspartners.

Admins kunnen ook nieuwe gesprekspartners aanmaken om zo nieuwe scenario’s en oefeningen op te stellen voor hun personeel/studenten.

Na het selecteren van een gesprekspartner krijgt de gebruiker een overzicht van de situatie en welk resultaat ze moeten bekomen tijdens het gesprek. Nadat ze deze informatie hebben doorgenomen kunnen ze ofwel een chat starten om de conversatie te beginnen of een audio call starten.

Chat

Als je een chat gesprek opstart kom je in een typische “chat window” terecht waarin je kan converseren met de AI-persona.

Het is ook mogelijk om nog eens de context van dit gesprek na te kijken door “info over het gesprek” aan te klikken of de hele system prompt te bezichtigen via de “system prompt” optie.

Eens dat de beoogde resultaten in het gesprek gehaald zijn kan de conversatie worden afgesloten en wordt er een automatische evaluatie opgesteld.

Voice Call

Het is ook mogelijk om een audiogesprek te voeren met de AI-persona door “start call” aan te klikken.

Dan kom je terecht in een Microsoft-teams achtige omgeving waarin je jouw gesprek kan voeren. Voor de rest is het concept hetzelfde, eens dat je de conversatie afsluit zal een transcript van deze conversatie naar het dashboard verstuurd worden voor de feedback analyse.

Volgende stappen

De volgende stap is het implementeren van de avatar laag als ook de voice modus verder uit te rollen naar de testgebruikers toe.

Eens dat de tool grondig getest is geweest gaan we ook aan de slag met concrete cases aangeleverd door onze begeleidingsgroep om de impact van deze applicatie meetbaar te maken.

Wens je op de hoogte te blijven? Volg DAE Research, Mensenmaat en AI Lab op LinkedIn.

Authors

  • /

    Jens Eeckhout, AI & XR researcher

Want to know more about our team?

Visit the team page