Ervaar Vietnamees sprekende AI MC op AI4VN 2023

Met 10 uur aan gespreksgegevens en één uur opnames creëert Saltlux een MC en AI-assistent die vloeiend Vietnamees kan verstaan ​​en communiceren.

De AI Assistant en Metahuman (het herscheppen van echte mensen in de virtuele ruimte) van Saltlux behoren tot de modellen die veel aandacht hebben getrokken van bezoekers van de AI Expo-tentoonstelling in het kader van het Vietnam Artificial Intelligence Festival ( AI4VN 2023 ), dat plaatsvindt in Ho Chi Minhstad.

AI-assistenten kunnen op een vergelijkbare manier werken als populaire chatbots zoals ChatGPT, maar kunnen in veel contexten flexibel en accuraat in het Vietnamees communiceren. Metahuman maakt ondertussen veel mensen enthousiast door een kopie van een persoon in de digitale omgeving te maken.

Deze twee modellen kunnen worden gecombineerd om een ​​interessante MC AI-versie te creëren die in het Vietnamees kan communiceren en waarbij de informatie in realtime wordt bijgewerkt.

Bezoekers ervaren de AI-assistent- en Metahuman-modellen op de AI4VN-tentoonstelling die op 21 september in Ho Chi Minhstad wordt gehouden. Foto: Khuong Nha

De technologie van Saltlux stelt een persoon in staat om een ​​kopie van zichzelf te maken na een uur opname en ongeveer 10 uur gesprek. Nadat voldoende beeldgegevens zijn verzameld, kopieert de AI automatisch de beelden, gezichtsuitdrukkingen, bewegingen en intonatie van een echt persoon, simuleert deze als een virtuele ceremoniemeester en kan deze in veel verschillende contexten worden gebruikt.

Om de gezichtskenmerken en -uitdrukkingen van elke persoon nauwkeurig te kunnen beschrijven, heeft de ontwikkelaar een groot aantal technologieën voor kennisgraafherkenning geïntegreerd. Zo zijn semantische segmentatie, houdingschatting, gezichtsherkenning, handgebaren, classificatie van leeftijdsgroepen en geslacht mogelijk. De virtuele MC-versie lijkt daardoor bijna op de echte versie en gewone gebruikers zullen het verschil nauwelijks merken.

Vervolgens verwerkt de stemanalysetechnologie de natuurlijke taal om de stem en intonatie van de echte persoon nauwkeurig te reproduceren voordat deze in het virtuele MC-model wordt opgenomen. Saltlux maakt gebruik van het Hybrid-Tacotron deep learning-model, waardoor de AI zowel de midden- als hoge stemmen van echte mensen kan nabootsen, wat zorgt voor maximale stabiliteit en personalisatie.

De spraaksynthese-engine die tekst naar spraak omzet en vice versa (spraak naar tekst) zorgt ervoor dat de AI MC en de persoon direct en soepel in het Vietnamees met elkaar kunnen communiceren.

In realistische situaties met veel lawaai hoort de MC AI van Saltlux de gesproken tekst nog steeds volledig en zet deze om in geschreven tekst, voordat de toegewezen opdrachten worden uitgevoerd. De AI herkent accenten uit verschillende regio's goed en reageert snel op content wanneer gebruikers plotseling van onderwerp veranderen. Gebruikers kunnen met de AI communiceren via spraak, slepen en neerzetten van opdrachten of tekst intypen in de chatbox.

Een van de pluspunten van deze Vietnameestalige AI MC is de nauwkeurigheid van de antwoorden. In plaats van te denken aan antwoorden zoals bij ChatGPT, heeft Saltlux maximale controle over de antwoorden door elk veld te verdelen. Zo haalt AI bij actueel nieuws alleen nieuws uit gerenommeerde kranten. Na het synthetiseren en weergeven van de resultaten, citeert de AI de artikelen, zodat gebruikers direct toegang hebben tot de link als ze dieper willen lezen.

Bij het stellen van vragen over een toeristische bestemming bereidt de ontwikkelaar de content vooraf voor en plaatst deze in verschillende contexten om de vraag van de gebruiker te voorspellen en zo met hoge nauwkeurigheid passende antwoorden te geven. Door elk contentgebied te verdelen en flexibel te zijn in het creëren van invoer- en uitvoerfilters, wordt de "illusie" van zelfbedachte antwoorden door AI-chatbots aanzienlijk verminderd.

In Korea heeft dit AI-model de "Goodpy National Assistant" gecreëerd, die door de overheid wordt gebruikt om openbare administratieve diensten te verlenen aan 20 miljoen mensen. In Vietnam werden het AI-model en de virtuele MC twee jaar geleden onderzocht en beheerd door Saltlux. Een van de meest prominente toepassingen is de virtuele gids in het Tam Chuc Pagoda-complex. Het systeem helpt bezoekers niet alleen bij het beantwoorden van vragen, het begeleiden, het geven van aanwijzingen en het uitleggen van informatie over elke locatie, maar kan ook de locatie van elke persoon in realtime nauwkeurig bepalen en zo passende instructies geven.

De interface van het Ploonet Studio-platform stelt gebruikers in staat om content met AI te creëren zonder dat ze daarvoor krachtige apparaten nodig hebben. Foto: Khuong Nha

Zodra u een virtuele MC en stem hebt, kunnen gebruikers de inhoud en hostingstijl op het Ploonet Studio-platform aanpassen om massaal video's te produceren.

De interface van Ploonet Studio is ook eenvoudig: gebruikers hoeven slechts te klikken en ongeveer twee minuten te wachten. Het systeem publiceert dan een nieuwe video. Alles gebeurt op de cloudserver, dus er is geen terminalconfiguratie nodig. Op CES 2023 in Las Vegas werd het Ploonet Studio-platform bekroond met de Innovation Award.

Een vertegenwoordiger van Saltlux gaf aan dat hun AI-model de werkefficiëntie met 20% verbetert en de bedrijfskosten met meer dan 30% verlaagt, waardoor er 24/7 een hoge beschikbaarheid is.

Om dit MC AI-model te kunnen gebruiken, moeten gebruikers twee tarieven betalen. Een vast tarief voor het creëren van echte mensen in een virtuele ruimte. De prijs van het pakket varieert afhankelijk van de moeilijkheidsgraad van de klant. Het tweede tarief betreft het maken van video's in Ploonet Studio, dat per uur wordt berekend. Saltlux heeft geen specifieke prijzen voor individuele klanten bekendgemaakt. Het bedrijf richt zich op zakelijke klanten, organisaties en overheden.

Vnexpress.net