Nvidias AI skapar naturtrogna ansiktsanimationer utifrån tal

Nvidias AI-baserade ansiktsanimationsteknik här kombinerad med Remedys spelmotor Northlight.

Den snabba utvecklingen inom AI gör att det snart kommer finnas helt digitala skådespelare där både ansiktsanimationer och röster har skapats i en dator. Ett av de första tillämpningsområdena för denna teknik blir förmodligen i dialogdrivna datorspel.

Nvidia har i samarbete med spelutvecklaren Remedy, som ligger bakom spel som Max Payne, Alan Wake och Quantum Break, utvecklat en AI som via ett DNN (Deep Neural Network) i realtid kan skapa naturtrogna ansiktsanimationer i 3D utifrån inspelat tal. DNN-nätverket tränas först upp via endast 3-5 minuters högkvalitativa videoinspelningar, via nio HD-kameror, av en talande människas ansikte. AI:n kan utifrån denna data generalisera för att lista ut ansiktsanimationerna för ytterligare ord. Tekniken visade sig fungera inte bara för den aktuella skådespelaren som videofilmades utan gav, enligt Nvidia, rimliga resultat även när röster från personer med olika kön, accent eller språk användes. Fortsätt läsa ”Nvidias AI skapar naturtrogna ansiktsanimationer utifrån tal”

Veckans videor: RoboCup 2017, Robo-One och volleybollrobot

RoboCup firar 20 år i år och återvänder till staden där allt började. Foto: Skärmdump från YouTube

Robo-One är en populär robottävling som startade i Japan 2002. Där tävlar små bipedala robotar mot varandra i en slags boxningsring där det gäller att slå omkull motståndaren. Hittills har dock robotarna fjärrstyrts av människor men nu har man anordnat det första Robo-One med helt autonoma robotar. De måste därmed helt förlita sig på sina ombordsensorer (takkameror är ej tillåtna) för att kunna känna av var motståndaren är. Fortsätt läsa ”Veckans videor: RoboCup 2017, Robo-One och volleybollrobot”

Dokumentär om mänskliga och artificiella röster

Skärmdump från SVT Play

I onsdags visade SVT dokumentären ”Vår unika röst” från 2013 där sista halvan handlade om robotar och syntetiska röster.

”Mysteries of the Human Voice”, som är originaltiteln på denna dokumentär, handlar om vår mänskliga röst och vad den betyder för oss. I den sista halvan av filmen tar man upp utvecklingen av talsynteser, robotar som använder dem och hur vi människor reagerar på dessa röster. Fortsätt läsa ”Dokumentär om mänskliga och artificiella röster”

Fritz är ett animatroniskt robothuvud i byggsats

Fritz heter ett animatroniskt robothuvud som nyligen nådde sitt finansieringsmål på Kickstarter. Roboten säljs som byggsats och i sann open source-anda kommer utvecklarna XYZbot även släppa ritningarna till hårdvaran samt koden för mjukvaran fri för modifikationer.

Syftet är att göra uttrycksfylla robotansikten mer tillgängliga för vanligt folk, då dessa ofta är ganska dyra. Fritz baseras på Arduino, ett antal servon och laserutskurna trädelar som man får bygga ihop själv. Har man tillgång till en 3D-skrivare kan man skriva ut delarna själv och spara en slant. Fortsätt läsa ”Fritz är ett animatroniskt robothuvud i byggsats”

Veckans videor: Kortfilm, spionplan och robotsvärmar

I veckans videor blir det bland annat kortfilmen True skin, lite mer robotdans, autonoma flygfarkoster och fordon samt en robotsvärm som spelar Beethoven.

Det har även gjorts nya genombrott inom taligenkänningstekniken. Under ett event i Kina i början av månaden demonstrerade Microsoft Research en ny teknik som inte bara kan konvertera ett vanligt samtal till text utan även översätta texten till kinesiska med korrekt ordföljd som därefter läses upp med talsyntes. Därmed kan man få talad engelska översatt till talad kinesiska nästan i realtid. Fortsätt läsa ”Veckans videor: Kortfilm, spionplan och robotsvärmar”