Nvidia vill fylla den virtuella och fysiska världen med AI-avatarer

Nvidia har tillkännagett en ny plattform för att skapa virtuella agenter som heter Omniverse Avatar. Plattformen kombinerar ett antal diskreta teknologier – inklusive taligenkänning, syntetiskt tal, ansiktsspårning och 3D-avataranimering – som Nvidia säger kan användas för att driva en rad virtuella agenter.

I en presentation vid företagets årliga GTC-konferens visade Nvidias vd Jensen Huang upp några demos med Omniverse Avatar-teknik. I den ena talar en söt animerad karaktär i en digital kiosk ett par genom menyn på en snabbmatsrestaurang och svarar på frågor som vilka varor som är vegetariska. Karaktären använder ansiktsspårningsteknik för att upprätthålla ögonkontakt med kunderna och svara på deras ansiktsuttryck. “Detta kommer att vara användbart för smart detaljhandel, genomkörningar och kundservice”, sa Huang från tekniken.

I en demo användes Nvidias avatarteknik för att skapa en söt karaktär som pratade ett par genom en meny.

I en annan demo svarade en animerad leksaksversion av Huang på frågor om ämnen inklusive klimatförändringar och proteinproduktion, och i en tredje använde någon en realistisk animerad avatar av sig själv som en stand-in under ett konferenssamtal. Den som ringde var klädd i vardagskläder på ett livligt kafé, men deras virtuella avatar var smart klädd och talade utan att något bakgrundsljud träffade. Det här sista exemplet bygger på Nvidias Project Maxine-arbete, som syftar till att förbättra vanliga problem med videokonferenser (som strömmar av låg kvalitet och upprätthålla ögonkontakt) med hjälp av maskininlärningsfixar.

(Du kan se leksaksversionen av Huang i videon nedan, som börjar vid 28 minuter. Eller hoppa framåt till 1 timme, 22 minuter för att se kioskdemon.)

Tillkännagivandet av Omniverse Avatar är en del av Nvidias ofrånkomliga “omniversum”-vision – en storslagen del av varumärket för en otydlig samling teknologier. Liksom “metaversen” handlar “omniversum” i grunden om delade virtuella världar som möjliggör fjärrsamarbete. Men jämfört med visionen som lagts fram av Facebook-ägaren Meta, är Nvidia mindre angelägen om att transportera dina kontorsmöten till virtuell verklighet och mer om att replikera industriella miljöer med virtuella motsvarigheter och – i fallet med dess avatararbete – att skapa avatarer som interagerar med människor i den fysiska världen.

Som alltid med dessa presentationer såg Nvidias demos ganska snygga ut, men det är inte klart hur användbar den här tekniken kommer att vara i den verkliga världen. Med kioskens karaktär, till exempel, är det inte klart om kunderna faktiskt kommer att föredra den här typen av interaktiv upplevelse framför att bara välja de objekt de vill ha från en meny. Huang noterade i presentationen att avataren har en svarstid på två sekunder – långsammare än en människa och kommer att orsaka frustrationer om kunderna har bråttom. På samma sätt, även om företagets Project Maxine-teknik ser flashig ut, har vi ännu inte sett den göra en betydande inverkan i den verkliga världen.