Nvidia a anunțat că pune la dispoziția publicului în regim open source tehnologia Audio2Face, un instrument bazat pe inteligență artificială capabil să genereze expresii realiste pentru avatare 3D pe baza unei înregistrări audio.
Urmărește cele mai noi producții video TechRider.ro
- articolul continuă mai jos -
Conform TheVerge, decizia permite dezvoltatorilor să utilizeze gratuit aplicația, framework-ul asociat și chiar cadrul de antrenare al modelelor, ceea ce deschide noi oportunități pentru crearea de personaje virtuale în jocuri, aplicații sau transmisiuni live.
Audio2Face analizează așa-numitele „caracteristici acustice” ale unei voci pentru a produce date de animație, care sunt apoi mapate pe expresiile faciale și pe mișcarea buzelor unui avatar 3D.
Practic, o simplă înregistrare vocală este transformată într-o secvență de animație sincronizată, fără a fi nevoie de un proces complex de captură a mișcării. Potrivit companiei, această soluție poate fi folosită atât pentru conținut pre-scriptat, cât și pentru transmisii live, unde avatarele 3D pot reacționa în timp real la vocea utilizatorului.
Nvidia subliniază că deschiderea tehnologiei vine ca răspuns la cererea tot mai mare de instrumente accesibile și flexibile pentru crearea de conținut digital. „Audio2Face oferă dezvoltatorilor o modalitate rapidă și eficientă de a genera animații realiste, reducând semnificativ costurile și timpul necesar producției. Prin publicarea în regim open source, dorim să sprijinim comunitatea și să facilităm inovarea în acest domeniu”, a transmis compania.
Mai multe studiouri de jocuri au adoptat deja tehnologia în proiectele lor. Printre acestea se numără Farm51, dezvoltatorul titlului Chernobylite 2: Exclusion Zone, dar și echipa care lucrează la Alien: Rogue Incursion Evolved Edition. Integrarea Audio2Face le-a permis acestora să ofere o experiență mai realistă jucătorilor, fără a fi nevoie de echipamente complexe pentru captarea expresiilor faciale.
O altă noutate importantă este că, odată cu open source-ul, Nvidia pune la dispoziție și cadrul de antrenare al Audio2Face. Acesta permite ajustarea modelelor pentru diferite situații și tipuri de personaje. Astfel, dezvoltatorii pot adapta animațiile la diverse stiluri vizuale, de la avatare realiste până la personaje stilizate, în funcție de cerințele proiectului.
Deschiderea tehnologiei este văzută ca un pas semnificativ pentru democratizarea instrumentelor AI dedicate animației. În loc să fie limitată la studiouri mari, care își permit investiții ridicate, soluția devine acum accesibilă și dezvoltatorilor independenți sau companiilor mici. Acest lucru ar putea duce la apariția unei game mai variate de conținut digital, de la jocuri video și aplicații educaționale până la soluții inovatoare de comunicare în timp real.
Prin lansarea în regim open source, Nvidia își extinde influența în zona tehnologiilor pentru animație digitală și confirmă direcția de integrare a AI în procesul de creație. Audio2Face devine astfel nu doar un instrument tehnic, ci și un posibil catalizator pentru noi forme de interacțiune digitală.
