Gledajte kako lica govore u pravom vremenu…
Nvidia je možda najpoznatija po grafičkim karticama koje se jednostavno više ne mogu pronaći u dućanima, no kompanija isto tako proizvoda vrlo zanimljive alate. Jedan od primjera je alat za micanje pozadinskog zvuka, zvan RTX Voice koji je ranije ove godine dobio ažuriranje tako da radi i sa GTX grafičkim karticama.
Sada Nvidia pokazuje novi alat (trenutačno u beta fazi) povezan sa zvukom. Audio2Face je vrlo impresivan auto rigging proces koji se pokreće zajedno sa Nvidijinom open real-time simulacijskom platformom zvanom Omniverse. Program ima mogućnost uzeti audio file i dodati vrlo impresivne animacije govora na digitalnom 3D modelu.
Proces je automatski, radi vrlo dobro sa većinom jezika i može se namjestiti pomoću slidera za još više detalja.
Kao dodatni bonus, Nvidia on Demand je njihova tutorial stranica gdje možete naučiti kako točno ovaj alat funkcionira. Prvi video za Audio2Face je izašao još u trećem mjesecu 2020. godine, no nedavni tutoriali objašnjavaju kako exportati cijeli proces u Unreal Engine 4.
Nakon što sam pogledao par videa, izgleda da program se ipak malo oslonjuje na kvalitetu zvuka. Charlie Chaplinov poznati govor iz filma The Great Dictator se pojavljuje u jednom od videa i rezultati baš nisu jasni i zadovoljavajući. Međutim, ovaj alat ima vrlo svijetlu budućnost i jedino što može je nastaviti unaprijeđivati se.
