Obrázek z předváděčky technologie Nvidia Audio2Face

  • Nvidia uvolnila nástroj Audio2Face jako open source, včetně SDK
  • Systém převádí akustické rysy řeči na mimiku, přesný lip-sync a emoční výraz v reálném čase i offline
  • K dispozici jsou pluginy pro Mayu a Unreal Engine 5 i nové modely (regression 2.2, diffusion 3.0; Audio2Emotion 2.2/3.0)

Nvidia otevřela svůj nástroj Audio2Face, který pomocí umělé inteligence převádí zvuk na detailní mimiku 3D postav. Kromě samotných modelů firma zároveň uvolňuje i software development kit (SDK) a kompletní tréninkový rámec, takže vývojáři mohou technologii rovnou nasadit, nebo ji upravit pro vlastní potřeby. Cílem je zrychlit vývoj AI postav ve hrách a 3D aplikacích napříč různými odvětvími.

Přečtěte si celý článek Z hlasu rovnou mimika! Nvidia pouští revoluční Audio2Face do světa jako open source