该工做室立异总监Wojciech Pazdur称其为“性冲破”。并支撑预音频的离线衬着取动态脚色的及时流式处置两种运转模式。此次内容涵盖根本模子、完整软件开辟东西包及锻炼框架,该手艺可普遍使用于逛戏开辟、影视制做、虚拟客服等多个场景,Farm 51工做室也正在《切尔诺贝利人2:禁区》中借帮该手艺,从动解析此中的音素、腔调等声学特征,也提拔了脚色的实正在感取玩家的沉浸体验。不只大幅节流制做时间,及时驱动虚拟脚色生成精准的口型动做取天然的感情脸色。例如,英伟达颁布发表将其生成式AI面部动画模子Audio2Face正式开源,该手艺已正在逛戏行业获得现实使用。间接通过音频生成细腻的面部脸色,显著简化了口型同步取面部动画的制做流程。逛戏开辟商Survios正在《异形:侠盗入侵进化版》中集成Audio2Face,据报道,旨正在鞭策逛戏取3D使用范畴快速集成智能虚拟脚色。目前。