4OSujwr472f tech.huanqiu.comarticle英伟达开源Audio2Face模型,可用于AI 实时生成面部动画/e3pmh164r/e3pmtmdvg【环球网科技综合报道】9月25日消息,英伟达今日宣布开源生成式AI面部动画模型Audio2Face,此次开源内容不仅包含模型本身,还涵盖软件开发工具包(SDK)及完整训练框架。这一举措旨在为游戏、3D应用等领域注入新活力,加速AI智能虚拟角色的开发进程,推动相关产业技术升级。作为一款先进的生成式AI技术,Audio2Face具备强大的功能特性。它能够精准分析音频中的音素、语调等关键声学特征,在此基础上实时驱动虚拟角色的面部动作,不仅可实现口型与音频的精准同步,还能生成自然流畅的情感表情。凭借这一优势,该技术在多个领域展现出广阔应用前景,除了游戏开发,还可广泛服务于影视制作、客户服务等场景,为行业发展提供新的技术支撑。 在运行模式方面,Audio2Face展现出高度的灵活性,支持两种核心运行方式。其一为预录制音频的离线渲染模式,适用于对动画精度要求高、无需实时反馈的场景,如影视动画制作;其二是动态AI角色的实时流式处理模式,能够满足游戏、实时互动虚拟客服等对响应速度要求严苛的场景,确保虚拟角色在与用户交互过程中,面部动画始终保持实时、自然的状态。目前,Audio2Face技术已获得行业内的广泛关注与实际应用,并取得了显著成效。知名游戏开发商Survios在其热门游戏《异形:侠盗入侵进化版》(Alien: Rogue Incursion Evolved Edition)中,成功集成了该技术。通过应用Audio2Face,Survios大幅简化了游戏开发过程中的口型同步与面部捕捉流程,有效降低了开发成本,提升了游戏制作效率。Farm 51工作室同样将Audio2Face技术应用于其新作《切尔诺贝利人2:禁区》(Chernobylite 2: Exclusion Zone)的开发中。借助该技术,工作室实现了通过音频直接生成细腻面部动画的突破,不仅节省了大量的制作时间,更重要的是显著提升了游戏角色的真实感,让玩家在游戏过程中获得更沉浸式的体验。Farm 51工作室创新总监Wojciech Pazdur对此给予高度评价,称这一技术应用为行业带来了“革命性突破”。(纯钧)1758766595885环球网版权作品,未经书面授权,严禁转载或镜像,违者将被追究法律责任。责编:林梦雪环球网175876659588511[]//img.huanqiucdn.cn/dp/api/files/imageDir/238d2a5cbd0f904c01ed7c6510676f61u1.png{"email":"linmengxue@huanqiu.com","name":"林梦雪"}
【环球网科技综合报道】9月25日消息,英伟达今日宣布开源生成式AI面部动画模型Audio2Face,此次开源内容不仅包含模型本身,还涵盖软件开发工具包(SDK)及完整训练框架。这一举措旨在为游戏、3D应用等领域注入新活力,加速AI智能虚拟角色的开发进程,推动相关产业技术升级。作为一款先进的生成式AI技术,Audio2Face具备强大的功能特性。它能够精准分析音频中的音素、语调等关键声学特征,在此基础上实时驱动虚拟角色的面部动作,不仅可实现口型与音频的精准同步,还能生成自然流畅的情感表情。凭借这一优势,该技术在多个领域展现出广阔应用前景,除了游戏开发,还可广泛服务于影视制作、客户服务等场景,为行业发展提供新的技术支撑。 在运行模式方面,Audio2Face展现出高度的灵活性,支持两种核心运行方式。其一为预录制音频的离线渲染模式,适用于对动画精度要求高、无需实时反馈的场景,如影视动画制作;其二是动态AI角色的实时流式处理模式,能够满足游戏、实时互动虚拟客服等对响应速度要求严苛的场景,确保虚拟角色在与用户交互过程中,面部动画始终保持实时、自然的状态。目前,Audio2Face技术已获得行业内的广泛关注与实际应用,并取得了显著成效。知名游戏开发商Survios在其热门游戏《异形:侠盗入侵进化版》(Alien: Rogue Incursion Evolved Edition)中,成功集成了该技术。通过应用Audio2Face,Survios大幅简化了游戏开发过程中的口型同步与面部捕捉流程,有效降低了开发成本,提升了游戏制作效率。Farm 51工作室同样将Audio2Face技术应用于其新作《切尔诺贝利人2:禁区》(Chernobylite 2: Exclusion Zone)的开发中。借助该技术,工作室实现了通过音频直接生成细腻面部动画的突破,不仅节省了大量的制作时间,更重要的是显著提升了游戏角色的真实感,让玩家在游戏过程中获得更沉浸式的体验。Farm 51工作室创新总监Wojciech Pazdur对此给予高度评价,称这一技术应用为行业带来了“革命性突破”。(纯钧)