Reallusion 推出AI 驱动技术实现 Audio2Face 和 iClone 之间的无缝集成

kuasa67

Reallusion 推出AI 驱动技术实现 Audio2Face 和 iClone 之间的无缝集成

利用 NVIDIA 的 AI 技术，Reallusion 宣布将 Character Creator、iClone 和 Audio2Face 与两个免费插件无缝集成，彻底改变了多语言面部唇语同步动画制作。

youtobe 视频链接：https://youtu.be/ScMb1f1M9yU

Audio2Face 由 NVIDIA 于 2021 年发布，是一款由 AI 驱动的实验性软件，用于从 NVIDIA Omniverse 提供的音频源生成面部动画。它的主要功能是生成唇部同步动画，与许多其他软件不同的是，该软件并不局限于英语，还包括一个基于中文的AI 模型。现在，随着 Reallusion 的最新宣布，它将可以用任何语言制作动画，包括 "歌曲和自言自语"。

Reallusion 发布了两个免费赠送的插件，将 iClone 与 Audio2Face 相连，以便使用NVIDIA 的 AI 动画系统从音轨创建唇语同步动画。

只需单击一下，就可以在英伟达NVIDIA Audio2Face中设置一个角色创建者，与音轨一起实时制作动画，并将完成的动画无缝传输回 iClone 进行进一步完善，然后再将其导出到虚幻引擎、Unity 等 3D 工具和游戏引擎。

   
第一个新插件 CC 角色自动设置是 NVIDIA 和 Reallusion 合作制作的，“将手动 18 步流程压缩为一个步骤”。

通过导入 CC 角色并选择训练模型（Mark 和新模型 Claire），您可以立即收到与音频文件同步的说话动画。您可以自由地尝试运动滑块、自动表达式，甚至设置关键帧。最终的动画可以发送到 iClone 进行进一步制作。



第二个插件 Audio2Face for iClone 可从 Audio2Face 接收动画数据，并包含调整控件，提供全方位的动画完善功能。

可通过动态界面对动画进行调整。区域面部调整包括各种参数，如表情强度或头部运动。您还可以扩大下颌张开的范围，以增强情绪张力，并控制舌头的位置，以模仿准确的发音。


由于生成式 AI动画对噪音非常敏感，尤其是当音频文件由低质量设备捕获或在不利环境中捕获时，该插件引入了一个精致的噪音过滤器，以消除抖动，并在音频质量较差的情况下实现更好的效果。

从 Audio2Face 获取令人满意的动画后，需要使用 iClone 进行面部编辑，以实现精细的唇部同步、自然的表情调整，甚至将来自 mocap 设备的动作融入其中。




youtobe 视频链接：https://youtu.be/zeLQsJGiv1o


Character Creator、iClone 和 Audio2Face 的集成标志着AI动画技术的一个重要里程碑，为艺术家的工作流程提供了前所未有的灵活性和效率。

了解有关插件的更多信息，请在此免费下载：https://80.lv/talent