配音资讯

迪士尼最新成果：给虚拟人物或者CG动画实时配音

2023-03-25 15:29:22

标签：

制片帮|悦音独有的AI智能配音技术，更智能、更专业、完美贴近真人配音。
点击使用:制片帮|悦音

迪士尼最新成果：给虚拟人物或者CG动画实时配音迪士尼研究人员协同几所大学研究院，发表最新论文，介绍了最新项研究成果：机器通过深度学习，模拟人类真实语言和口型与发音关系，实时为VR中的虚拟动画CG角色或者人物配音。从视频来看，不仅口型是基本吻合，而且声音也是原装的的。从论文里提到的，研究人员阐述了这个“神经网络/深度学习”（neural network/ deep learning ）系统，同一位演讲者通过8小时的讲话训练共个句子，习得不同音节与口型之间的匹配，并且能够将不同的口型与发音实时对应起来。可以从迪士尼发布的新视频看到，通过训练，这套系统是来自不同人说的不同语种的语言（中文那个有惊喜）这套系统可以分析，可以自动匹配好相应的口型。并且可以自动关联到虚拟人物或者动画的面部动作。从迪士尼演示视频中介绍可以看出，通过系统深入学习的具有以下几个很具吸引力的特性：运行比较实时，需要极少数修正参数，轻松调整语言逻辑性，变于编辑，创建带有个性化情感的语言，与现有的动画重定向方式兼容。目前给动画片的CG角色配音都是由熟练的动画师手工完成技术熟练。此前如我们介绍过奥斯卡今年最佳的视效提名影片、例如在迪士尼的《奇幻森林》中，为猩猩王Louie的配音都是老戏骨Christopher Walken（蝙蝠侠、断头谷等，年奥奖最佳男配）他们是大家非常熟悉的。大多数的观众会觉得他的样貌特征会有一种与Louie合体的感觉，这也是团队的杰作凸显这部影片的特效——把为动物角色配音的明星们的动物角色融与面貌特征合在一起，创建属于CG明星“动物形象。例如老比尔·莫瑞是为那只熊配音的。但是这样需要付出的代价（技术、资源和预算）都是超高的，否则也不会赢得奥斯卡提名。这对于好莱坞高票房回馈的最好礼物，但更大范围的应用和普及就不能指望用得起特效团队了。迪士尼的这套最新机器神经系统，虽然暂时还无法实现大银幕上那种，角色表情与配音合二为一的清晰逼真效果。但是它的实时配音和自动合成还是在很多场合都有很实际的应用。比如大型角色扮演的没钱请动画师手工制作、受时效性限制（直播）的或者游戏直播项目等。目前在VR里，这个系统可以为用户的虚拟形象实时配音。不仅可以保持现实中的口型，甚至还有声音。这似乎解决了目前现实角色与VR社交中虚拟阿凡达“同步开口”的问题。虽然面部动作捕捉技术实际上是跟踪口型最准确的方式，但就目前的情形看，这一技术想要普遍进入市场应用仍然需要一个较长的时间，在此之前，迪士尼的机器神经系统还是能顶上用场的。其中一方面，这个系统其实对于动画和VR内容的创作、甚至社交平台上的应用都是很吸引人的，即使不能用在大银幕上。谁将获得89届奥斯卡最佳视效奖5部特效巨制目前迪士尼最新混合现实技术：CG电影角色互动的直接无需头盔手控。通过实战经验：VR交互设计由迪士尼设计师亲自教你。

上一篇：谈话节目主持技巧下一篇：广告配音的形式