AI把文本自动转化为表情动画?
CG世界 2021-07-17
“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”
中国很有影响力影视特效CG动画领域自媒体
对于唇形动画和表情动画,一直是动画师专攻的技艺,没有个三年五载的经验,一般人是做不来的。这就导致目前动画师很抢手。那么如果没有一点动画经验,可以制作出表情动画么??现在看,可以。
Reallusion和Replica Studios最近推出了一款名叫AI Voice Actors的免费插件,这个插件将Replica基于AI的语音生成系统可以直接把文本或者语音转化成唇形动画甚至可以通过Reallusion的iClone直接生成表情动画。
新的工作流程使用户能够根据游戏或动画的脚本生成合成语音表演,然后在iClone中自动生成相应的面部动画。
图片
TTS人工智能语音→准确的唇形同步→自动生成表情
通过TTS人工语智能语音可以实现准确的唇形同步
用户可以在Replica Studios - AI Voice Actors中输入文本脚本,选择喜欢的声音,并设置情感风格。
导出到iClone AccuLips中后,就可以自动生成口型同步动画了。
还能够通过嘴形和视位强度进一步调整视位。
图片
自动表情预设
图片
一旦将声音应用于演员后,就会自动生成面部表情。
还可以随意用不同强度级别的表情循环分类库来替换当前的表情剪辑。
用户可以通过谈话风格编辑调整或优化谈话行为。
直观而强大的面部表情编辑
通过Face Puppeteering,用户可以使用鼠标控制直观地驱动面部表情。
Face Key Editing则用于细化或图层编辑面部细节。
还带有用于现场面部表演的Mocap。
仅用脚本就可以为3D角色生成语音面部动画
Replica Studios的AI配音系统可以自动生成合成语音来匹配源文本,从而就可以将脚本转换为一组匹配的语音表演了,不过目前只支持英文版本。
用户可以从40多个AI配音演员中进行选择,并为AI生成的声音设置情绪、音调和速度。
生成语音性能后,还可以通过这个新插件一键导出到iClone中。
iClone使用的是在今年早些时候的iClone 7.9中引入的新AccuLips系统,可以为3D角色自动生成唇形同步动画以匹配音频。
这个软件还可以根据最初选择的情绪设置和四种强度设置为角色生成面部表情。
除此之外,用户还可以在iClone 7.92中添加的36个现成的面部动画循环中进行任意的切换,这些循环不仅能生成中性表情,还有与愤怒、厌恶或快乐等情绪相对应的表情。
通过使用iClone中的任意一个标准面部工具,
定价和系统要求
Replica Studios的桌面软件可免费用于Windows10和macOS10.13+这两个系统。然后会按照每小时生成的语音来处理文本的收费:四个小时的费用为24美元,100小时的费用为300 美元。用户注册iClone后,除了可以获得Replica Studios自带的30分钟试用以外,还可以获得4小时的免费积分。
iClone集成插件可以在iClone 7.92+上免费使用。iClone本身适用于Windows 7+系统,不过用户需要通过单独的付费软件3DXChange才能将数据从iClone导出到其他DCC软件。
—全文完—