您当前所在位置: > 爆料站 > 君子堂

《深空之眼》口型动画背后的技术支持

时间:2022-11-26 01:09:52  来源:  作者:网络转载
本次内容来自于CRI中国的技术讲座CRI TechSummit Live(简称CTS Live)。

CRI Lipsync是基于深度学习的语音分析技术,是一款根据声音数据自动生成自然的口型的语音解析Lipsync中间件。可以运用在游戏内的会话场景等,配合台词生成自然的口型。


目前已经日益被日本以及中国的厂商所使用,这里结合厦门勇仕的《深空之眼》案例,来解析下实际的应用。

带来分享的是《深空之眼》的技术美术Dahan

《深空之眼》是勇仕网络研发的3D动作手游,于2021年5月13日至2021年5月27日开启“觉醒测试”,2021年9月16日至2021年9月30日开启“连携测试”,2022年4月22日正式公测。

玩家将在游戏中化身“深空之眼”组织的管理员,与修正者小队并肩作战,清除视骸,守护文明秩序。


CRIWARE为这款游戏提供了声音视频相关技术的支持。

在游戏的交互中,口型表现配合动作表现能够提供整体的表现力,从而能够大幅度地增强玩家的代入感。这一需求在二次元的领域中格外明显。


传统的口型绘制方式往往需要消耗大量的人力和物力,显得极不经济。

这时候,我们就可以用LipSync口型中间件来加快我们的工作效率了:


在《深空之眼》中,使用的相关的解决方案是LipSync预先分析和CRI Lips Craft唇形同步支持:


在应用方案前,我们需要先创建模型数据:



接着,可以使用预先分析wav得到口型数据:


然后,从中取得我们需要的数据:


再接着,使用ADX LipSync进行预先分析:


接着,通过脚本读取数据驱动口型:


之后进行一定的适配后,我们就可以得到想要的具体效果了:


-END-


CRIWARE来自日本,扎根中国本土市场。致力于为游戏开发商提供高效音视频及相关资源一站式服务。旗下主要产品有CRIWARE(ADX、SOFDEC及LIPSYNC等)、SpriteStudio以及作曲音效等音频业务。

官网:https://www.criware.cn/

咨询电话/微信:13818827912

资源转载网络,如有侵权联系删除。
相关下载

玩家评论

CRI TechSummit 10月直播预告!含视频口型等案例

今年8月份,我们迎来了全新的CRI TechSummit Live(简称CTS Live)。在那场直播中,我们请到了Ghostfinal、Haloweak等多位老师来向我们分享他们各自在游戏音频领域的一些经验和心得详情>>

阅读: 1
日期: 2022-10-27
游戏写实角色语音生成口型与表情技术的演进与未来

以下文章来源于腾讯游戏学堂 ,作者SeanQ 近年来越来越多的超写实角色出现在游戏中,他们通常采用照扫(3D photogrammetry scanning)为基础对真人模特进行建模、加工,在满足游详情>>

阅读: 6
日期: 2022-08-09
语音生成口型与表情技术的演进与未来

近年来越来越多的超写实角色出现在游戏中,他们通常采用照扫(3D photogrammetry scanning)为基础对真人模特进行建模、加工,在满足游戏艺术效果的同时尽可能还原人物特别是其面详情>>

阅读: 0
日期: 2022-08-09
《异度神剑3》不同语言配音有对应口型 增强代入感

  在这周三,任天堂举办了《异度神剑3》的游戏直面会,虽然大家的关注点都在后续的季票等内容上。不过根据电玩迷(dianwanmi.com)编辑了解同时看了日语与英语直面会的细心玩家详情>>

阅读: 0
日期: 2022-06-27
疑《异度之刃3》为不同语言口型适配 违和感显著降低

时间如指尖的碎屑,眨眼间就随风飘逝。一晃眼已经6月底了,距离任天堂第一方大作《异度之刃3》发售也就一个月的时间了,你做好启程新冒险的准备了么?本作是详情>>

阅读: 0
日期: 2022-06-26
《赛博朋克2077》是如何将人物表情和口型本地化的?

“除了嘴型之外,他们的额头、眼睛、脖子的动作和面部表情也都非常自然。” 在开发《赛博朋克2077》期间,“巫师”系列开发商CD Projekt Red与许多名人进行了合作。例如,让著详情>>

阅读: 8
日期: 2020-12-25
《赛博朋克2077》实现10种语言全部匹配口型

在早些时候的SIGGRAPH 2020虚拟会议上,JALI Research Inc.给与会者展示了一些幕后工具,包括CD Projekt Red正在使用的面部动画系统。 《赛博朋克2077》支持包括汉语、英详情>>

阅读: 23
日期: 2020-10-23
《2077》到底多细节?全球10种语言口型同步,对话违和感全消

,在Xbox Series X,Series S和PlayStation 5发布后的几周内在其11月19日进行发布。赛博朋克2077将会支持10种分歧的措辞配音,但在手艺演示中,开辟人员吐露它们都将具有动画详情>>

阅读: 4
日期: 2020-10-22
《赛博2077》支持10种语言配音 口型技术演示

完整版视频演示了非常详细的分解过程,甚至包含了部分眼部表情演示,十分令人着迷,并且在看不同语言下的人物口型详情>>

阅读: 8
日期: 2020-10-21
《赛博2077》各语言配音有相应口型面部运动精确对应

《赛博2077》各语言配音有相应口型 面部运动精确对应 2020-10-21 09:23:38来源:游戏下载编辑:松鼠骑士评论(0) 详情>>

阅读: 9
日期: 2020-10-21
《偶像大师》的口型制作方法大揭秘——相关技术开发者访谈

通过Lipsync生成顺滑口型,在“THE IDOLM@STER MR ST@GE!!”展现栩栩如生的角色表现 俘获无数“制作人”们的“偶像大师”系列的爱豆们终于要来到现实世界。于2018年4详情>>

阅读: 6
日期: 2020-08-13
《公主连结Re:DIVE》制作组的亲女儿待遇?只有凯露是对嘴型的_口型

原标题:《公主连结Re:DIVE》制作组的亲女儿待遇?只有凯露是对嘴型的 可能是最近手游的人气很高的关系,动画也有被带热的嫌疑,上周热播的《公主连结Re详情>>

阅读: 15
日期: 2020-06-05
“克隆”一个自己去上班!微软VR远程会议机器人,还原动作口型眼神

原标题:“克隆”一个自己去上班!微软VR远程会议机器人,还原动作口型眼神 图片来源:Unsplash 文|智东西 李水青 智东西5月6日消息, 今天,微软研究院推详情>>

阅读: 8
日期: 2020-05-07
搞笑GIF趣图:留意那口型,太契合了啊_老婆

请问:她刚才说的是什么? 论一款合适的发型有多重要? 留意那口型,太契合了啊!!简直完美! 妹子的这丢球是这要命啊 开始我以为是搞笑来着,后来才发现,666啊 详情>>

阅读: 19
日期: 2020-02-10
炉石传说搞笑时刻:哀绿每次出现都有亮点,这次是口型

炉石传说搞笑时刻:哀绿每次出现都有亮点,这次是口型详情>>

阅读: 3
日期: 2018-09-13
精彩推荐