在Live2D中使用mocopi进行全身追踪

2024
12/17
15:18

中国动漫产业网

国漫号
分享
数据
3246
1
0

中国动漫产业网

国漫号
2024
/
12/17
15:18
3246
1
0

SONY的便携动捕设备 "mocopi "与Live2D建立合作关系,旨在让Live2D公司的应用程序"nizima LIVE "能够使用mocopi追踪全身动作。我们采访了索尼mocopi负责人相见猛先生,和Live2D代表董事中城哲也先生,了解关于此次合作的目的和更新的功能。

本次双方合作的内容可以在"nizima LIVE"的更新版本中体验。在更新之前,"nizima LIVE"支持使用摄像头进行面部表情和手部的动作跟踪。现在,通过轻松穿戴mocopi,无需在摄像头的视角范围内,也能还原手臂动作。

不仅是手部动作,包含腰部和腿部的动作也可以追踪。更新后的"nizima LIVE"提供了支持全身动作捕捉的虚拟形象示例,供用户在建模时参考。此外,在本次合作中还提供了“irasutoya(日本免费插图素材网站)的插图形象。

1.突破既有印象的合作

相见先生: mocopi的用户中大部分是VTuber(虚拟形象up主)。mocopi是一个创建3D运动数据的工具,所以使用它的人基本上都有3D虚拟形象,比如VRM和VRChat虚拟形象。


但是在VTuber这个群体中,使用2D角色的人压倒性地占比更多。我们做mocopi的初衷之一是支持和促进虚拟形象的文化发展,但在用户层方面,无法触达2D虚拟形象的用户一直是一个课题。在认识Live2D(最大的2D虚拟形象公司)的中城先生以后,我们开始觉得使用mocopi支持2D虚拟形象的用户或许可以实现。

中城先生:我对mocopi最初的印象是,它对虚拟形象进行全身动作捕捉的3D效果很棒,完全没有想到在Live2D里也能进行全身动作捕捉。起初我并没有期待合作的结果,但随着合作的深入,我转变了想法,如果使用Live2D的创作者们有更多有趣的选择,那么创作环境也会变得更多元,更有创造性,作为平台也可以和创作者们共同发展。


相见先生:起初mocopi团队也认为将2D和3D结合会有困难,因为在nizima LIVE中只需通过设置手部参数,就可以使用摄像头来捕捉手部动作。因此,我们最初期待的是通过mocopi来提升手部动作的表现力。大约在第二次或第三次的会议上,Live2D告诉我们,他们也有实现全身动作的捕捉的想法,对此我们展开了讨论。

关于本次合作的技术原理,是将mocopi生成的3D运动数据,在nizima LIVE应用端转换为用于2D模型的运动数据,然后将其反映到虚拟形象上。


以往如果是使用了涉及到肩膀部位活动的虚拟形象,用户需要时刻注意摄像头的视角来同步动作,避免超过摄像头捕捉范围,现在用mocopi则无需担忧这个问题。但是,对于转身这样的动作,在仅具有平面信息的Live2D中是没有办法进行的。


此外,如果想拥有具备全身动作的2D虚拟形象,可以通过Live2D提供的软件“Live2D Cubism”对腰和脚等部位进行参数设定后来建模。以具备手部动作的虚拟形象的模型为基础开始制作的话,大约需要3天到10天左右。


2. 与 "Irasutoya"联动动起来的插图形象助力各个领域


在本次合作中,还推出了日本免费插图素材网站 "Irasutoya"中的经典形象,在nizima LIVE中变成了可以自由活动面部和肢体的Live2D 模型。目前已提供10个"Irasutoya"的虚拟形象模型。

相见先生:我认为尝试使用 Irasutoya 虚拟形象的VTuber 会很有趣,因为Irasutoya的形象已成为各个领域的常用工具,包括PowerPoint资料的制作。


就mocopi而言,至少在日本用户的印象中,mocopi是作为VTuber或在VRChat中驱动虚拟形象的工具而存在,或者是在动漫设计领域使用。有了mocopi后,原本静态的Irasutoya人物也能够动起来,可以达到2D图片无法表现出的生动效果。对于经常使用Irasutoya插图形象的人来说,可能会觉得很有意思。


中城先生:就 Irasutoya而言,插图形象非常简单而有吸引力,在Live2D中让插图形象活动起来的难度也不高,而且还可以展现有意思的动态表情。


可以说我们为创作者们提供了非常好的创作工具,通过穿戴mocopi就能控制Irasutoya形象的动作。我们期待用户能将动起来的Irasutoya形象用于各种突破性的用途,比如在YouTube和其他媒体上使用Irasutoya插画形象等等。

3.扩大宣传,创作者们提供更简便的创作环境


相见先生:关于如何让更多的用户尝试新特性,我认为首先要活用公司的宣传平台,扩充使用教程和workshop这样的宣传内容,对用户传达“使用mocopi并不难哦”,“如果这样操作的话就可以简单上手”这些关键点。


另一点是,我们希望与Live2D合作,一起进军比较容易使用Live2D解决方案的领域,如动画制作行业和社交游戏行业。


中城先生:Live2D和mocopi都是创作的工具,当创作者使用我们的工具完成了某个优秀的作品,然后欣赏到这样的作品的人也产生了创作的欲望的那一刻,我认为才算是形成了一个好的循环,才能说是成功。


在本次合作中,我们也准备了诸如使用手册,制作环境的说明,另外也提供了丰富的形象模型(包括Irasutoya人物)等,希望能为创作者们提供一个更容易创作的环境。


免责声明:中国动漫产业网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。
同类推荐

相约湾区,“致竞”荣耀!——致竞·粤港澳大湾区电竞论坛暨城市交流赛开战!

首次由香港中联办宣文部、澳门中联办宣文部、横琴粤澳深度合作区执委会联合指导发起的电竞大赛;首次于深圳起航,途径大湾区六个城市两个特别行政区,总决赛落地横琴的电竞大赛;首次粤港澳大湾区各级领导都相当重视且积极的电竞赛事与行业峰会;也是腾讯官方发起的在粤港澳大湾区的最高规格与级别的《王者荣耀》电竞大赛。

首次由香港中联办宣文部、澳门中联办宣文部、横琴粤澳深度合作区执委会联合指导发起的电竞大赛;首次于深圳起航,途径大湾区六个城市两个特别行政区,总决赛落地横琴的电竞大赛;首次粤港澳大湾区各级领导都相当重视且积极的电竞赛事与行业峰会;也是腾讯官方发起的在粤港澳大湾区的最高规格与级别的《王者荣耀》电竞大赛。

961 1 0

让中国风因年轻而精彩!网易LOFTER携百部佳作打造国风展台亮相CCG EXPO 2021

7月15日至7月18日,国内最大的兴趣及创作衍生平台之一——网易LOFTER在第十七届中国国际动漫游戏博览会(CCG EXPO 2021)现场带来了一场与众不同的国风同好会。在LOFTER展台,参与者可以游历雅致的古风庭院、品鉴国风创作、畅买IP美物,真正享受兴趣带来的乐趣。当国风及传统文化真正成为无数年轻人的兴趣、灵感和快乐,它们的生命力也将不断焕发新的活力,而这正是LOFTER想展现给所有人的新景色。

7月15日至7月18日,国内最大的兴趣及创作衍生平台之一——网易LOFTER在第十七届中国国际动漫游戏博览会(CCG EXPO 2021)现场带来了一场与众不同的国风同好会。在LOFTER展台,参与者可以游历雅致的古风庭院、品鉴国风创作、畅买IP美物,真正享受兴趣带来的乐趣。当国风及传统文化真正成为无数年轻人的兴趣、灵感和快乐,它们的生命力也将不断焕发新的活力,而这正是LOFTER想展现给所有人的新景色。

2040 1 0

快手“AI漫画”特效大火,牵手头部小程序意间AI绘画解锁更多玩法

输入几个关键词,上传一张图片,一张由AI创作的二次元风格的动漫画作便可一键生成。近期,AI绘画在社交媒体持续刷屏,快手等各大平台也纷纷入局。其中,快手快影联合音视频团队在11月18日推出了“AI动漫脸”等风格化效果,让写实照片与动漫图片瞬间切换,同时搭配富有节奏感的音乐以及粉色花瓣动态元素,二次元动漫氛围感直接拉满。

输入几个关键词,上传一张图片,一张由AI创作的二次元风格的动漫画作便可一键生成。近期,AI绘画在社交媒体持续刷屏,快手等各大平台也纷纷入局。其中,快手快影联合音视频团队在11月18日推出了“AI动漫脸”等风格化效果,让写实照片与动漫图片瞬间切换,同时搭配富有节奏感的音乐以及粉色花瓣动态元素,二次元动漫氛围感直接拉满。

1924 1 0

至善之美,《瑞纳宝贝》带宝贝体味爱与包容

在孩子的眼中,向来没有成人世界里那些纷繁复杂的心理障碍。他们的世界是纯粹无畏且天真美好的,正因如此,在他们面对一些矛盾与隔阂时,更需要及时地进行自我纾解与缓和。因此,家长更加有必要去教育孩子以豁达的胸襟,体谅家人,包容他人。

在孩子的眼中,向来没有成人世界里那些纷繁复杂的心理障碍。他们的世界是纯粹无畏且天真美好的,正因如此,在他们面对一些矛盾与隔阂时,更需要及时地进行自我纾解与缓和。因此,家长更加有必要去教育孩子以豁达的胸襟,体谅家人,包容他人。

2053 2 0

「Love Live! Superstar!!」的学园偶像组合初次 LIVE&FANMEETINGTOUR 的首日公演将在 bilibili 播出!

跨媒体企划「Love Live! Superstar!!」的学园偶像组合「Liella!」的 LIVE & FAN MEETING 活动『Love Live! Superstar!! Liella! LIVE & FAN Meeting Tour ~Welcome to Yuigaoka!!~』的大阪公演首日映像决定在 bilibili(官方账号 LVJ_Official)播出。跨媒体企划「Love Live! Superstar!!」的学园偶像组合「Liella!」的 LIVE & FAN MEETING 活动『Love Live! Superstar!! Liella! LIVE & FAN Meeting Tour ~Welcome to Yuigaoka!!~』的大阪公演首日映像决定在 bilibili(官方账号 LVJ_Official)播出。

跨媒体企划「Love Live! Superstar!!」的学园偶像组合「Liella!」的 LIVE & FAN MEETING 活动『Love Live! Superstar!! Liella! LIVE & FAN Meeting Tour ~Welcome to Yuigaoka!!~』的大阪公演首日映像决定在 bilibili(官方账号 LVJ_Official)播出。跨媒体企划「Love Live! Superstar!!」的学园偶像组合「Liella!」的 LIVE & FAN MEETING 活动『Love Live! Superstar!! Liella! LIVE & FAN Meeting Tour ~Welcome to Yuigaoka!!~』的大阪公演首日映像决定在 bilibili(官方账号 LVJ_Official)播出。

1271 2 0

优酷“少歌宇宙”再推新国风力作 少歌外传《暗河传》热血开播

8月2日,由不可能的世界作家“周木楠”同名小说改编,动画少歌外传《暗河传》于优酷动漫独家开播。此前《暗河传》的相关预热海报、视频等物料一经发布,便吸引了众多原著粉和动漫粉的关注,期待动画上线播出的呼声更是不断,力证《暗河传》这一顶级IP的人气值之高,定将成为优酷新国风动画的又一力作。看新国风 ,上优酷动漫!

8月2日,由不可能的世界作家“周木楠”同名小说改编,动画少歌外传《暗河传》于优酷动漫独家开播。此前《暗河传》的相关预热海报、视频等物料一经发布,便吸引了众多原著粉和动漫粉的关注,期待动画上线播出的呼声更是不断,力证《暗河传》这一顶级IP的人气值之高,定将成为优酷新国风动画的又一力作。看新国风 ,上优酷动漫!

3030 1 0

合作伙伴