在Live2D中使用mocopi进行全身追踪

2024
12/17
15:18

中国动漫产业网

国漫号
分享
数据
3260
1
0

中国动漫产业网

国漫号
2024
/
12/17
15:18
3260
1
0

SONY的便携动捕设备 "mocopi "与Live2D建立合作关系,旨在让Live2D公司的应用程序"nizima LIVE "能够使用mocopi追踪全身动作。我们采访了索尼mocopi负责人相见猛先生,和Live2D代表董事中城哲也先生,了解关于此次合作的目的和更新的功能。

本次双方合作的内容可以在"nizima LIVE"的更新版本中体验。在更新之前,"nizima LIVE"支持使用摄像头进行面部表情和手部的动作跟踪。现在,通过轻松穿戴mocopi,无需在摄像头的视角范围内,也能还原手臂动作。

不仅是手部动作,包含腰部和腿部的动作也可以追踪。更新后的"nizima LIVE"提供了支持全身动作捕捉的虚拟形象示例,供用户在建模时参考。此外,在本次合作中还提供了“irasutoya(日本免费插图素材网站)的插图形象。

1.突破既有印象的合作

相见先生: mocopi的用户中大部分是VTuber(虚拟形象up主)。mocopi是一个创建3D运动数据的工具,所以使用它的人基本上都有3D虚拟形象,比如VRM和VRChat虚拟形象。


但是在VTuber这个群体中,使用2D角色的人压倒性地占比更多。我们做mocopi的初衷之一是支持和促进虚拟形象的文化发展,但在用户层方面,无法触达2D虚拟形象的用户一直是一个课题。在认识Live2D(最大的2D虚拟形象公司)的中城先生以后,我们开始觉得使用mocopi支持2D虚拟形象的用户或许可以实现。

中城先生:我对mocopi最初的印象是,它对虚拟形象进行全身动作捕捉的3D效果很棒,完全没有想到在Live2D里也能进行全身动作捕捉。起初我并没有期待合作的结果,但随着合作的深入,我转变了想法,如果使用Live2D的创作者们有更多有趣的选择,那么创作环境也会变得更多元,更有创造性,作为平台也可以和创作者们共同发展。


相见先生:起初mocopi团队也认为将2D和3D结合会有困难,因为在nizima LIVE中只需通过设置手部参数,就可以使用摄像头来捕捉手部动作。因此,我们最初期待的是通过mocopi来提升手部动作的表现力。大约在第二次或第三次的会议上,Live2D告诉我们,他们也有实现全身动作的捕捉的想法,对此我们展开了讨论。

关于本次合作的技术原理,是将mocopi生成的3D运动数据,在nizima LIVE应用端转换为用于2D模型的运动数据,然后将其反映到虚拟形象上。


以往如果是使用了涉及到肩膀部位活动的虚拟形象,用户需要时刻注意摄像头的视角来同步动作,避免超过摄像头捕捉范围,现在用mocopi则无需担忧这个问题。但是,对于转身这样的动作,在仅具有平面信息的Live2D中是没有办法进行的。


此外,如果想拥有具备全身动作的2D虚拟形象,可以通过Live2D提供的软件“Live2D Cubism”对腰和脚等部位进行参数设定后来建模。以具备手部动作的虚拟形象的模型为基础开始制作的话,大约需要3天到10天左右。


2. 与 "Irasutoya"联动动起来的插图形象助力各个领域


在本次合作中,还推出了日本免费插图素材网站 "Irasutoya"中的经典形象,在nizima LIVE中变成了可以自由活动面部和肢体的Live2D 模型。目前已提供10个"Irasutoya"的虚拟形象模型。

相见先生:我认为尝试使用 Irasutoya 虚拟形象的VTuber 会很有趣,因为Irasutoya的形象已成为各个领域的常用工具,包括PowerPoint资料的制作。


就mocopi而言,至少在日本用户的印象中,mocopi是作为VTuber或在VRChat中驱动虚拟形象的工具而存在,或者是在动漫设计领域使用。有了mocopi后,原本静态的Irasutoya人物也能够动起来,可以达到2D图片无法表现出的生动效果。对于经常使用Irasutoya插图形象的人来说,可能会觉得很有意思。


中城先生:就 Irasutoya而言,插图形象非常简单而有吸引力,在Live2D中让插图形象活动起来的难度也不高,而且还可以展现有意思的动态表情。


可以说我们为创作者们提供了非常好的创作工具,通过穿戴mocopi就能控制Irasutoya形象的动作。我们期待用户能将动起来的Irasutoya形象用于各种突破性的用途,比如在YouTube和其他媒体上使用Irasutoya插画形象等等。

3.扩大宣传,创作者们提供更简便的创作环境


相见先生:关于如何让更多的用户尝试新特性,我认为首先要活用公司的宣传平台,扩充使用教程和workshop这样的宣传内容,对用户传达“使用mocopi并不难哦”,“如果这样操作的话就可以简单上手”这些关键点。


另一点是,我们希望与Live2D合作,一起进军比较容易使用Live2D解决方案的领域,如动画制作行业和社交游戏行业。


中城先生:Live2D和mocopi都是创作的工具,当创作者使用我们的工具完成了某个优秀的作品,然后欣赏到这样的作品的人也产生了创作的欲望的那一刻,我认为才算是形成了一个好的循环,才能说是成功。


在本次合作中,我们也准备了诸如使用手册,制作环境的说明,另外也提供了丰富的形象模型(包括Irasutoya人物)等,希望能为创作者们提供一个更容易创作的环境。


免责声明:中国动漫产业网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。
同类推荐

广州跨次元文化盛宴,《牧神记》动画携手广州南越王博物院特别联动开启

近日,南越王博物院携手哔哩哔哩超人气热播国创动画《牧神记》启动“牧神一曲,南越知音”特别联动。本次跨界联动由《牧神记》IP项目组、南越王博物院主办,广东国相文化科技有限公司承办,围绕“牧神记动画一周年庆典”与“南越王博物院文物联动”两大主线展开,为粉丝与游客带来一场别开生面的文化盛宴。

近日,南越王博物院携手哔哩哔哩超人气热播国创动画《牧神记》启动“牧神一曲,南越知音”特别联动。本次跨界联动由《牧神记》IP项目组、南越王博物院主办,广东国相文化科技有限公司承办,围绕“牧神记动画一周年庆典”与“南越王博物院文物联动”两大主线展开,为粉丝与游客带来一场别开生面的文化盛宴。

3733 1 0

《迷你世界》花小楼,坐拥2000万粉丝成国风推广虚拟偶像代表

一带一路的兴起在全世界范围内掀起了一股中国风,拥有5000多年的文明史,4000多年建城,1500多年建都史的洛阳,就是在这段历经沧桑中依旧难掩光芒的丝路上的一颗明珠,作为东汉丝绸之路的起点,洛阳不仅见证了东西方文明的交融,在华夏文明发展史上也留下了诸多的文化瑰宝。

一带一路的兴起在全世界范围内掀起了一股中国风,拥有5000多年的文明史,4000多年建城,1500多年建都史的洛阳,就是在这段历经沧桑中依旧难掩光芒的丝路上的一颗明珠,作为东汉丝绸之路的起点,洛阳不仅见证了东西方文明的交融,在华夏文明发展史上也留下了诸多的文化瑰宝。

2533 1 0

国际手办品牌Good Smile扎根本土,助推中国衍生品产业,未来业务多面布局发展

10月22日,以“良笑10年 微笑启航”为主题的GOOD SMILE IN CHINA 十周年品牌分享会在沪圆满举办,众多行业内重要嘉宾受邀出席,共同见证国际手办大厂Good Smile进入中国市场10年来的辉煌历程。

10月22日,以“良笑10年 微笑启航”为主题的GOOD SMILE IN CHINA 十周年品牌分享会在沪圆满举办,众多行业内重要嘉宾受邀出席,共同见证国际手办大厂Good Smile进入中国市场10年来的辉煌历程。

1390 2 0

POPIC:一个虚拟IP“手艺人”的坦白局

虚拟IP、元宇宙绝对当之无愧。密集破圈的虚拟IP形象,也昭示着各大品牌已站在又一个风口开始发展。单纯说虚拟IP本质的高科技含量,总是会显得过于冰冷与“无情”,POPIC今天以“手艺人”的身份,用过往经手的虚拟IP相关作品,来闲扯一下打造虚拟IP的一些经历。

虚拟IP、元宇宙绝对当之无愧。密集破圈的虚拟IP形象,也昭示着各大品牌已站在又一个风口开始发展。单纯说虚拟IP本质的高科技含量,总是会显得过于冰冷与“无情”,POPIC今天以“手艺人”的身份,用过往经手的虚拟IP相关作品,来闲扯一下打造虚拟IP的一些经历。

1436 1 0

bilibili手办大赏CHE冬官宣“2021年度手办” 赋能手办行业

2022年2月6日,bilibili(哔哩哔哩,又称B站)手办大赏2021暨CHE冬正式公布投票结果,由手办爱好者评选的“2021年度最受用户喜爱手办”和由行业专家评选的各项专业奖项现已全部出炉。

2022年2月6日,bilibili(哔哩哔哩,又称B站)手办大赏2021暨CHE冬正式公布投票结果,由手办爱好者评选的“2021年度最受用户喜爱手办”和由行业专家评选的各项专业奖项现已全部出炉。

12569 4 0

优酷“少歌宇宙”再推新国风力作 少歌外传《暗河传》热血开播

8月2日,由不可能的世界作家“周木楠”同名小说改编,动画少歌外传《暗河传》于优酷动漫独家开播。此前《暗河传》的相关预热海报、视频等物料一经发布,便吸引了众多原著粉和动漫粉的关注,期待动画上线播出的呼声更是不断,力证《暗河传》这一顶级IP的人气值之高,定将成为优酷新国风动画的又一力作。看新国风 ,上优酷动漫!

8月2日,由不可能的世界作家“周木楠”同名小说改编,动画少歌外传《暗河传》于优酷动漫独家开播。此前《暗河传》的相关预热海报、视频等物料一经发布,便吸引了众多原著粉和动漫粉的关注,期待动画上线播出的呼声更是不断,力证《暗河传》这一顶级IP的人气值之高,定将成为优酷新国风动画的又一力作。看新国风 ,上优酷动漫!

3041 1 0

合作伙伴