你有没有这样一种错觉:那些复杂的面部捕捉,应该只属于大厂烧钱做的3A过场动画。结果这两天我刷到一段视频,整个人直接傻眼——一个独立3D艺术家,把《我的英雄学院》里的Mt. Lady,绑出了一套能用iPhone实时驱动表情的ARKit面捕控制器。我先不说别的,光看她能眨眼、挑眉、撇嘴、做“嫌弃脸”,就已经比我见过的不少官方VRM模型生动得多。
简单来说,这是位叫Amarillo的3D艺术家干的好事。他一直在自学ARKit,同时拿自己做的Mt. Lady模型练习绑定技术,结果就捣鼓出了一套“超细腻面部控制绑定”。这玩意儿不是那种只能张嘴闭眼的简单版本,它把ARKit标准的52个融合变形都做了进去,让你能实时捏出各种微妙神态——比如半眯眼、嘴角微扬、脸颊鼓起——相当于给了模型一整套面部肌肉。
如果你平时有关注Vtuber或者3D动捕,肯定知道ARKit是什么。它就是苹果那套需要iPhone才能用的面部动作捕捉技术,摄像头一照,实时把咱们脸上的表情转成52个数据通道,再映射到数字角色上。过去常见的是套在萌系二次元角色上,这次看到被用在Mt. Lady这种身高206厘米、肌肉感明显的职业英雄身上,反差感直接拉满。想想看,你用自己那张困困的早八脸,就能让她在镜头前做出“老娘今天不想巡逻”的表情,多少有点行为艺术。
当然,Amarillo没打算藏着掖着,他把这套控制绑定的Blender工程文件和VRM格式文件都公开出来了,放在他的Patreon页面上,也就是说其他创作者也能直接拿去用。VRM文件兼容绝大多数Vtuber软件,你把模型往VSeeFace、Warudo之类程序里一导,连上iPhone,Mt. Lady就能张嘴说话、挤眉弄眼冲你观众打招呼。我甚至能想象,哪天真有人拿这个模型开播,弹幕刷屏“这谁啊”“怎么还有英雄科老师”的混乱场面。
其实这里还有个隐藏知识点值得一说:VRM格式本身的面部表达通常比较基础,很多模型只能做到简单的张嘴、笑、眨眼。而ARKit的融合变形方案,把表情拆解得特别细,能做出“悲喜交加”“不屑中带着一丝怜悯”这种复杂情绪。但这也意味着,绑定工作量大得离谱,每个变形都要手动调顶点权重,得一点点抠出自然效果。所以看到Amarillo放出完整文件,我只能说,这位老哥不是在练手,是真想让大家都能用上。
另外原文里也顺带提了一句GodotARKit,这是一个叫Jules Neghnagh Chenavas的开发者做的插件,专门给Godot引擎接苹果面捕数据用的。虽然文章没展开多讲,但足以说明现在连开源引擎都能轻松接入ARKit了,个人创作者搞实时表情动画的门槛又矮了一截。想用Mt. Lady做点小剧场、短视频,或者干脆整个虚拟主播活,缺的只剩一颗肝和一个iPhone。
如果你正好是那种“模型库一堆但面捕总是调不好”的技术玩家,这套文件说不定能当学习案例。Blender工程文件可以让你看到52个融合变形是怎么布局的,控制器结构怎么搭,甚至能拆开来学一下怎么给自己的角色加“嫌弃脸”。当然,你要是纯粹馋角色,也可以直接拿VRM文件当个电子手办摆着玩——毕竟,谁能拒绝一个会冲你挑眉的Mt. Lady呢?
说真的,这种级别的面部控制,如果出现在某个官方游戏或者商业Vtuber身上,我一定觉得“哦,经费爆炸”。但看到它是被一个独立艺术家用业余时间折腾出来,还免费分享学习材料,我反倒觉得这比那些发布会上的技术演示更让人兴奋。它没在喊“颠覆”“革命”,就是老老实实地告诉你:呐,控制器在这,文件在这,想玩就拿去。
最后提醒一句,想亲自上手的话,你得有台支持面容ID的iPhone,不然这套ARKit流程跑不起来。文件去Amarillo的Patreon页面找就行。至于要不要拿这么个角色开播,你自己掂量掂量,毕竟观众可能更想看你被怪兽揍,而不是看Mt. Lady对你卖萌——这画面太美,我不敢想。
热门跟贴