本文来自微信公众号: CG世界 ,作者:小岛一颗聪
今天咱就趁这个机会,给小伙伴们掰扯得明明白白。数字人和虚拟人是两个紧密相连,但又略有不同的概念:数字人指的是高度逼真的3D人体模型,用先进CG技术,在外观和动作上追求极致的真实感;虚拟人则是在数字人基础上进一步发展出来的概念,类似于数字人资产在特定应用场景中的“活化”。
两者的主要区别在于应用层面,数字人侧重于技术和资产本身的质量,而虚拟人则更关注如何将这些高质量的3D资产应用于实际场景中,以完成特定的服务目的或与用户交互。
为什么突然提起虚拟人?因为知名VTuber CodeMiko,和自称CodeMiko“技术员”的小姐姐Youna Kang,又整新的花活儿了。
CodeMiko是谁?
她是由UE打造的,极具创新性的虚拟主播。不同于传统可爱系虚拟主播,CodeMiko以美式脱口秀风格、成人向幽默、科技极客精神著称,常调侃Hollywood特效、游戏行业或网络文化。
在这个大多数VTuber使用Live2D或标准3D模型配合简单动捕的现今,CodeMiko无疑是个特别的存在。
提到CodeMiko,就不能不说她背后的女人-韩裔美籍艺术家Youna Kang。CodeMiko就是由她独立开发的,不仅仅是个虚拟角色,更是一个融合了尖端实时3D技术、动作捕捉、物理模拟与互动娱乐的实验性项目。
不同于大多数使用预设模型和标准动捕方案的VTuber,Youna Kang坚持亲自开发并不断优化CodeMiko背后的技术管线。
作为一位兼具程序员、动画师和表演者多重身份的先锋人物,Youna Kang常在Twitch和X上分享技术实验过程,是不少人心目中的“VTuber技术天花板”。
目前,Youna Kang和她的CodeMiko在Youtube上拥有有67.2万多粉丝,经常跟各路真人网红连麦直播,各种创意整活搭配炫酷实时特效,每次都能吸引大批观众围观。
小姐姐一路走在技术前沿,不断升级着自己的动捕系统。最近,她又整了个大活儿--用全新的动捕技术,将一把现实世界的椅子“搬”进了CodeMiko的虚拟世界。
小姐姐通过3D扫描,将一把真实的椅子还原进数字世界,作为其新动捕系统的测试。
可以看到,虚拟环境中的CodeMiko可以自然地触摸、移动,甚至坐在这把椅子上,交互效果极为扎实,动作流畅、完全没有常见的“手穿椅子”或“手部悬空”的尴尬问题。
Youna Kang表示,这项技术未来可以把任何实物无缝带入虚拟空间,让虚拟直播更加沉浸,或将为VTubing乃至整个VR领域打开新世界的大门。
先别忙着惊叹小姐姐明明可以靠脸吃饭却偏偏要靠才华,她的才华可远不止于此,她还拥有一项鲜有VTuber能匹敌的绝技:在UE中实现超逼真头发模拟效果!
多逼真?发丝外观几乎与真人无异的程度。
又一个刷新VTubing技术标杆的项目,实验聚焦于让虚拟主播的发丝如同真实头发一样自然响应动作。
物理效果不仅流畅且精度极高,从发丝梳理到动态摆动,全都实时呈现。随着CodeMiko转头、用手拨弄,发丝随之晃动、倾泻,细节逼真到令人惊叹。
不光是长直发,弹力十足的卷发也依旧不在话下。不信看看这个极其精细的卷发物理模拟系统,不仅模型细节拉满,绑定技术也更上一层楼。
当CodeMiko用手指“捋”过头发,卷发会自然顺滑地被拉直;而一旦松开手指,发丝又会立刻弹回原本蓬松又弹性的卷曲状态,动态流畅得仿佛是真发。
众所周知,卷发在3D模拟中向来是技术难点,常被简化甚至是忽略;而小姐姐不仅攻克了这一难题,居然还做到了实时交互级别。
不止是头发,虚拟形象也可以拥有逼真的衣服和毛发动态。
小姐姐在UE5中,为自己的虚拟角色实现了超写实的服装布料物理和毛发动态效果。可以看到,衣服会随着动作自然飘动、褶皱;毛发也会随风或身体运动真实摆动,细节丰富到令人难以相信这是实时渲染的虚拟形象。
为了让角色动起来更自然,小姐姐还搭配使用 Xsens Awinda无线动作捕捉系统 ,实时追踪自己的全身动作,并直接驱动虚拟角色,实现毫秒级同步的流畅表演。
来看看效果:
更早之前,Youna Kang还让CodeMiko漫步在一个数字打造的3D热带雨林中,与里面的虚拟生物互动过。
小姐姐形容那次体验就像是“把户外实景实时搬进了虚拟世界”,既真实又充满想象力。
是的,小姐姐直接让CodeMiko成功完成了一场“仿佛真实户外”的直播体验,只不过整个场景都发生在UE5构建的数字世界中。
CodeMiko留着短发,穿上了《生化危机》中女主的经典战衣,走进高度逼真的热带雨林,与虚拟生物互动、探索丛林;无论外面什么天气、什么环境,只要技术到位,这位VTuber就能随时随地来一场“身临其境”的沉浸式户外直播!
当然,什么都没有一蹴而就,CodeMiko也是经过了一次又一次升级,才成了Twitch上一众VTuber里那道颜色不一样的烟火的。
CodeMiko的第一次改进,就是聚焦在了手指追踪和全新头发物理效果上。
最早版本的CodeMiko虽然也是受Youna Kang操纵,但受限于初期技术,其手指无法被捕捉,因此角色手部无法做出惊喜的同步动作。
通过发布的简短演示可以看到,更新后的版本支持通过动作捕捉手套控制手指动作,新版CokeMiko有了可灵活移动的手指。
不仅如此,CodeMiko也拥有了更高质量的皮肤和动画,获得新发型的同时头发的实时模拟物理效果也得到了升级。
得益于升级后的物理系统,发丝看起来更加的灵敏逼真。
对Youna Kang和CodeMiko感兴趣的小伙伴,
可以关注小姐姐的X:https://x.com/codemiko,或CodeMiko的Twich频道观看她的直播:https://www.twitch.tv/codemiko。
