搜索 Unity

虚拟偶像Sua

2021年5月25日 类别 娱乐 | 7 分 阅读
Image of real-life person created in Unity
Image of real-life person created in Unity
分享

自数字人类首度问世以来,有这么一张面孔从许许多多的虚拟形象中脱颖而出,给Unity用户留下了深刻印象。她就是Sua,自去年六月崭露头角的虚拟偶像。本文将详细介绍这位第一个用Unity实时技术制作而成的数字人、Unity韩国的形象代表。

当今,有越来越多可以以假乱真的数字人类陆续出现,其中很大一部分都踏上了成为网红的道路,而Sua作为一名虚拟网红吸引到了前所未有的关注度。Sua的母公司名为On Mind,其CEO金贤日(音译)曾于Unite Seoul 2020大会上的“Meeting the Digital Celebrity, Sua”演讲中介绍了图形技术的新进步,并演示了创建数字人类的过程,满足了大家的好奇心。

Person in a white Unity T-shirt - They were created in Unity
身着Unity T恤的Sua

什么是虚拟偶像?

数字人类也称为虚拟人类,他们可以是虚拟网红、虚拟YouTubers等等。这些称呼都是指他们是模仿人类而成的“数字”生物。因此,“虚拟偶像”一词指的是像Sua这样在流行文化中收获一定关注的数字人类。

On Mind致力于为Sua开辟一个成功的事业。她被赋予了成为模特、歌手、演员等多才艺明星的期望。正如金先生所说:“我们为Sua敞开了所有的大门。她和许多初次出道的真人偶像并无二致。为了吸引更多人气,她需要尽力经营自己的名气与知名度,让更多人能关注与喜爱自己,和普通的偶像一样。”

为什么采用实时技术的Sua能脱颖而出?

Sua之所以能受到全球关注,是因为她得益于Unity的实时渲染能实时地对观众做出反应。她也是有史以来第一个一眸一笑皆为实时的数字人类。

实时渲染的优势在于渲染速度和交互性。与实时渲染相对的,是使用离线渲染的电影和动画,它们通过显示预先渲染好的帧序列来形成运动图像。在创作者初次完成场景的摄像机与细节配置后,为了制作出高质量的图形,离线渲染需要耗费大量的算力与时间。 

相对而言,实时渲染的耗时几乎能忽略不计,Sua甚至可以在4K分辨率下做出实时互动。在限定帧率至少为30fps的前提下,Sua的渲染速度与质量和离线渲染相比具有非常明显的优势。

此内容由第三方提供商托管,该第三方提供商不允许在未接受“Targeting Cookies”的情况下观看视频。如果想观看来自这些提供商的视频,请将“Targeting Cookies”的 Cookie 首选项设置为“是”。

金先生表示,实时的交互性正是Sua的特别所在。“不像我们接触到的其它虚拟形象,Sua是一个实时的数字人类,她可以在瞬息间作出反应。目前在虚拟偶像领域中,有形形色色的公司在进行着大量的数字人类研发。” 他相信有朝一日其他人也会取得类似于Sua的成果,但就目前而言,On Mind公司仍是世界上第一个开发出高质量实时数字人类的公司,这让金先生感到自豪。

HDRP的逼真渲染

On Mind正是使用了Unity的高清渲染管线(HDRP)制作出了Sua的逼真渲染。HDRP是使用Unity可编程渲染管线(SRP)开发而成的渲染器,主要针对高清内容,且自带一系列的渲染原则: 

  • 渲染以真实物理为准。 

  • 光照具备一致性与连贯性。

  • 特色渲染功能独立于渲染路径运行。

在过去,开发者们通常无法修改渲染管线。但可编程渲染管线(SRP)支持直接对管线进行修改,高清渲染管线(HDRP)本身便是一个很好的例子。

金先生指出,强大的HDRP在Sua栩栩如生的形象中发挥了重要作用。她的皮肤是使用Shader Graph的StackLit Shader(多重受光着色器)渲染的,而头发是使用Hair Shader(头发着色器)渲染的。所有纹理只需连接到Unity的默认着色器,即可借助HDRP生成高清图像。

得益于HDRP精确的物理性光照,以及促生高级着色器的硬件进步,金先生相信On Mind完全能够渲染出逼真又不陷入恐怖谷的人体模型。*

*一种过于逼真的人形形象会导致观众反感的理论。

Three different images of Sua
在Unity中实时渲染的Sua

除了HDRP之外,Sua的实时渲染还需用到其他先进技术,如面部特征和手指的运动捕捉,及虚拟摄像机。On Mind使用iPhone来完成面部动作捕捉,用于渲染自然的表情。iPhone强大的动捕功能完全能支持实时动捕,其混合形状也可以兼容手动建模而成的Sua。为了防止出现动捕常见的双脚离地问题,在设定动画骨架时必须格外小心。而为了实现自然、精细的手指动作,他们采用了手指跟踪系统。

数字人类的未来

 SUA making facial expressions, set up in the editor
得益于实时动捕技术,Sua可以做出各种面部表情。

On Mind预计,人工智能和数字人类技术的进一步发展将很快促进市场对“数字人类服务”的需求增加。诸如语音识别、语音合成、图像识别、手势识别和聊天机器人一类的软件AI功能将显得更为自然,服务准确性和客户满意度将逐渐提高,AI将在商业应用领域开辟新的时代。

尽管有些人可能仍会怀疑公众能否完全接受数字人类,但已经有一些活生生的例子表明人与数字人共存是可能的。韩国一家头部娱乐公司最近就推出了一个广受关注的K-pop女子组合,该组合正是以虚拟世界中的真人与数字人互动作为特色卖点。数字人类成为明星的时代可能要比想象的来得快。 

若想进一步了解Sua,请关注官方Twitter频道。

2021年5月25日 类别 娱乐 | 7 分 阅读