当数字虚拟人赛道越来越卷,品牌方只有获得了低成本的一站式解决方案,才能告别「重复造轮子」的实验,让虚拟人更高效地落地。
最近,一位叫「奶思」的虚拟人主播火了。
才一出场,奶思的颜值就征服了众人:尽管虚拟人普遍五官精致、气质脱俗,但像奶思这样独特的「民族风」虚拟人,还真是第一次见。
12 月 12 日上午,蒙牛在微博官方发布了奶思形象图,并预告了当晚奶思即将迎来直播首秀。
在双十二直播当天,快手官方虚拟主播关小芳、虚拟歌手神奇少女张凤琴、快手火力营营长关箭、百度 AI 数字人希加加、央视网虚拟主播央视网小 C 等多位数字虚拟人一起发布了迎新海报,欢迎元宇宙大家庭新朋友的到来。
这让奶思身份的神秘感瞬间拉满,奶思到底是谁?又来自何方?
全网首个游牧民族虚拟人「奶思」
在「奶思」的官方介绍中,是这样写的:「奶思,女,蒙古族,1999 年 8 月 18 日生,中国内蒙古和林格尔人,2022 年 7 月毕业于蒙牛营养研究院美味牛奶专业,精通牛奶、酸奶、冰淇淋、奶酪、奶粉等乳品研究,毕业后加入蒙牛集团,现任蒙牛集团未来星管培生。」
从人设定位上说,奶思是「蒙牛集团第一虚拟员工」,同时也是「中国乳业第一虚拟主播」和「元宇宙第一游牧民族电商主播」。
快手StreamLake为蒙牛奶思打造的官方TVC
不同于一般偏现代感、时尚感的虚拟人,奶思的民族范儿十足。出生于内蒙古大草原,奶思不仅能歌善舞,业余还能骑马射箭。从介绍里可以看到,奶思还能够熟练口播蒙语、汉语、英语三种语言。
奶思的诞生离不开强大的技术支持。
据悉,凭借行业领先的全链路虚拟数字人直播解决方案,以及作为内容平台在品牌营销上的独特优势,快手 StreamLake 从多家数字虚拟人领域头部企业的竞争中脱颖而出,为此次蒙牛人性化的直播电商 IP 打造提供技术支持。
作为领域内资深的 3D 资产设计师,奶思项目的美术设计负责人闻超(化名)曾经操刀过《诛仙》系列、《笑傲江湖》系列等游戏 IP 大作。但这一次奶思的设计需求却让他感到“很特别”。
奶思整体设计灵感来源于蒙牛集团的发源地——土默特部落的传统文化。为了完成奶思的数字资产设计,他与团队一起深入钻研蒙古族传统文化,这在他的职业生涯中也是难得的经历。
为了更贴近年轻一代的审美心理,设计师们将土默特部落雍容华贵风格与现代元素巧妙地融合在一起。比如从外观上看,奶思佩戴着由红珊瑚和宝石组成的简化版额顶饰,搭配长流苏耳饰;而奶思身上所穿着的改良版绣花蒙古袍,也是在长袍的基础上改短,再加上及膝的蒙古靴,更显活力。
奶思脸部特写
在定稿之前,美术设计团队反复打磨设计方案,迭代了很多版。团队在基础的人物绑定上,增加了配饰绑定,比如在头饰部分可以单独控制区域的珍珠做起伏动画,模拟真实头饰的跟随运动;流苏状的耳饰分为 5 股链,也可单独控制,做成动画;奶思的面部表情尤为重要,这部分是可以根据层级独立控制,大到五官小到眼角,并且还预制了几款基础表情。
闻超还提到,奶思的长辫子也是一大设计亮点,而组成这条辫子的头发丝,是美术设计师们投入了相当多的时间和精力,一根一根 “种” 上去的。
团队还为奶思添加了一些凸显蒙古文化元素的特效设计,比如蒙古族最高礼仪的敬酒要使用银碗:
快手 StreamLake 设计团队为蒙牛制作的特效银碗
像奶思这样的虚拟人,是近两年诞生的虚拟人大潮中的一员。虚拟人商业化落地持续加速,一时间,各式各样的虚拟代言人争相涌现,比如虚拟偶像女团 A-SOUL、银发少女 AYAYI、国风系虚拟偶像翎、美妆达人柳夜熙。在数字世界里,虚拟人正在成为众多品牌钦点的代言人。
事实上,在任何品牌营销场景中,不管是内容电商推广、电商直播、联名定制产品,还是发布会站台、晚会演出等各类基于品牌诉求的形式,虚拟人能够承担的职责与真人几乎相差无几。更具优势的是,在营销环节中,虚拟人能够结合场景随时随地调整、快速响应变化,配合达到最优质的营销效果,而且不会有真人明星的「人设崩塌」隐患。
这也是蒙牛选择让奶思亮相双十二带货直播的原因。对蒙牛这样的品牌方而言,虚拟人奶思的诞生是「一举两得」:不仅降低了品牌营销成本,也让品牌形象变得更鲜活、更年轻,更贴近目标消费者。
在虚拟人这条热门赛道上,想要「出圈」谈何容易。但刚刚出道的奶思就交上了不错的业绩答卷:据悉,奶思的直播首秀吸引了近 300 万人观看,相较于该账号过去 30 天内的均值表现,互动量提升明显,直播间点赞数和评论数分别提升 800% 和 88%。近几日,奶思在社交媒体平台也引起了极高的讨论度。
快手直播间首秀期间,不断飘过的弹幕,印证着观众的喜爱
奶思官方海报发布,微博评论区留言
揭秘「奶思」幕后的全链路技术
为什么奶思刚一出道就自带光环?除了极具个性的人设和 3D 设计,快手StreamLake在综合技术能力上的优势也是成功因素之一。
由于要经历建模、驱动、渲染几个步骤,业内打磨出一个虚拟人普遍需要四五个月。作为「奶思」的技术提供方,快手 StreamLake 团队面对的问题是:项目 10 月中旬启动,双十二就需要最终上线。这意味着奶思项目的周期不足两个月,对团队的交付能力带来了极大挑战。
快手虚拟人产品专家徐智伟表示,奶思得以顺利上线,很大程度上得益于快手在搭建虚拟人产品矩阵的经验。“我们的技术积累是比较深厚的,同时在打造虚拟人关小芳、关箭和张凤琴的时候积累了大量实际应用场景的优化经验或相关方法,所以团队能够把已有能力迅速成熟化,少走了很多弯路。”
另外一项挑战是,作为蒙牛集团首位虚拟员工,奶思今后要在电商直播、新媒体互动、品牌拟人化宣传等场景上落地应用,所承担的职责是相当复合的。
据快手虚拟互动技术负责人 Eric 介绍,奶思需要满足蒙牛多种需求场景的开播,包括日常开播以及像双十二这样的大促活动直播。在业务场景中,奶思有时也需要与真人同场互动,这就会涉及虚实互动的技术。此外,奶思项目还有一个需求,就是能同时推流到多个平台开播。
当前,依托建模、驱动、渲染技术的数字人行业已经形成完善的产业链。一方面,虚拟主播、虚拟偶像、虚拟代言人等泛娱乐场景下的传播型虚拟人不断涌现;另一方面,科技大厂加入赛道之后,金融、文旅、教育等实用场景下的服务型虚拟人也被看好。
今年两会期间,最高检首次通过虚拟检察官解读 2022 年政府工作报告内容,而这位虚拟检察官背后的技术支持团队就来自快手。
在虚拟人的直播电商和视频制作两方面,快手有着更具差异化的优势。在奶思之前,快手 StreamLake 技术团队已经打造过张凤琴、关小芳、关箭等虚拟人主播,摸索出一套涵盖建模、驱动、运营等环节的全链路方案,并形成了对外输出的数字人及 XR 解决方案。
这套解决方案并不是首次亮相,在今年 9 月份的世界人工智能大会 (WAIC) 上,快手 Y-tech AI 技术中心负责人万鹏飞曾对其做了全面的介绍,引发行业、媒体的关注和热议。大会上分享的内容,包括快手虚拟演播助手、老铁智播间、移动端混合现实引擎三大应用,以及数字人及 XR 制作平台、快手虚拟世界互动平台两大平台的独特优势和产业布局。
在奶思项目中,「数字人及 XR 解决方案」最核心的几项技术能力,也充分发挥了价值。
虚拟人也有「两张面孔」?
基于奶思的直播需求,快手 StreamLake 技术团队将相关的能力迅速整合起来,提供了两套驱动方案,一种是中之人驱动型,一种是 AI 驱动型。
数字人及 XR 解决方案中的「虚拟演播助手」是一款面向中之人驱动的数字人一站式直播工具,既支持普通的摄像头驱动,也兼容专业的动作捕捉设备,还支持语音、文本驱动。虚拟演播助手集成了 3D 虚拟人和虚拟场景的一站式能力,内置了数量众多的快手独家特效,并支持多平台推流直播。
在这款软件的模块化设计基础上,团队针对奶思做了一些技术上的优化,同时打通了与快手直播间观众的互动功能。奶思模型可直接被导入软件,通过可穿戴设备驱动直播。即使在没有穿戴设备的条件下,奶思也可以通过摄像头驱动开展直播和创作。基于快手超过十万款特效,奶思的直播互动形式也变得更加丰富。
有了快手虚拟演播助手工具,无论是低门槛还是高品质的虚拟人直播需求,都可以一站式解决。比如奶思在直播期间用到的奶盒等道具,也能通过扫描实物进行 1:1 还原,快速生成 3D 数字资产。
快手为蒙牛制作的 3D 数字资产一比一扫描图
如果说虚拟演播助手面向的是中之人驱动的虚拟人,而「快手智播」则是一款为客户提供自动化数字人直播和视频制作解决方案的产品,进一步利用 AI 技术的驱动能力解决了持续的人力与运营投入所带来高昂成本。
根据快手多模态内容理解技术负责人张富峥的介绍,只需要在快手智播的后台界面选取奶思这个虚拟人,然后输入对应的文案、编排一些动作,奶思就可以进行 7×24 小时的直播了。快手智播让虚拟人主播不需要中之人就能驱动,而且降低了使用门槛和运营成本。
此外,快手智播支持多种内容制作形式,比如画面以外的一些歌声合成、语音合成等,还可以用在新闻等各种内容的播报场景中,让虚拟人丝滑地转化为各种身份的虚拟员工。
“快手智播支持奶思 AI 自动开播,能够根据蒙牛输入的文案脚本匹配动作表情,讲解所售货品,并且能够自动上架商品挂车,以及回答直播间里用户的提问。真人直播带货 10 个小时之后,剩下的 14 个小时可以用 AI 开播,同样能带来卖货收益。”
虚拟人卷到「下半场」
目前,虚拟人正处于从产业链搭建到大规模应用转化的过渡期。元宇宙的东风过境之后,技术成本和商业化落地的问题开始暴露。
首先,制作和运营成本太高。过去的两年,赛道上的许多玩家为了获得先机、拿下更多的标杆项目,不计成本地投入虚拟人的制作、运营以及营销,想要研发一款较为优质的虚拟人。其次,走红之后,如何维持热度和进行商业变现?这是很多虚拟人面临的商业化困境。前期投入大量制作和宣发成本带来的流量,却很快流失殆尽。
火爆出圈之后,数字人的下半场,路要怎么走?
从技术提供方的角度观察,快手认为,关键在于能够为行业提供低成本快速生成虚拟人、进行直播和短视频制作的方案。有了低成本的一站式解决方案,品牌方就像是「站在巨人的肩膀上」,而落地能力的强弱也在一定程度上反映了技术的价值所在。
基于深厚的底层技术积累以及自身大规模 C 端业务的锤炼,快手在 2022 年 8 月正式推出了 toB 品牌 StreamLake,专注于成为视频化升级助推器,将沉淀多年的音视频和 AI 等关键技术能力以产品化的形式对外开放,提供一站式音视频 + AI 解决方案。
具体来说,快手 StreamLake「数字人及 XR 解决方案」包括 IP 型数字人、工具型数字人、ID 型数字人三种。所有的技术能力都已经在快手自身的虚拟人矩阵中得到验证。
特别地,在数字资产制作层面,快手 StreamLake 基于自研技术、美术的有机结合和联合优化,打造了一站式制作方案。包括自研的好莱坞级别的数字人采集建模系统、超高精度虚拟数字人自动绑定算法、软硬件结合的动作捕捉与驱动系统、跨模态画面及声音合成算法等。
虚拟人赛道卷到终点,不会是价格战,也不会只凭技术分胜负。不管是快手官方推出的关小芳、关箭,还是如今蒙牛寄予厚望的奶思,从这些案例都可以看出,想要推动大规模、高质量的虚拟人落地,对于用户、技术、场景的深刻洞察缺一不可。
(应受访者要求:闻超为化名)