虎牙开放AI数字人技术,人人都能拥有数字偶像

虚拟仿生人离我们究竟还有多远,也许近得我们难以想象,甚至近得我们可以掌控。

今年2月,《阿丽塔:战斗天使》的热映,再次点燃了大众对虚拟人科技的种种猜想与憧憬。这部改编自日本漫画《铳梦》的科幻电影,讲述了一个人类与机械改造人共存的未来世界。不过,那是26世纪。呵,文艺工作者,还是保守了。

1

几乎就在《阿丽塔》热映的同时,已在二次元圈内耕耘数年的虚拟偶像,忽然在2019年初全面爆发。直播、短视频成为推动新一轮虚拟偶像发展的主导力量。虎牙、快手、抖音、BILIBILI、爱奇艺……一个个新媒介渠道为虚拟偶像找到了更广的大众舞台和更多的变现通路。虚拟主播成为直播新风口。

而当时间来到2019年底,小编发现,该领域不管是技术进步还是产业发展,速度都超出我们的预期。

11月7日,广州,以“开放、连接、预见”为主题的“虎牙LiveTech技术大会”上,虎牙发布了两项在直播行业具有里程碑意义的技术成果:首个小程序开放平台和首个虚实结合开放平台HERO。虚拟偶像主播已经无法满足虎牙的胃口,这一次简单来说,就是虎牙推出了一套完整的“数字人”解决方案。而虎牙的“数字人”和传统的“虚拟偶像”有本质区别。虎牙AI数字人,这是一个通过模拟真人主播的方式,实现主播在不同时空,背景下的新直播创意。具体而言,虚拟数字主播是模拟了真人主播的形象,而不是创作一个虚拟的形象。

2

即将到来的5G时代将带来什么,会是谁的机会,每个TMT从业者都在思考。而在虎牙CEO董荣杰看来,5G时代将为直播行业带来前所未有的机遇,技术会成为变革直播行业最重要的驱动。虎牙则将在技术开放和虚实结合两个方向发力,运用5G+AI给直播内容带来革命性升级。

对于向来由网红主播们占据重要戏份的直播业发布会,虎牙LiveTech技术大会这种纯技术型发布极为罕见,在硬糖君印象里甚至是首次。但其带来的刺激性,却比网红主播更大。

数字人技术普惠之路

众所周知,初代虚拟偶像初音的核心逻辑,是在语音合成引擎vocaloid的支持下,粉丝可以为其量身打造个性化的歌曲。只要不涉及商业用途,初音未来的可能性属于每一个初音未来的粉丝。

这是一种基于UGC思维模式的内容繁衍生态,同时我们也可以将其理解为技术普惠的产物。而在虎牙推出的虚实结合开放平台HERO中,这种技术普惠被继续推进——即,用户不止能制作初音的歌,甚至能直接制作自己的“初音”。

“虎牙HERO平台中,我们开放了数字人运用到的相关接口和技术,让主播和开发者可以用自己的设备构建自己喜爱的形象和AR应用玩法。通过技术赋能,每个主播都可拥有数字人。”虎牙AI技术负责人许佳说。 大概是为了给行业先示范个效果,虎牙现场发布了基于HERO平台诞生的第一个直播AI数字人——虎牙与DK公会合作的数字人形象“晚玉”。

3

与之前虎牙虚拟主播“奥特曼”及帝菲儿diffir的试播尝试不同,虎牙此次提供的“数字人”技术,几乎承接了视觉底层技术支持的全部内容,而不单单是一个既有IP¥形象植入的过程。

举个例子,在“奥特曼”的直播体验里,我们能够清楚的知道这是一个基于2D的动漫形象,而在与真实主播的交互过程中,也有明显的剧本化痕迹,脱离了“直播”中所重视的实时感。也就是说,仅仅是纯粹的IP植入形式,并不能满足直播内容上的基本需求。这种需求里,既包含真实地充满未知地实时感,也包含与观众的随机交互感。

4

通过奥特曼和帝菲尔diffir的直播试水,小编琢磨着,虎牙也更清楚地知道了用户想要什么,以及距离观众需要的内容还需要做哪些努力,“数字人”技术才应运而生。 

AI数字人拓展了真人主播的活动范围和完成的工作。例如,真人主播无法完成的任务和工作(如极限运动等)可以通过AI数字人的模拟完成。而AI数字人可以发展出和真人不一样的外貌,性格,让人们看到真人主播不为人知的另一面。这充实现有的直播内容,使得直播娱乐变得更有趣。 

就直播来说,主播和直播内容是支撑起观众各种互动行为的基础。这很好的解释了为什么头部主播永远坐拥最多的粉丝和最热情的礼物赠予——因为主播自身条件够好,同时直播内容的质量碾压同类型其它主播。

科技驱动下的“数字人”

虎牙显然对“数字人”在这方面的表现信心十足。

抛开令人眼花缭乱地 “建模、驱动、渲染”的技术标准介绍,“数字人”技术用通俗易懂的语言解释就是:“数字人”使用了类似CG动画级别的高模技术,其中包括了更多地动态骨骼和实时演算技术,确保“数字人”在直播镜头前地表现能够精致到微表情。同时支持复杂地动作表演,比如我们耳熟能详地,女主播一言不合站起来就开始跳“极乐净土”。

5

在“建模”保证了动作及表情的逼真到位之后,材质渲染技术则保证了人体皮肤、毛发以及衣物的质感。更高效和强有力的技术支持,能够保证更好的视觉体验。比如在灯光下的阴影明暗关系,以及带有光反射材质的如漆皮类衣物的真实感——坐在镜头前的,将是一个实打实的3D虚拟形象。

而“数字人”技术与传统的CG动画技术最大的区别在于:它不仅支持“创造”,还可以“克隆”。在现场,虎牙展示了根据其平台人气吃鸡主播“晚玉”为原型的“晚玉弟弟”数字人应用,在演示中,数字人“晚玉弟弟”不仅身临吃鸡游戏场景中,还表演了本尊并不擅长的街舞才艺。

6

这项技术的超前之处在于,所有的技术标准都是规范化并接口化的。这意味着,无论是跨领域的虚拟IP形象,还是一个真实的人气主播,都可以通过这项技术获得高度还原的、同时具备各种直播内容才艺的“数字人”。

在企业经营中,曾经有一句俗话,叫做三流的公司做产品,二流的公司提概念,一流的公司定标准。可以想象,一套标准化的“数字人”技术对于整个直播行业可能产生的颠覆性影响。

“数字人”技术的背后,恐怕不仅仅是“2D形象”到“3D形象”的技术进化。虎牙配合同时开放的企业合作层面的定制服务“HERO计划”,意味着我们耳熟能详的虚拟IP形象都将可以快速孵化出符合上岗直播标准的同款授权“数字人”。

而在这些“数字人”背后,则有着各种强劲的技术支持。前面提到过并已经在“晚玉弟弟”上演示过的舞蹈动作库、基于自然语言理解分析及反馈的微表情、语言交互库、曲库、知识库,甚至人工智能阿尔法曾经展示出的恐怖的游戏能力,都将为“数字人”的直播内容提供保障。

7

可以预见的是,这项技术不仅会推动虚拟IP在未来进入直播领域,也将对现有的真人主播产生深远地、积极地影响。

技术并不能直接生产内容,但能够提供无数地新的可能性。就像“数字人”,能够精准地解决虚拟IP拥有者在技术方面的短板,从而使受欢迎的IP形象快速落地开播,并提供有质量保证的直播内容。这将惠及各种跨领域的IP合作方,使得影视、动漫乃至游戏中的虚拟IP形象都可以在直播领域得到更充分地增值。

除此之外,也链接了一些技术公司缺少IP落地的困境,例如加入虎牙HERO计划中,像万像科技等多家合作伙伴与虎牙在5G+AI领域也将开展从技术支持到多矩阵内容高效生产的全方位合作,一起共建虚实直播的技术生态,利用技术推动直播内容朝更好的方向革命与发展。

直播业的“水电煤”

但小编在这次“LiveTech”大会发现,“数字人”技术还只是科技改变直播行业的冰山一角。

随着直播行业从高速发展期步入稳定期,直播行业产业链关系也逐渐清晰。除了直播平台外,还包括了扮演主播经纪角色的主播公会、提供直播内容的主播以及为前三者提供各式各样服务的第三方推广服务者。

这其中借助风口跑得比较快的代表,在直播内容的二次剪辑方面包括自媒体“起小点”;在直播数据的统计及分析方面包括应用“小葫芦”。

“起小点”们的价值在于,借助于直播内容提炼的二次生产,对主播起到推广及宣传的传播作用,有助于主播的粉丝增长及巩固。而在早在今年年初,虎牙就展示了其AI实时智能剪辑技术,能够通过各种数据指标及游戏进程的参数响应,自动剪辑并生成直播的精彩时刻。

可以想见,这项技术的应用,将大大降低人工成本。使得精彩直播内容集锦不再是头部主播的专利,也将服务于更多地二三线主播及新人主播,从而让他们也能以低成本享受内容宣推的福利。

“小葫芦”们的价值则在于通过数据,指导主播会更好的改善直播内容,以及分配推广资源给更优质、更具发展潜力的主播。而在虎牙,不仅开放了相关的大数据统计接口,后续也将推出基于大数据的更有专业性的数据分析。对于主播工会而言,从平台方获得的数据不仅权威,而且规范,能够在数据分析中更有效率地得出结论,快速反应。

8

当虎牙公布其完整的小程序开发计划时,恐怕这标志着建立虎牙直播平台生态的一次勇敢尝试。小程序之于平台,就如同脚本之于主程序一样,平台提供了源源不断地生命力,以及制定规范化和统一化接口。而小程序则将渗透进实际应用的方方面面,在规范和统一的制约下,高效地实现功能,提供服务。并且推出针对小程序扶持了3年10亿元资源的“星火计划”。

无论是“数字人”“小程序”,还是“星火计划”“HERO”虎牙这次在技术端的发力,都是在直播行业的棋局上落下了寻求突破与创新的一子。小编预计,在不久的将来,一大波我们耳熟能详的IP形象将快速上岗,开启各自的直播生涯。

猜你喜欢