9月17日下午,由芒果TV联合马栏山视频文创园举办的国际音视频算法大赛颁奖盛典暨高峰论坛在长沙举行。在颁奖典礼上,芒果TV推出首个虚拟主持人YAOYAO,并在当天与主持人共同主持大会,这也是芒果TV首次对外展示其在虚拟技术上的应用与创新。

打开网易新闻 查看更多图片

芒果TV虚拟主持人YAOYAO

YAOYAO是依靠数字技术构建的虚拟人物,在大数据+算法的加持下,制作者是在对上亿张亚洲面孔进行了扫描分析后,才构建出了她的“面孔”;YAOYAO的身材则是通过芒果光场技术对上千体型数据进行实时重建、云端渲染而最终得来。

据芒果TV创新研究院负责人张亦弛透露,YAOYAO将会是芒果TV未来虚拟技术赛道的重要组成部分,未来也将有更多虚拟人诞生在芒果TV。

在活动现场,通过动作捕捉设备,YAOYAO已经能实现与动捕演员动态保持一致。之后,YAOYAO等虚拟人也将借助芒果TV多业务场景获得更多曝光机会,特别是芒果TV研发的虚拟场景方面,能支持到更多面向未来的业务。多个组合拳,不难看出芒果TV布局“元宇宙”的野心。

事实上,除了YAOYAO的首次亮相外,芒果TV也在这次活动中展示了未来将要研发的方向。

从算法大赛具体内容来看,本次共有三个赛题,为视频补全、视频推荐与音乐节拍检测。“视频补全”可以利用算法实现视频中不合适元素的自动抹除与替换,这有效减轻了视频行业后期工作人员的重复工作;音乐节拍检测赛题,则有望在未来产出更多实际应用在C端的“轻型”产品,降低普通用户对音视频产品进行编辑与再创造门槛。

在展示互动区,芒果TV也展示了音乐节拍检测技术目前的呈现方式——用户只需拥有芒果TV app则可实现节目内容与手机基于音乐节拍的联动,手机还可以伴随音乐类节目启动闪光灯及震动等配合效果。