近日,网易互动娱乐AILab与广东省知名报纸媒体“羊城晚报”联合正式推出了羊城晚报-羊小晚+女性和羊小派+男性的“实时AI合成主播”。

打开网易新闻 查看更多图片

在与专业主播相当的性能背后,网易互动娱乐AILab融合了一系列虚拟人制作前沿人工智能技术。首先,网易互动娱乐AILab使用面部运动捕捉,三维人脸模型重建和延迟神经渲染等技术来快速生成与真实图像无异的数字人类模型;结合语音,图像和其他模式信息进行联合建设训练可以使AI合成主播的嘴唇动和声音完美地匹配,从而实现自然流畅的新闻广播。

凭借网易互动娱乐AILab在虚拟人图像定制和内容智能生产方面的领先技术,该系统只需输入文本或音频即可快速生成几分钟内AI合成主播的新闻广播视频。

在为传统纸质媒体读者带来新的视听体验的同时,AI主播的出现将取代过去主要依靠人力完成的新闻制作环节,以更加高效和智能的内容自动化生产方式来实现。

其相关技术早在多个应用场景中,例如虚拟主持人和虚拟主持等.201浙江卫视跨年晚会动画中的虚拟助手,2021N.Game游戏学院峰会虚拟主持人以及“第五人格”哔喱梦幻杯虚拟工作室背后都有网易互动娱乐AILabs的技术支持。

除了完善的虚拟人技术外,网易互动娱乐AILab作为游戏行业领先的人工智能实验室在游戏AI,语音语言处理研究和计算机视觉和3D视觉研究领域还具有丰富的产品和实施成果。为智慧生活未来的场景开辟新的空间。

真实的实时AI合成主持人逼真的形象和流利的播报得益于网易互娱人工智能实验室的工程师在虚拟人生产方面的先进人工智能技术的发展。然后进行语音,图像和其他多种形式“注:指整合或融合两种以上生物识别技术的集成”信息联合建设训练实现了AI合成主播的唇动和声音完美匹配,使其播放具有真人主持人相同的表现能力。对于习惯阅读纸质报纸的读者来说,在媒体深度融合的背景下,扩展了纸质媒体的信息服务模式,为老读者带来了新的视听体验。