本文转自:谷歌黑板报

当音乐遇到科技,究竟会碰撞出怎样的火花?在刚刚结束的海南草莓音乐节上,新裤子乐队携手谷歌共同打造互动舞台,掀起一场颇具未来感的摇滚浪潮。

打开网易新闻 查看更多视频
新裤子乐队携手谷歌,科技加持音乐打造超燃舞台

本次舞台是谷歌联合摩登天空共同推出的一项线下实时互动项目,也是一次兼具实验性与前瞻性的尝试,通过音乐与科技结合的方式为观众带来全新的舞台体验,同时更为当代乐队提供多元化的演出呈现方式。

打开网易新闻 查看更多图片

在演出现场,TensorFlow通过机器学习,实时识别乐手与观众动作,将捕捉到的信息转化为不同特效,同时呈现于舞台两侧屏幕和舞台中央大屏幕上,配合音乐上演一场盛大的虚拟狂欢派对。特效元素均来源于新裤子乐队主唱彭磊的原创漫画《北海怪兽》,这个新晋人气IP在本次活动中以全新的形式与乐迷们进行互动,一起创造不同寻常的摇滚记忆。

打开网易新闻 查看更多图片

识别乐手动作出现的嘎嘎脑袋特效

识别乐手动作出现的爱心特效

识别乐器出现的咪咪弹琴特效

舞台部分的特效通过识别乐手和乐器来完成。当镜头拍摄乐手特写时,在TensorFlow的识别下,乐手的头部会出现咪咪的脑袋,星星、爱心、魔方和磁带会不断从乐手身上发射出来;而当乐手们手中的吉他和贝斯被识别出后,便会有火花喷射而出,观众们还能看到咪咪嘎嘎爬上乐器弹奏的场景。

打开网易新闻 查看更多图片

识别人群地平线出现的咪咪跳水和嘎嘎冲浪特效

识别观众手势出现的金属手和火焰特效

观众区则通过识别观众手势和人群地平线来完成特效。演出开始后,舞台两侧的屏幕上出现了“举起小手”和“摇摆双臂”的互动提示,当观众们做出相应动作后,屏幕上也实时出现了互动特效。观众们的手势被识别出后,便会出现一只只手指套着咪咪和嘎嘎玩偶的紫色漫画手,除此之外还有火焰、爱心等不同特效。咪咪和嘎嘎的冲浪、跳水特效是在人群地平线被识别后出现的,在人群上方和现场乐迷们进行趣味互动。

打开网易新闻 查看更多图片

幕后即兴改编特效的谷歌工程师们