芯片大厂高通公司在去年底发布的Snapdragon 865平台,影像讯号处理器(ISP)每秒达20亿画素。其第五代高通AI引擎,据称有上代2倍处理力,可达每秒15万亿次运算)的运算力,採用的Adreno 650 GPU效能较前代增强20%,功耗可下降了35%。也就是说,今年採用7nm製程的S865平台的手机,其AI演算、高速5G技术经验,将让Android手机成为对抗苹果iPhone的重要关键,極熊仔One要分享的,就是AI对于我们究竟有什么样的帮助。

打开网易新闻 查看更多图片

高通S865移动平台(极熊仔One拍摄)

过去几年,华为消费者CEO余承东都在IFA期间向全世界公开自家麒麟旗舰芯片的AI处理能力,把过去高通公司认为理所当然的自动化处理,包装成AI。使得高通公司不得不祭出更强大的AI应用来碾压对手。在这样的背景之下,加上5G时代来临,今年的高通S865移动平台可以说相当多的部分都在强调其终端AI运算能力。

拍摄:AI一键多拍、超級防抖模式

现在许多Android阵营的手机,就连苹果最新的iPhone SE第2代,都提供所谓“一键多拍”功能,可以在按下快门之后录製一段视频。不过三星的Galaxy S20系列因为搭载高通S865移动平台,搭配Spectra 480 ISP,每秒可以即时处理20亿像素内容,甚至可以拍摄8K视频。

不过极熊仔One想说的不是8K而是S20的"一键多拍“功能,它可以在用户按下快门开启拍摄之后,相机界面会提示用户进行多角度拍摄,同时手机会透过AI技术自动取景,包括调整焦段、滤镜,藉此选择最佳拍摄效果,在拍摄结束后,用户既可以获得长达10秒视频,以及不同镜头、不同滤镜、不同模式下的多个照片,同时还会经过人工智能技术的分析,向用户推送最佳的作品。除此之外,S20 Ultra还支持在录影的时候,通过AI运算的形式,提供超级防抖。

换句话说,以往我们可能需要用多种方式(甚至工具)才能拍摄完成的照片和视频,用三星Galaxy S20 5G系列的AI一键多拍功能,短短几秒钟的时间就可以完成了,而这正是拜AI芯片所赐。

打开网易新闻 查看更多图片

短视频:AI实时语音转字幕

5G时代来临,造就更多视频内容创作者蜂拥而至,实时语音转字幕这项功能变得非常重要,一段制作优良的Vlog,不仅要有内容、画面,字幕也是非常重要的,一旦视频变长,就需要大量的时间去编辑和校对字幕,并不适合当下快速内容产出的需求。

以目前已经上市的Redmi K30 Pro为例,该款手机就支持的AI实时语音转字幕功能,可以直接用手机前置相机录制一段视频,从而识别视频中的语音,并实时转化成字幕添加到视频当中。

摄像:AI人像留色、背景虚化

透过第五代Qualcomm AI Engine與高速ISP,可以让手机明确的识别拍照场景,从而催生出了更多的视频拍摄玩法。比如小米10系列提供的“人像留色”模式,就是利用AI算法自动识别画面中的人物,实时抠图并将背景变成黑白色,保留人物的色彩,突出人物作为焦点。相关应用还有小米10的“实时背景虚化”功能,随手拍出电影感。

5G:AI找讯号

“AI也能提升5G网络性能?”极熊仔One认为,这算是高通行动平台埋下的一个伏笔。高通认为,要让设备理解周围复杂的RF信号,最理想的工具是机器学习而不是编程算法,增强的无线电信感知能力,可以带来多方面的改进,包括更好的设备体验、系统性能和无线电安全性等,也就是说,怎麽通过AI学习的形式,了解怎麽抓取最佳信号,进而帮手机带来最好的讯号同时节省电力,或许是未来5G手机的重点。

相关技术资料提到:5G的低时延和高容量使得AI处理能够全面覆盖终端、边缘云和中央云,提供灵活的系统解决方案,让众多AI体验从无到有、从有到强。这种无线边缘架构具有很强的适应性,可以根据每个用户的需求进行适当的调整。例如,通过调整性能和成本的比例,可以更好地分配工作负载以达到特定应用程序所需的延迟和算力要求。

受益于低时延的5G网络,渲染和AI处理的工作负载可以分别在终端和边缘云上进行。由此可以实现更加个性化的购物体验,比如按照你的品味推荐的衣服,你关注的打折信息,或者你正打算为亲友购买的生日礼物。5G和AI将让XR购物体验更加逼真而高效。

打开网易新闻 查看更多图片

高通Snapdragon 865配备了一颗 2.84GHz 的 Cortex-A77 大核心、三颗 2.42GHz 的 Cortex-A77 中核心及四颗 1.8GHz 的 Cortex-A55 小核心,可以提升估计最多25%效能,内建的 Adreno 650 GPU 较前代增强 20% 的效能,功耗下降了 35%,可支援最新 8GB LPDDR5以上的记忆体、最新的UFS 3.0快闪记忆体,安兔兔测试突破58万分超越苹果A13 Bionic芯片。影像处理元件,採用的是Spectra 480 ISP,最高支持 2 亿画素相机,可进行 8K@30fps 录影。

Qualcomm Snapdragon 865 5G是「S865+X55」的组合,速度上宣传可达 7.5 Gbps,技术规格中,重点支持mmWave毫米波和 sub-6,可提供SA/NSA双模5G网路,并支援最新Wi-Fi 6技术,也是满血的5G芯片组。

在AI方面,根据高通公司的数据,截至2019年11月,全球已有10亿部装置採用高通AI引擎或相关应用,至于全新S865採用的第五代Qualcomm AI Engine,可以实现AI处理效能是上一代的2倍能力,引擎的核心是全新升级的Hexagon张量加速单元,最高可以实现每秒15兆次的运算表现,是前代张量加速单元的4倍,能源效率提升 35%。

極熊仔One认为,不管是华为、高通、三星还是联发科,这些芯片厂面对接下来5G时代来临,5G+AI的应用势在必行,上面提到的AI应用只是众多应用当中的冰山一角,但也确实推动著行动设备持续影响著我们的生活,最终,都是希望让我们脑袋裡的创意思维,可以很简单的被呈现出来。

撰写原创内容三刻钟,抄袭却只要一秒钟。还请以分享、关注代替支持,更多讯息可以前往极熊仔公众号,加入我们!