NO.1

如果手机变成这样

1.你边走边唱《乌梅子酱》,手机突然响起:

注意,前面右拐摔过跤,小心。

2、手机提醒你:

这周要去香港见秋香吗?
我已经把车票、衣服搭配、礼物准备好了,
请挑选一下,我帮你一键下单了。

3、 当你步入办公室附近,手机提前准备好打卡应用并提醒:

记得打卡,你工资很高吗?

它预判了你的预判,它提前知晓你的意图。

你以为是科幻吗?事实上这种能够预判用户意图,极具“智商”的手机正在来临!

打开网易新闻 查看更多图片

12月28日,继官宣自研70亿参数端侧AI大模型与全新操作系统魔法OS 8.0定档明年1月后,荣耀首次公布了MagicOS 8.0一项基于平台级AI技术的“王炸级”交互功能——任意门。

透过这个与多啦A梦颇具渊源的功能,我们似乎看到了在图形界面统治智能手机人机交互,APP不断吞噬着世界下的一种新可能——手机系统成为协助决策和思考的管家。

为了进一步揭开“任意门”背后魔法,为此我们专门采访了荣耀的技术研发团队。

在深入交流后,了解到了三个关键信息:

1.任意门背后是荣耀基于意图识别的全新人机交互设计;

2.荣耀端侧大模型被称作“魔法大模型”,其重点不是做问答和生成,而是将AI大模型的能力拆解到以用户为中心的各种场景中;

3.基于意图识别的人机交互MagicOS将催生移动互联网生态的大繁荣。

上面三点谈到最核心的就是:意图识别

更科学更专业的说法是:意图识别人机交互(Intent Based UI),简称为意图UI。

在意图UI加持,手机将转向以下四个方面

a.从被动转向主动

之前的人机交互进化,机器都是在被动接受人类信息,但今天的机器开始主动来预测你要什么。

b.从机器助手转向智慧生命体

以前的人机交互给人的体验还是机械化的,语音搜索和播报仍然机械感十足,但最新的手机的交互开始由“智慧生命体”驱动。

c.从逻辑性走向感性

以前的人机交互更多的执行人类给予的线性逻辑,但现在的人机交互已经变得情感化了。

d.从碎片转向全程闭环

原来的人机交互一直只能完成一个功能,但现在的人机交互可能一键完成所有闭环。

这是一种全新的人机交互方式,智能终端具备了识别用户意图的特征,“人机交互”技术进入了一个新的时代。

这是一种全新的人机交互方式,机器具备了识别用户意图的特征,“人机交互”技术进入了一个新的时代。

NO.2

“人机交互”的新时代来临

自1964年电脑开启命令式的人机交互后,经历了从简单命令行界面(Command Line User Interface,CLI)到图形用户界面(Graphical User Interface,GUI),再到触摸屏人机交互的变革

1. 命令行界面 (CLI)

时期:早期计算机诞生至20世纪80年代。

代表性系统:DOS是早期个人计算机上常见的命令行系统。

2. 图形用户界面 (GUI)

时期:20世纪80年代至今。

代表性系统:Apple的Mac系统、Microsoft的Windows系统。

打开网易新闻 查看更多图片

3.触摸屏人机交互的变革

时期:21世纪初至今。

代表性系统:iOS和Android等移动操作系统,以及触摸屏笔记本和手机。

命令行界面 (CLI)

操作专业要求较高,对用户并不友好

图形用户界面 (GUI)

虽然直观,在某些任务上效率不高。

触摸屏交互

对于复杂任务的执行不够方便。

随着信息的爆发式增长,人们呼唤新的人机交互方式,意图UI就是变革的新方向,到底什么是意图UI(Intent Based UI)呢,它具备以下交互新特征:

1.个性化服务

端侧AI通过学习用户的行为和偏好,使用户体验更符合个体需求。

2.简化操作

用户只需表达意图,操作系统就能理解并执行相应任务。

3.多通道交互

支持多种交互方式,用户能够以最自然的方式与操作系统进行沟通。

4.减少学习曲线

减轻用户记忆复杂命令,降低了使用新系统的学习曲线。

意图UI使人机交互更智能高效,因此荣耀也提出这将是人机交互变革的新方向。

荣耀研发管理总裁邓斌解释了原因:

“现在的人机交互,手机不再需要人明确表达,就能洞察人类需求。”

翻译的通俗点,手机是魔法师,也是预言家,手机还要有读心术。

这样的人机交互变革,比前三次的变化还要震撼。

NO.3

见识一下荣耀的意图UI

16年前,搭载着圆角短形APP的iPhone改变了智能手机潮水的方向,将互联网装进了每一个人的口袋。

而基于平台级AI能力,荣耀意图识别的全新交互范式,正在将AI装入了每个人的口袋,带来场效率革命。

意图识别人机交互

(Intent Based UI)

全新交互体验,正在悄然落地,虽然刚刚开始,复杂度处于起步阶段,但已经代表未来方向。

1.调用极灵活

a.任意门

打开网易新闻 查看更多图片

基于意图,跨应用一步直达。

长按所在界面文字、图片、文件、视频,可拖至左右两侧屏幕边缘处,触发任意门功能,通过AI进行意图识别,快捷展示最合适的应用入口。

上述元素可一步直达,快捷流转至其他应用服务,智慧推荐。如,一拖地址打车、一拖全局收藏、一拖分享、一拖搜索、一拖购物等,打破APP应用间体验壁垒,实现信息跨应用、跨设备的智慧流转,随时随地、心流不断。

b.灵动胶囊

实时信息可看可互动。

屏幕顶部的灵动胶囊,在不影响用户当前操作的情况下,显示服务的实时信息,及时知悉到用户。用户可以通过眼睛注视动态通知,即可打开应用。灵动胶囊提供了全场景、多设备、系统级的入口,各项服务状态一瞥即得。

任意门的实现综合了荣耀的魔法端侧大模型、MagicLive 智慧引擎、多模态决策引擎等,能设计出来真是个技术活。灵动胶囊则用到了多模态理解的AI能力。

NO.4

“意图UI”的底层AI逻辑

但要让手机理解人类意图,这并不容易做到。

意图UI说起来很酷,但在技术方面存在门槛。

直到AI大模型时代到来,才使得设备理解人成为了可能。

也许不少人看多了AI概念,容易被绕得云里雾里,但其实AI也是有发展阶段分层次的:

①算法级别的AI

这个层次的AI发展到顶尖就是阿尔法狗,专注于细分领域得算法

②应用级别的AI

这个层次的AI发展的顶峰,就是苹果的手机的AI摄影和MJ绘画;

③平台级别的AI

其代表就是荣耀MagicOS 7.0其可基于地理围栏、用户习惯等信息主动提供建议引导及服务。

④大模型级别的AI

这个层次的AI才刚开始不久,以百模大战冒出头的大模型为主,而绑定在手机端侧的大模型,例如荣耀的魔法大模型MagicLLM,与云侧相比更具隐私化、便携化、个人化。

如何让手机能够容易理解人类,让“意图UI”更加顺畅,荣耀手机走在了时代前列。

为什么“意图UI”可以在荣耀手机体验中得到落地,最重要的原因就是荣耀拥有第三层平台级的AI能力,从2016开始荣耀在设计操作系统框架中就强化AI能力。

当然,今天第四层端侧大模型的锦上添花,使得“意图UI”能力变得更强。

他们都是端侧AI,一个是端侧平台级AI,一个是端侧大模型级AI

为什么荣耀要在端侧AI上发力呢?

它是如何让“意图UI”得到更好体现的?

我们把采访荣耀研发管理总裁邓斌的问题整理分享一下:

手机终端做AI大模型(端侧大模型)的意义是什么?

模型有两种逻辑,其中一种是大小逻辑,模型越大通用化能力越强,端侧小模型侧重于针对使用者的“个性化”能力,这种“个性化”能力,是通过学习使用者的行为习惯和私有数据来完成“意图UI”的达成。

端侧大模型的“意图UI”具体怎么体现?

你到了一个陌生城市,手机会告诉你附近有你喜欢的酒店,哪里有想要吃的美食。这就是端侧大模型的意义,它会针对你所在地理位置,根据生活服务逻辑对你的衣食住行给出建议和方法,这样“意图UI”更容易体现。云端大模型不能帮你做这些事情,就算是云端大模型愿意做,你也不敢把这些隐私数据发给它。如果再仔细思考,你会发现AI大模型的未来在端侧。

AI的未来在端侧?可我们现在使用的都是云侧大模型?

一开始云侧大模型会更吸引社会关注,互联网最开始也是通用服务如门户网站,但互联网就是转向个体,根据你的性格和个人爱好进行交互。云侧大模型服务很快就会标准化,而端侧大模型的应用会多元和个性,这是真正的蓝海。人口越多的国家,机遇也就越大,从这一个标准来看,端侧AI的未来将会在中国。

当然,要把“意图UI”做到极致,端侧大模型只是荣耀AI级平台技术上的一个新支撑。荣耀的“意图UI”之所以走在前列,因为荣耀的竞争核心本来就是平台级AI能力。

从2016年就开始在做AI技术储备,

今天的端侧大模型让荣耀的AI能力更进一步。

NO.5

为了意图UI+AI这一刻,准备了十年

万事皆有因果,从量变到质变。

荣耀的魔法OS+端侧70亿参数魔法大模型自然不可能一蹴而就,而是因为荣耀早就有AI战略和AI技术储备,才得以按部就班恰逢时机。

荣耀在这方面的战略构想完整清楚:

“我们认为它是OS未来的演进趋势。第一代诺基亚就是菜单唤醒式,手机厂把简单的服务藏在了菜单后面做索引,让你去完全调用里面已存在的菜单,基本上不可升级服务。第二代像苹果、安卓,给你一个界面,每点进一个APP,意味着你已经和APP达成获取服务连接的合同,而手机侧应用商店开放一个市场,这个市场让你赚流水钱。第三代是我们的责任,一定是真正把应用分解成服务,通过更加高效的和你智能互动,了解清楚你需要哪些服务有效地去做整合。”

AI是MagicOS的初心,是荣耀一以贯之的战略,不是今天才被人看到。

自2016年以来,荣耀持续耕耘,以10年投入一百亿的决心,深耕AI和手机的结合。

看看时间,这一切早在AI大模型成为热潮之前,荣耀就已经讲AI和手机操作系统深深绑定了。

当时间接近2024年,即8年之后,在过去平台级AI的积累下,和最新AI大模型技术的加持下,荣耀为我们展现了未来OS的雏形。

端侧AI 1.0——应用级

在2016年,荣耀就发布了一款AI Phone——初代Magic手机,AI作为一个核心能力,来驱动用户体验的提升,把 AI理念应用到单个业务的增强上。

显然,此时的荣耀AI只是原有应用的辅助角色。

端侧AI 2.0—平台级

2021年之后,荣耀把AI能力用在平台级AI上,例如MagicOS 7.0,每个人的操作系统用一段时间之后,它会基于个人使用习惯,对于处理器能力、GPU能力、NPU能力,依照个人需求进行相应调整。

端侧AI 3.0 —大模型加持平台级AI

2024,荣耀将把70亿参数的AI端侧大模型,应用到原有的平台级AI的演进上,开始对用户个人的生活学习、围绕用户个人的服务能力进行渐进式的提升和发展。

荣耀魔法OS所打造的“个人化全场景操作系统”,这一发展道路将会因为端侧AI算力、AI大模型应用而大大提升,在一月MagicOS 8.0和Magic6发布之后,会加大荣耀领先程度。

端侧AI 4.0—未来级?

未来的操作系统,每个人的表现都不一样。你的手机每天早八点给你放音乐,和另外一个生活习惯不同的人的手机系统,会呈现不同的样子。具体贴心读心护心到什么程度,现在连想象也有点不大够用。

荣耀正以手机的系统级端侧AI,重塑操作系统。

2024年1月10日荣耀将正式发布魔法OS MagicOS 8.0和魔法大模型 MagicLLM。

可想而知,这可是国内第一款“真”端侧AI大模型手机,意义重大。

NO.6

一个意图AI化,战略生态来支持

你可能只是一个意图,手机后面是一个技术军团在支持你。你按下的0.5秒瞬间,后面可能是3000个工程师的技术结晶。

这一切浓缩在荣耀的魔法操作系统和魔法大模型上,看得见各种方便,看不见一整个技术圈。

MagicOS 8.0上,已经实现了系统和高通芯片的软硬高度融合;在通用云端大模型上,CEO赵明早在6月29日上海演讲中就判断,

“未来下一步手机AI的发展,我们认为端侧大模型应该是手机发展的方向,当然未来跟网络大模型相结合,可以选择接入文心一言、ChatGPT等不同的网络大模型”;

在垂域大模型上,荣耀的合作伙伴也非常多。

打开网易新闻 查看更多图片

当这一切逐渐搭建起来时,端、云协同已聚集成基本态势。

端侧并不是独自支撑智能化,而是进行任务切割。

a端侧会在芯片硬件上融合AI操作系统和AI大模型,但这个大模型不需要太大;

b端侧AI负责主动服务,整合手机各项核心功能和APP合作伙伴;

c端侧AI强化隐私保护,这些私人数据全部锁在端侧芯片运载的系统和AI大模型上,没有用户的许可绝不出端;

d非用户隐私的部分,可以分割脱敏后交给云侧AI大模型处理;

e通过隐私数据和非隐私数据的端侧AI和云侧AI的分工,既降低了手机的功耗,又降低了云侧AI潜在的隐私问题。

荣耀提出的意图交互绝非一家完成,而是联合生态伙伴一起做;荣耀建立了荣耀开放实验室,合作伙伴和客户可以在开放实验室与荣耀进行互联互通;全新AI生态,是技术精英们的联合(共同驱动)

意图UI是操作系统历史性机遇,也是中国AI力量的破局点,凝聚AI力量,开启操作系统新篇章。

NO.7

AI时代的手机操作系统会长什么样?

意图UI表现有多好,决定于AI能力。

而AI的能力,是寄生在操作系统上的。

谈到AI能力,一定撇不开操作系统。

AI时代,新的操作系统正在也必然会诞生。

操作系统,一直都是巨头在垄断,大部分企业并没有机会,在一个赛道里面竞争,先发优势权重太大。

但AI时代的来临,带来操作系统的巨变,AI重塑操作系统,从命令式UI到意图UI,即使企业原先的操作系统并没有尽善尽美,叠加上AI的buff就好像长了翅膀,离开了原有赛道。

邓斌总结了荣耀在操作系统方面的布局:

“MagicOS从7.0到8.0,最大的一个变化,一个是理解能力,第二个是学习能力,第三个是真正和应用产生互动的平台级能力。”

2024年1月10日,荣耀将会推出全新的MagicOS 8.0操作系统和70亿参数手机端侧魔法大模型MagicLLM,很有可能就是AI时代操作系统的样板。

AI时代的操作系统将具备以下关键特征和变革:

1、智能感知:

具备更强大感知能力获取环境信息,利用机器学习算法进行分析和理解。

2、自适应性

自动学习和适应用户的习惯与偏好,动态调整系统设置、甚至预测用户行为。

3、多模态识别:

用户能够通过语音、手势或图像与系统进行更自然的交互。

4、智能决策和推荐:

基于大数据和机器学习,AI操作系统能够进行智能决策。

5、安全性和隐私保护:

注重数据安全和隐私保护,确保用户的信息得到妥善保护。

6、端侧计算

更加注重在本地设备上进行端侧计算,以提高响应速度、降低延迟,并减少对云服务的依赖。

7、生态系统整合:

这些操作系统通常能够与各种AI服务和设备进行无缝集成,构建更为完整和强大的人工智能生态系统。

MagicOS 8.0操作系统正在朝以上七个方向努力,正因为有了这些能力,才使得“意图UI”在手机上有很好呈现,展示了操作系统的AI能力。

手机操作系统,AI革命前夜

2024年,荣耀想做的不仅仅是中国荣耀,而是世界荣耀。

这不仅是一场技术的征途,也是与更多工程师共进退的堡垒。

手机前端的“意图UI”让人惊艳,后台则是万千工程师的技术汇聚。

今天的荣耀,正华丽变身为世界手机端侧AI创新的前锋。

从魔法大模型巧妙融入手机硬件,到系统级AI手机操作系统的崛起,

我们希望看到荣耀可以引领中国AI力量崛起,因为我们相信“AI的未来在端侧,而端侧AI的未来在中国”。