NO.1
如果手機變成這樣
1.你邊走邊唱《烏梅子醬》,手機突然響起:
注意,前面右拐摔過跤,小心。
2、手機提醒你:
這周要去香港見秋香嗎?
我已經(jīng)把車票、衣服搭配、禮物準(zhǔn)備好了,
請?zhí)暨x一下,我?guī)湍阋绘I下單了。
3、 當(dāng)你步入辦公室附近,手機提前準(zhǔn)備好打卡應(yīng)用并提醒:
記得打卡,你工資很高嗎?
它預(yù)判了你的預(yù)判,它提前知曉你的意圖。
你以為是科幻嗎?事實上這種能夠預(yù)判用戶意圖,極具“智商”的手機正在來臨!
![]()
12月28日,繼官宣自研70億參數(shù)端側(cè)AI大模型與全新操作系統(tǒng)魔法OS 8.0定檔明年1月后,榮耀首次公布了MagicOS 8.0一項基于平臺級AI技術(shù)的“王炸級”交互功能——任意門。
而透過這個與多啦A夢頗具淵源的功能,我們似乎看到了在圖形界面統(tǒng)治智能手機人機交互,APP不斷吞噬著世界下的一種新可能——手機系統(tǒng)成為協(xié)助決策和思考的管家。
為了進(jìn)一步揭開“任意門”背后魔法,為此我們專門采訪了榮耀的技術(shù)研發(fā)團隊。
在深入交流后,了解到了三個關(guān)鍵信息:
1.任意門背后是榮耀基于意圖識別的全新人機交互設(shè)計;
2.榮耀端側(cè)大模型被稱作“魔法大模型”,其重點不是做問答和生成,而是將AI大模型的能力拆解到以用戶為中心的各種場景中;
3.基于意圖識別的人機交互,MagicOS將催生移動互聯(lián)網(wǎng)生態(tài)的大繁榮。
上面三點談到最核心的就是:意圖識別。
更科學(xué)更專業(yè)的說法是:意圖識別人機交互(Intent Based UI),簡稱為意圖UI。
![]()
在意圖UI加持,手機將轉(zhuǎn)向以下四個方面
a.從被動轉(zhuǎn)向主動
之前的人機交互進(jìn)化,機器都是在被動接受人類信息,但今天的機器開始主動來預(yù)測你要什么。
b.從機器助手轉(zhuǎn)向智慧生命體
以前的人機交互給人的體驗還是機械化的,語音搜索和播報仍然機械感十足,但最新的手機的交互開始由“智慧生命體”驅(qū)動。
c.從邏輯性走向感性
以前的人機交互更多的執(zhí)行人類給予的線性邏輯,但現(xiàn)在的人機交互已經(jīng)變得情感化了。
d.從碎片轉(zhuǎn)向全程閉環(huán)
原來的人機交互一直只能完成一個功能,但現(xiàn)在的人機交互可能一鍵完成所有閉環(huán)。
這是一種全新的人機交互方式,智能終端具備了識別用戶意圖的特征,“人機交互”技術(shù)進(jìn)入了一個新的時代。
這是一種全新的人機交互方式,機器具備了識別用戶意圖的特征,“人機交互”技術(shù)進(jìn)入了一個新的時代。
NO.2
“人機交互”的新時代來臨
自1964年電腦開啟命令式的人機交互后,經(jīng)歷了從簡單命令行界面(Command Line User Interface,CLI)到圖形用戶界面(Graphical User Interface,GUI),再到觸摸屏人機交互的變革:
1. 命令行界面 (CLI)
時期:早期計算機誕生至20世紀(jì)80年代。
代表性系統(tǒng):DOS是早期個人計算機上常見的命令行系統(tǒng)。
2. 圖形用戶界面 (GUI)
時期:20世紀(jì)80年代至今。
代表性系統(tǒng):Apple的Mac系統(tǒng)、Microsoft的Windows系統(tǒng)。
![]()
3.觸摸屏人機交互的變革
時期:21世紀(jì)初至今。
代表性系統(tǒng):iOS和Android等移動操作系統(tǒng),以及觸摸屏筆記本和手機。
命令行界面 (CLI)
操作專業(yè)要求較高,對用戶并不友好
圖形用戶界面 (GUI)
雖然直觀,在某些任務(wù)上效率不高。
觸摸屏交互
對于復(fù)雜任務(wù)的執(zhí)行不夠方便。
![]()
隨著信息的爆發(fā)式增長,人們呼喚新的人機交互方式,意圖UI就是變革的新方向,到底什么是意圖UI(Intent Based UI)呢,它具備以下交互新特征:
1.個性化服務(wù)
端側(cè)AI通過學(xué)習(xí)用戶的行為和偏好,使用戶體驗更符合個體需求。
2.簡化操作
用戶只需表達(dá)意圖,操作系統(tǒng)就能理解并執(zhí)行相應(yīng)任務(wù)。
3.多通道交互
支持多種交互方式,用戶能夠以最自然的方式與操作系統(tǒng)進(jìn)行溝通。
4.減少學(xué)習(xí)曲線
減輕用戶記憶復(fù)雜命令,降低了使用新系統(tǒng)的學(xué)習(xí)曲線。
意圖UI使人機交互更智能高效,因此榮耀也提出這將是人機交互變革的新方向。
榮耀研發(fā)管理總裁鄧斌解釋了原因:
“現(xiàn)在的人機交互,手機不再需要人明確表達(dá),就能洞察人類需求。”
翻譯的通俗點,手機是魔法師,也是預(yù)言家,手機還要有讀心術(shù)。
這樣的人機交互變革,比前三次的變化還要震撼。
NO.3
見識一下榮耀的意圖UI
16年前,搭載著圓角短形APP的iPhone改變了智能手機潮水的方向,將互聯(lián)網(wǎng)裝進(jìn)了每一個人的口袋。
而基于平臺級AI能力,榮耀意圖識別的全新交互范式,正在將AI裝入了每個人的口袋,帶來場效率革命。
意圖識別人機交互
(Intent Based UI)
全新交互體驗,正在悄然落地,雖然剛剛開始,復(fù)雜度處于起步階段,但已經(jīng)代表未來方向。
![]()
1.調(diào)用極靈活
a.任意門
![]()
基于意圖,跨應(yīng)用一步直達(dá)。
長按所在界面文字、圖片、文件、視頻,可拖至左右兩側(cè)屏幕邊緣處,觸發(fā)任意門功能,通過AI進(jìn)行意圖識別,快捷展示最合適的應(yīng)用入口。
上述元素可一步直達(dá),快捷流轉(zhuǎn)至其他應(yīng)用服務(wù),智慧推薦。如,一拖地址打車、一拖全局收藏、一拖分享、一拖搜索、一拖購物等,打破APP應(yīng)用間體驗壁壘,實現(xiàn)信息跨應(yīng)用、跨設(shè)備的智慧流轉(zhuǎn),隨時隨地、心流不斷。
b.靈動膠囊
![]()
實時信息可看可互動。
屏幕頂部的靈動膠囊,在不影響用戶當(dāng)前操作的情況下,顯示服務(wù)的實時信息,及時知悉到用戶。用戶可以通過眼睛注視動態(tài)通知,即可打開應(yīng)用。靈動膠囊提供了全場景、多設(shè)備、系統(tǒng)級的入口,各項服務(wù)狀態(tài)一瞥即得。
任意門的實現(xiàn)綜合了榮耀的魔法端側(cè)大模型、MagicLive 智慧引擎、多模態(tài)決策引擎等,能設(shè)計出來真是個技術(shù)活。靈動膠囊則用到了多模態(tài)理解的AI能力。
NO.4
“意圖UI”的底層AI邏輯
但要讓手機理解人類意圖,這并不容易做到。
意圖UI說起來很酷,但在技術(shù)方面存在門檻。
直到AI大模型時代到來,才使得設(shè)備理解人成為了可能。
也許不少人看多了AI概念,容易被繞得云里霧里,但其實AI也是有發(fā)展階段分層次的:
①算法級別的AI
這個層次的AI發(fā)展到頂尖就是阿爾法狗,專注于細(xì)分領(lǐng)域得算法
②應(yīng)用級別的AI
這個層次的AI發(fā)展的頂峰,就是蘋果的手機的AI攝影和MJ繪畫;
③平臺級別的AI
其代表就是榮耀MagicOS 7.0其可基于地理圍欄、用戶習(xí)慣等信息主動提供建議引導(dǎo)及服務(wù)。
④大模型級別的AI
這個層次的AI才剛開始不久,以百模大戰(zhàn)冒出頭的大模型為主,而綁定在手機端側(cè)的大模型,例如榮耀的魔法大模型MagicLLM,與云側(cè)相比更具隱私化、便攜化、個人化。
![]()
如何讓手機能夠容易理解人類,讓“意圖UI”更加順暢,榮耀手機走在了時代前列。
為什么“意圖UI”可以在榮耀手機體驗中得到落地,最重要的原因就是榮耀擁有第三層平臺級的AI能力,從2016開始榮耀在設(shè)計操作系統(tǒng)框架中就強化AI能力。
當(dāng)然,今天第四層端側(cè)大模型的錦上添花,使得“意圖UI”能力變得更強。
他們都是端側(cè)AI,一個是端側(cè)平臺級AI,一個是端側(cè)大模型級AI
為什么榮耀要在端側(cè)AI上發(fā)力呢?
它是如何讓“意圖UI”得到更好體現(xiàn)的?
我們把采訪榮耀研發(fā)管理總裁鄧斌的問題整理分享一下:
手機終端做AI大模型(端側(cè)大模型)的意義是什么?
模型有兩種邏輯,其中一種是大小邏輯,模型越大通用化能力越強,端側(cè)小模型側(cè)重于針對使用者的“個性化”能力,這種“個性化”能力,是通過學(xué)習(xí)使用者的行為習(xí)慣和私有數(shù)據(jù)來完成“意圖UI”的達(dá)成。
端側(cè)大模型的“意圖UI”具體怎么體現(xiàn)?
你到了一個陌生城市,手機會告訴你附近有你喜歡的酒店,哪里有想要吃的美食。這就是端側(cè)大模型的意義,它會針對你所在地理位置,根據(jù)生活服務(wù)邏輯對你的衣食住行給出建議和方法,這樣“意圖UI”更容易體現(xiàn)。云端大模型不能幫你做這些事情,就算是云端大模型愿意做,你也不敢把這些隱私數(shù)據(jù)發(fā)給它。如果再仔細(xì)思考,你會發(fā)現(xiàn)AI大模型的未來在端側(cè)。
AI的未來在端側(cè)?可我們現(xiàn)在使用的都是云側(cè)大模型?
一開始云側(cè)大模型會更吸引社會關(guān)注,互聯(lián)網(wǎng)最開始也是通用服務(wù)如門戶網(wǎng)站,但互聯(lián)網(wǎng)就是轉(zhuǎn)向個體,根據(jù)你的性格和個人愛好進(jìn)行交互。云側(cè)大模型服務(wù)很快就會標(biāo)準(zhǔn)化,而端側(cè)大模型的應(yīng)用會多元和個性,這是真正的藍(lán)海。人口越多的國家,機遇也就越大,從這一個標(biāo)準(zhǔn)來看,端側(cè)AI的未來將會在中國。
當(dāng)然,要把“意圖UI”做到極致,端側(cè)大模型只是榮耀AI級平臺技術(shù)上的一個新支撐。榮耀的“意圖UI”之所以走在前列,因為榮耀的競爭核心本來就是平臺級AI能力。
從2016年就開始在做AI技術(shù)儲備,
今天的端側(cè)大模型讓榮耀的AI能力更進(jìn)一步。
NO.5
為了意圖UI+AI這一刻,準(zhǔn)備了十年
萬事皆有因果,從量變到質(zhì)變。
榮耀的魔法OS+端側(cè)70億參數(shù)魔法大模型自然不可能一蹴而就,而是因為榮耀早就有AI戰(zhàn)略和AI技術(shù)儲備,才得以按部就班恰逢時機。
![]()
榮耀在這方面的戰(zhàn)略構(gòu)想完整清楚:
“我們認(rèn)為它是OS未來的演進(jìn)趨勢。第一代諾基亞就是菜單喚醒式,手機廠把簡單的服務(wù)藏在了菜單后面做索引,讓你去完全調(diào)用里面已存在的菜單,基本上不可升級服務(wù)。第二代像蘋果、安卓,給你一個界面,每點進(jìn)一個APP,意味著你已經(jīng)和APP達(dá)成獲取服務(wù)連接的合同,而手機側(cè)應(yīng)用商店開放一個市場,這個市場讓你賺流水錢。第三代是我們的責(zé)任,一定是真正把應(yīng)用分解成服務(wù),通過更加高效的和你智能互動,了解清楚你需要哪些服務(wù)有效地去做整合。”
AI是MagicOS的初心,是榮耀一以貫之的戰(zhàn)略,不是今天才被人看到。
自2016年以來,榮耀持續(xù)耕耘,以10年投入一百億的決心,深耕AI和手機的結(jié)合。
看看時間,這一切早在AI大模型成為熱潮之前,榮耀就已經(jīng)講AI和手機操作系統(tǒng)深深綁定了。
當(dāng)時間接近2024年,即8年之后,在過去平臺級AI的積累下,和最新AI大模型技術(shù)的加持下,榮耀為我們展現(xiàn)了未來OS的雛形。
端側(cè)AI 1.0——應(yīng)用級
在2016年,榮耀就發(fā)布了一款A(yù)I Phone——初代Magic手機,AI作為一個核心能力,來驅(qū)動用戶體驗的提升,把 AI理念應(yīng)用到單個業(yè)務(wù)的增強上。
顯然,此時的榮耀AI只是原有應(yīng)用的輔助角色。
端側(cè)AI 2.0—平臺級
2021年之后,榮耀把AI能力用在平臺級AI上,例如MagicOS 7.0,每個人的操作系統(tǒng)用一段時間之后,它會基于個人使用習(xí)慣,對于處理器能力、GPU能力、NPU能力,依照個人需求進(jìn)行相應(yīng)調(diào)整。
端側(cè)AI 3.0 —大模型加持平臺級AI
2024,榮耀將把70億參數(shù)的AI端側(cè)大模型,應(yīng)用到原有的平臺級AI的演進(jìn)上,開始對用戶個人的生活學(xué)習(xí)、圍繞用戶個人的服務(wù)能力進(jìn)行漸進(jìn)式的提升和發(fā)展。
榮耀魔法OS所打造的“個人化全場景操作系統(tǒng)”,這一發(fā)展道路將會因為端側(cè)AI算力、AI大模型應(yīng)用而大大提升,在一月MagicOS 8.0和Magic6發(fā)布之后,會加大榮耀領(lǐng)先程度。
端側(cè)AI 4.0—未來級?
未來的操作系統(tǒng),每個人的表現(xiàn)都不一樣。你的手機每天早八點給你放音樂,和另外一個生活習(xí)慣不同的人的手機系統(tǒng),會呈現(xiàn)不同的樣子。具體貼心讀心護(hù)心到什么程度,現(xiàn)在連想象也有點不大夠用。
榮耀正以手機的系統(tǒng)級端側(cè)AI,重塑操作系統(tǒng)。
2024年1月10日,榮耀將正式發(fā)布魔法OS MagicOS 8.0和魔法大模型 MagicLLM。
可想而知,這可是國內(nèi)第一款“真”端側(cè)AI大模型手機,意義重大。
NO.6
一個意圖AI化,戰(zhàn)略生態(tài)來支持
你可能只是一個意圖,手機后面是一個技術(shù)軍團在支持你。你按下的0.5秒瞬間,后面可能是3000個工程師的技術(shù)結(jié)晶。
這一切濃縮在榮耀的魔法操作系統(tǒng)和魔法大模型上,看得見各種方便,看不見一整個技術(shù)圈。
在MagicOS 8.0上,已經(jīng)實現(xiàn)了系統(tǒng)和高通芯片的軟硬高度融合;在通用云端大模型上,CEO趙明早在6月29日上海演講中就判斷,
“未來下一步手機AI的發(fā)展,我們認(rèn)為端側(cè)大模型應(yīng)該是手機發(fā)展的方向,當(dāng)然未來跟網(wǎng)絡(luò)大模型相結(jié)合,可以選擇接入文心一言、ChatGPT等不同的網(wǎng)絡(luò)大模型”;
在垂域大模型上,榮耀的合作伙伴也非常多。
![]()
當(dāng)這一切逐漸搭建起來時,端、云協(xié)同已聚集成基本態(tài)勢。
端側(cè)并不是獨自支撐智能化,而是進(jìn)行任務(wù)切割。
a端側(cè)會在芯片硬件上融合AI操作系統(tǒng)和AI大模型,但這個大模型不需要太大;
b端側(cè)AI負(fù)責(zé)主動服務(wù),整合手機各項核心功能和APP合作伙伴;
c端側(cè)AI強化隱私保護(hù),這些私人數(shù)據(jù)全部鎖在端側(cè)芯片運載的系統(tǒng)和AI大模型上,沒有用戶的許可絕不出端;
d非用戶隱私的部分,可以分割脫敏后交給云側(cè)AI大模型處理;
e通過隱私數(shù)據(jù)和非隱私數(shù)據(jù)的端側(cè)AI和云側(cè)AI的分工,既降低了手機的功耗,又降低了云側(cè)AI潛在的隱私問題。
榮耀提出的意圖交互絕非一家完成,而是聯(lián)合生態(tài)伙伴一起做;榮耀建立了榮耀開放實驗室,合作伙伴和客戶可以在開放實驗室與榮耀進(jìn)行互聯(lián)互通;全新AI生態(tài),是技術(shù)精英們的聯(lián)合(共同驅(qū)動)。
意圖UI是操作系統(tǒng)歷史性機遇,也是中國AI力量的破局點,凝聚AI力量,開啟操作系統(tǒng)新篇章。
NO.7
AI時代的手機操作系統(tǒng)會長什么樣?
意圖UI表現(xiàn)有多好,決定于AI能力。
而AI的能力,是寄生在操作系統(tǒng)上的。
談到AI能力,一定撇不開操作系統(tǒng)。
AI時代,新的操作系統(tǒng)正在也必然會誕生。
操作系統(tǒng),一直都是巨頭在壟斷,大部分企業(yè)并沒有機會,在一個賽道里面競爭,先發(fā)優(yōu)勢權(quán)重太大。
但AI時代的來臨,帶來操作系統(tǒng)的巨變,AI重塑操作系統(tǒng),從命令式UI到意圖UI,即使企業(yè)原先的操作系統(tǒng)并沒有盡善盡美,疊加上AI的buff,就好像長了翅膀,離開了原有賽道。
鄧斌總結(jié)了榮耀在操作系統(tǒng)方面的布局:
“MagicOS從7.0到8.0,最大的一個變化,一個是理解能力,第二個是學(xué)習(xí)能力,第三個是真正和應(yīng)用產(chǎn)生互動的平臺級能力。”
2024年1月10日,榮耀將會推出全新的MagicOS 8.0操作系統(tǒng)和70億參數(shù)手機端側(cè)魔法大模型MagicLLM,很有可能就是AI時代操作系統(tǒng)的樣板。
![]()
AI時代的操作系統(tǒng)將具備以下關(guān)鍵特征和變革:
1、智能感知:
具備更強大感知能力獲取環(huán)境信息,利用機器學(xué)習(xí)算法進(jìn)行分析和理解。
2、自適應(yīng)性:
自動學(xué)習(xí)和適應(yīng)用戶的習(xí)慣與偏好,動態(tài)調(diào)整系統(tǒng)設(shè)置、甚至預(yù)測用戶行為。
3、多模態(tài)識別:
用戶能夠通過語音、手勢或圖像與系統(tǒng)進(jìn)行更自然的交互。
4、智能決策和推薦:
基于大數(shù)據(jù)和機器學(xué)習(xí),AI操作系統(tǒng)能夠進(jìn)行智能決策。
5、安全性和隱私保護(hù):
注重數(shù)據(jù)安全和隱私保護(hù),確保用戶的信息得到妥善保護(hù)。
6、端側(cè)計算:
更加注重在本地設(shè)備上進(jìn)行端側(cè)計算,以提高響應(yīng)速度、降低延遲,并減少對云服務(wù)的依賴。
7、生態(tài)系統(tǒng)整合:
這些操作系統(tǒng)通常能夠與各種AI服務(wù)和設(shè)備進(jìn)行無縫集成,構(gòu)建更為完整和強大的人工智能生態(tài)系統(tǒng)。
MagicOS 8.0操作系統(tǒng)正在朝以上七個方向努力,正因為有了這些能力,才使得“意圖UI”在手機上有很好呈現(xiàn),展示了操作系統(tǒng)的AI能力。
手機操作系統(tǒng),AI革命前夜
2024年,榮耀想做的不僅僅是中國榮耀,而是世界榮耀。
這不僅是一場技術(shù)的征途,也是與更多工程師共進(jìn)退的堡壘。
手機前端的“意圖UI”讓人驚艷,后臺則是萬千工程師的技術(shù)匯聚。
今天的榮耀,正華麗變身為世界手機端側(cè)AI創(chuàng)新的前鋒。
從魔法大模型巧妙融入手機硬件,到系統(tǒng)級AI手機操作系統(tǒng)的崛起,
我們希望看到榮耀可以引領(lǐng)中國AI力量崛起,因為我們相信“AI的未來在端側(cè),而端側(cè)AI的未來在中國”。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.