4月12日,蔚來(lái)自研的AI大模型NOMI GPT正式上線,將會(huì)在搭載Banyan·榕 蔚來(lái)智能系統(tǒng)的車型開啟推送。升級(jí)NOMI GPT功能后,除了有全新的交互界面之外,用戶可以體驗(yàn)包括大模型百科、無(wú)限趣聊、魔法氛圍、趣玩表情、用車問(wèn)答、AI場(chǎng)景生成在內(nèi)的六大全新交互體驗(yàn)。

全棧自研 打造NOMI GPT三大技術(shù)內(nèi)核
GPT上車和傳統(tǒng)PC、手機(jī)移動(dòng)端的GPT最大的區(qū)別是車載GPT存在著多模態(tài)數(shù)據(jù)的需求,這就要求NOMI GPT可以實(shí)現(xiàn)視覺(jué)(圖像)、聽覺(jué)(聲音)、觸覺(jué)(車身傳感器信息)等維度的感知能力,才能讓NOMI實(shí)現(xiàn)包括語(yǔ)音、視覺(jué)和文本等多種形式的交互能力。
要做到擬人化的人機(jī)交互,除了要會(huì)感知以外,還要能做到理解和表達(dá),全棧自研能力給NOMI GPT賦予了多模態(tài)感知、認(rèn)知中樞、情感引擎三大技術(shù)內(nèi)核,從而在人機(jī)交互、情緒識(shí)別、實(shí)現(xiàn)了行業(yè)領(lǐng)先。
因此,除了感知能力之外,NOMI GPT也擁有極強(qiáng)的理解和表達(dá)能力。通過(guò)認(rèn)知中樞,NOMI會(huì)根據(jù)你所說(shuō)的內(nèi)容,結(jié)合對(duì)話中的上下文語(yǔ)境、感知數(shù)據(jù)和車輛的狀態(tài)信息,智能地判斷該調(diào)用座艙的哪些功能、提供哪些信息。
擁有記憶能力的情感引擎可以讓NOMI準(zhǔn)確識(shí)別出每一個(gè)上車的家庭成員,記住每一個(gè)人的喜好。NOMI未來(lái)可以更快的學(xué)習(xí)成長(zhǎng),通過(guò)實(shí)時(shí)反饋、事后反思、人為訓(xùn)練等方式,不斷變得更加聰明,不斷掌握新技能和新知識(shí)。端側(cè)多模態(tài)感知內(nèi)部測(cè)試中,預(yù)計(jì)今年內(nèi)上車。
六大新功能 開啟車載智能AI新紀(jì)元
大模型百科支持包括社科人文、歷史文學(xué)、藝術(shù)自然、影視音樂(lè)等不同領(lǐng)域的各種知識(shí)問(wèn)答,并由此衍生出,旅行攻略、信息檢索、內(nèi)容創(chuàng)作等拓展性能力。

無(wú)限趣聊功能讓NOMI的共情與對(duì)話能力有了顯著提升。情感聊天、音樂(lè)影視、語(yǔ)言游戲等連續(xù)對(duì)話及多交互場(chǎng)景的,可以提供更懂你的專屬陪伴。升級(jí)NOMI GPT之后,可以嘗試下問(wèn)問(wèn)NOMI“我想升職加薪該怎么做”;“出個(gè)燈謎讓孩子猜一下”,你一定會(huì)有驚喜。
車機(jī)擬人化方面,蔚來(lái)可以說(shuō)是擁有著先天優(yōu)勢(shì),中控臺(tái)的NOMI車機(jī)本身就具有擬人化顯示的功能,融入了AI智能之后,NOMI的趣玩表情功能可以根據(jù)語(yǔ)音指令解鎖出更多的表情,讓NOMI的擬人化更上一層樓。

氛圍魔法功能可以設(shè)置出符合用戶心情狀態(tài)或心理預(yù)期的氛圍效果,通過(guò)調(diào)用座艙內(nèi)的氛圍燈,基于大模型強(qiáng)大的推理能力給用戶調(diào)取最契合的氛圍搭配,目前NOMI已經(jīng)可以實(shí)現(xiàn)超過(guò)1677萬(wàn)種的氛圍燈搭配方案。
用車問(wèn)答功能相當(dāng)于給NOMI內(nèi)置了一個(gè)用車手冊(cè),這一功能支持幾乎所有車輛信息、用車知識(shí)的查詢,比如“儀表盤上的綠色扇子是什么意思?”“兒童座椅怎么安裝?”這些語(yǔ)音指令都可以快速調(diào)取對(duì)應(yīng)信息,便于用戶更深入的了解和使用車輛。

AI場(chǎng)景生可以記錄用戶用語(yǔ)義創(chuàng)建場(chǎng)景需求。并能夠根據(jù)對(duì)應(yīng)的駕駛?cè)恕r(shí)間、環(huán)境激活這些定制化的場(chǎng)景。 比如說(shuō) “給我設(shè)置一個(gè)工作模式:工作日早上我上車就自動(dòng)導(dǎo)航去公司,打開NIO Radio,下午如果我上車的時(shí)間在晚上7點(diǎn)之后,就開座椅按摩、氛圍燈要放松一點(diǎn)的、然后把自定義歌單打開,5分鐘以后再開回家的導(dǎo)航。”據(jù)悉這一功能后續(xù)將會(huì)跟隨Banyan 245 系統(tǒng)更新的NOMI應(yīng)用同步上線。
官方表示此次亮相的NOMI GPT還只是蔚來(lái)AI大模型的初代版本,相信憑借著蔚來(lái)的研發(fā)能力,NOMI GPT未來(lái)肯定還會(huì)持續(xù)的進(jìn)化,擁有更強(qiáng)的的理解和表達(dá)能力,在思維方式上也會(huì)越來(lái)越接近人腦,最終徹底重塑智能汽車和人之間的交互方式