4月12日,蔚來宣布NOMI GPT正式開啟推送。此次推送的更新是基于全新技術(shù)架構(gòu),為NOMI量身打造NOMI GPT端云多模態(tài)大模型。NOMI GPT包含自研多模態(tài)感知、自研認知中樞、情感引擎、多專家Agent,實現(xiàn)蔚來產(chǎn)品、服務(wù)、社區(qū)的全域貫通,提供更高效、愉悅的AI服務(wù)。
升級NOMI GPT功能后,用戶可以體驗到大模型百科、無限趣聊、魔法氛圍、趣玩表情、用車問答、AI場景生成在內(nèi)的多項全新交互體驗,享受智能AI賦能下的全新出行。此次NOMI GPT上線將同步陸續(xù)推送給搭載Banyan·榕智能系統(tǒng)的車型。自發(fā)布以來,NOMI 已經(jīng)歷超過130次版本迭代、超2000項功能的新增及更新。
NOMI GPT認知中樞、行業(yè)獨有的情感引擎和行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知是NOMI煥新升級后的的三大核心技術(shù)架構(gòu),配合數(shù)十億級的參數(shù)模型、毫秒級的響應(yīng)速度,賦予了NOMI在感知、認知、決策等方面強大的復(fù)雜邏輯推理能力,具備了能與用戶進行開放式問答的交互能力。
▍NOMI GPT的認知中樞
NOMI GPT認知中樞擁有極為高效的信息認知能力,能在海量信息源中精準判斷用戶意圖與需求,無縫調(diào)度大模型架構(gòu)內(nèi)組件,實現(xiàn)“領(lǐng)會用戶意圖有默契,執(zhí)行夠聰明,靈活不打擾”的優(yōu)質(zhì)用車體驗。
蔚來自研的端云一體認知中樞,集成了行業(yè)最全知識庫,包括中控分發(fā),多模拒識,跨域繼承&跳轉(zhuǎn), 多Agent決策幾個部分,讓NOMI有了對復(fù)雜任務(wù)的處理能力,能夠?qū)Ω兄降男畔⑦M行推理分析,從容調(diào)度執(zhí)行各種任務(wù),回答各種問題。通過認知中樞,NOMI會根據(jù)你所說的內(nèi)容,結(jié)合對話上下文、感知以及狀態(tài)信息,智能地判斷調(diào)用任務(wù)型交互、問答閑聊、用車助手等,同時也能支持語義創(chuàng)建完整的快捷場景。
▍行業(yè)獨有情感引擎
行業(yè)獨有的情感引擎是NOMI實現(xiàn)擬人交互的關(guān)鍵,通過與用戶長期的溝通與陪伴、記憶、學(xué)習(xí),實現(xiàn)有個性的成長,讓NOMI不只是一個冰冷的“助手”,更是懂你的情感伙伴。
NOMI 的記憶能力包括短期記憶和長期記憶,短期記憶可以用戶近期感興趣的話題、提到人和物,長期記憶能夠記住用戶及家人朋友,記住每一個人的喜好。
在情感引擎的幫助下,NOMI可以更快的學(xué)習(xí)成長,通過實時反饋、事后反思、人為訓(xùn)練等方式,不斷變得更加聰明,不斷掌握新技能和新知識。
情感引擎也讓每一個NOMI都能發(fā)展出和用戶性格相契合的“人設(shè)”,包括性格、三觀、夢想等,和NOMI的每一句對話、每一個表情,更自然、更有溫度,隨著陪伴時間的增長,NOMI也會潛移默化地和用戶的性格更加契合。
▍行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知
在行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知能力下,車機聯(lián)網(wǎng)不再是用戶使用NOMI的必須條件,NOMI也將具備“看得見,認得出”“聽得到,聽得懂”“知冷熱,有觸感”等能力,做到賬號隔離,敏感信息不出車,車載通信端到端加密,保障用戶隱私安全的同時也讓車載人工智能的感知能力得到了極大的擴展。
除了可以實現(xiàn)端側(cè)獨立運行之外,融合了圖像(視覺)、音頻(聽覺)、車身傳感器(觸覺)等多模感知的NOMI可以像人類一樣,獲得了更全面的感知座艙內(nèi)外的人與事物的能力,并將多維度感知獲得的數(shù)十億參數(shù),用自然語言進行描述。
基于多模態(tài)感知的能力,NOMI現(xiàn)在可以像朋友一樣,看見你的物品、著裝、狀態(tài),甚至艙外的車輛、樓宇、動物植物,并提供更懂你的服務(wù)、更有趣的溝通。
端側(cè)多模態(tài)感知內(nèi)部測試中,預(yù)計今年內(nèi)面向蔚來車型推送。
來源:第一電動網(wǎng)
作者:董海榮
本文地址:http://www.vlxuusu.cn/news/qiye/226637
文中圖片源自互聯(lián)網(wǎng),如有侵權(quán)請聯(lián)系admin#d1ev.com(#替換成@)刪除。