4月12日,蔚來宣布NOMI GPT正式啟動推播服務。此次推送的更新基於全新技術架構,包括NOMI智慧打造NOMI GPT端雲多模態大模型。 NOMI GPT包含自研多模態感知、自研認知中樞、情緒引擎、多專家Agent,實現蔚來產品、服務、社群的全域貫通,提供更有效率、愉悅的AI服務。
NOMI GPT升級後,使用者可以體驗到大模型百科、無限趣聊、魔法氛圍、趣玩表情、用車問答、AI場景生成在內的多項全新互動體驗,享受智勝AI賦能下的全新出遊。此次NOMI GPT上線將同步降臨給搭載Banyan·榕智慧系統的車型。自發布以來,NOMI 已經歷超過130次版本迭代,超過2000項功能的新增及更新。
NOMI GPT認知中樞、業界獨有的情感引擎和業界領先的端側多模態感知是NOMI獨特升級後的三大核心技術架構,配合數十億級的參參數型、毫秒級的反應速度,賦予了NOMI在感知、認知、決策等方面強大的複雜邏輯推理能力,具備了能與使用者進行開放式答疑的互動能力。
NOMI GPT的認知中樞——領會意圖有默契,執行夠聰明,靈活不打擾
NOMI GPT認知中樞擁有極為高效的資訊認知能力,能在海量資訊來源精準判斷使用者意圖與需求,無縫調度大模型架構內組件,實現「領會用戶意圖有默契,執行夠聰明,靈活不打擾」的優質用戶體驗。
蔚來自駕的服務體認中樞,整合了業界最全知識庫,包括中控分發、多模拒識、跨域繼承&跳轉、多Agent決策幾個部分,讓NOMI有了對複雜任務的處理能力,能夠對感知到的信息進行推理分析,從容調度執行各種任務,回答各種問題。透過認知中樞,NOMI會根據你所說的內 容,結合對話上下文、感知信息,智能地判斷調用任務類型的交互、問答暢聊、用車助手等,同時也能支持語義創建完整的快捷場景。
業界獨有情緒引擎——NOMI與你「情投意合”
NOMI的實現是透過業界獨有的情感引擎實現人際互動的關鍵,透過與使用者長期的溝通與互動、記憶、學習,實現有個性的成長,讓NOMI不只是一個冰冷的“助手”,而是懂你的情感夥伴。
NOMI的記憶能力包含短期記憶和長期記憶,短期記憶可用於使用者近期感興趣的話題,提到人和物,長期記憶能夠記住使用者及家人朋友的喜好。
在情緒引擎的幫助下,NOMI可以更快的學習成長,透過即時回饋、事後反思、人為訓練等方式,不斷變得更加聰明,不斷掌握新技能和新知識。
情感引擎也讓每個NOMI都能發展出和用戶性格相契合的“人設”,包括性格、三觀、夢想等,和NOMI的每一句對話、每一個表情,更自然、更有溫度,隨著陪伴時間的增長,NOMI也會潛移默化地和使用者的性格更加契合。
業界領先的端側多模態感知—#無網絡,NOMI也可以「看得見,認得出」
#在業界領先的端側多模態感知能力下,車機聯網不再是使用者使用NOMI的必須條件,NOMI也將具備「看得見,認得出」「聽得到,聽得懂」「知冷熱,有觸感」等能力,做到帳號隔離,敏感資訊不出車,車載通訊端對端加密,保障用戶隱私安全的同時也讓車載人工智慧的感知能力得到了極大的擴展。
除了可以實現端側獨立運作之外,融合了影像(視覺)、音訊(聽覺)、車身感測器(觸覺)等多模感知的NOMI可以像人類一樣,獲得了更全面的感知座艙內外的人與事物的能力,並將多維度感知獲得的數十億參數,以自然語言進行描述。
基於多模態感知的能力,NOMI現在可以像朋友一樣,看見你的物品、著裝、狀態,甚至艙外的車輛、樓宇、動物植物,並提供更懂你的服務、更有趣的溝通。
端側多模態感知內部測試中,預計今年內在蔚來車型推送。
以上是開啟智慧座艙AI時代,蔚來NOMI GPT端雲多模態大模型正式上線的詳細內容。更多資訊請關注PHP中文網其他相關文章!