近日,商湯絕影與國內知名車企合作伙伴聯手打造的行業首個原生流式多模態座艙產品已經量產上車,並向用戶進行OTA推送。
在兩個月前的2024絕影實力AI DAY上,商湯絕影首發了AI汽車創新產品「A New Member For U」(你的家庭新成員),它能夠察言觀色,無時不在,心有靈犀,將會讓智能汽車擁有「有趣的靈魂」。原生流式多模態大模型是打造「家庭新成員」的關鍵之一,也是它能察言觀色的核心所在。
如今,隨着商湯絕影的多模態艙外識別功能量產上車,它已經開始認識並且理解世界,能夠實現前車識別、交通標誌識別和沿途風光識別等功能,識別準確率、識別範圍等性能全面領先行業,還能和車內駕乘人員進行深入交流與互動,這位未來的「家庭新成員」邁出了成長的第一步。
從交通標誌識別來看,商湯絕影的艙外識別功能不僅能識別前車,還能夠識別交通標誌,這也是行業首發的產品能力,其他上車的多模態大模型都沒有做到交通標誌的準確識別。面對路面上越來越多的交通標誌,即使是老司機有時候也會不知所措,反應不及。有了商湯絕影的交通標誌識別功能,就相當於有了靠譜的駕校教練坐鎮車內,交通標誌的識別和解讀信息不僅準確完善,車機系統還可以根據用戶詢問,給出駕駛建議,讓司機駕駛起來更加安穩放心。

商湯絕影行業領先的艙外識別功能離不開原生流式多模態大模型能力。商湯絕影CEO、商湯科技聯合創始人、首席科學家王曉剛就表示,基於商湯「日日新5o」打造的原生流式多模態大模型讓世間萬物都可被感知、被理解、被交互。原生流式多模態大模型是讓文字、語音、視頻等模態一同輸入,模型統一處理後輸出相應模態的信息。
原生流式多模態是一種非常自然且新穎的交互方式,將會成為一個全新的直接接觸用戶的超級入口,而智能汽車是這個超級入口的最佳落地場景。依靠智能汽車內外各種常開的攝像頭,用戶可以實時跟汽車通過多模態的方式進行交互。同時,智能汽車的保有量不斷增加,能夠產生豐富的終端用戶反饋和數據信息,讓模型不斷迭代成長。通過應用場景和用戶需求驅動,以原生流式多模態大模型為基礎的座艙產品將能夠讓智能汽車高效準確地全景感知和深度理解用戶需求和周圍環境,並以此為核心打通不同應用,全局調用車上開放的軟硬件服務,將離散的單點功能聚合在一起,從而為用戶提供更多深度個性化的主動關懷和服務,讓智能汽車成為你的新助手、新夥伴乃至新的家庭成員。
商湯絕影的原生流式多模態座艙產品量產上車,艙外識別能力覆蓋了座艙、汽車周邊的環境,這意味着「家庭新成員」開始逐步認識世界、理解世界,邁出了成長的第一步。作為專注於汽車行業的AI公司,商湯絕影在智能座艙領域具備豐富的量產經驗。第三方調研數據顯示,商湯絕影在座艙視覺AI軟件市場的份額連續五年蟬聯第一,座艙AI大模型產品已上車智己全系車型、LEVC L380等車型。截至2024年底,商湯絕影已與超過30家國內外車企達成合作,覆蓋100餘款車型,量產交付累計突破350萬輛。
(文章來源:廣州日報)