在近日于上海舉辦的2024年“絕影實(shí)力AI DAY”活動(dòng)中,商湯絕影CEO、商湯科技聯(lián)合創(chuàng)始人及首席科學(xué)家王曉剛發(fā)表了一項(xiàng)引人深思的聲明:“在AGI(通用人工智能)時(shí)代,智能座艙的進(jìn)化必須帶有‘叛逆’色彩。真正的智能汽車,唯有具備記憶能力,才能與用戶心靈相通。”
活動(dòng)現(xiàn)場(chǎng)充滿了濃厚的賽博科幻氛圍,商湯絕影全面展示了其“駕-艙-云”三位一體的AGI產(chǎn)品體系與戰(zhàn)略布局。王曉剛所描繪的未來汽車,不僅僅是交通工具,更是充滿人文關(guān)懷的伙伴,如同英國科幻劇《黑鏡》中的場(chǎng)景提前成真:當(dāng)你接上孩子上車,汽車會(huì)識(shí)別到孩子胸前的獎(jiǎng)牌,并熱情地祝賀她獲得表演獎(jiǎng);當(dāng)你試圖在駕駛中查看手機(jī),車機(jī)會(huì)溫柔地提醒你專注駕駛;發(fā)現(xiàn)后座的家人入睡,它無需指令便會(huì)自動(dòng)調(diào)節(jié)空調(diào)、音響及駕駛模式;若檢測(cè)到心率異常或體溫升高,車機(jī)會(huì)提醒檢查家人健康狀況,甚至為你導(dǎo)航至最合適的醫(yī)院并提前預(yù)約掛號(hào)。
這一愿景通過商湯絕影發(fā)布的智能座艙大模型創(chuàng)新產(chǎn)品“A New Member For U”(你的家庭新成員)得以體現(xiàn),旨在賦予汽車“有趣的靈魂”。王曉剛指出,當(dāng)前雖已有具備邏輯思考和通用任務(wù)處理能力的AI Agent上車,但它們大多仍處于“被動(dòng)智能”階段,即僅根據(jù)用戶指令行動(dòng)。商湯絕影旨在重新定義智能座艙,讓其成為察言觀色、時(shí)刻相伴且與用戶心靈相通的“家庭新成員”。
實(shí)現(xiàn)這一轉(zhuǎn)變的關(guān)鍵在于多模態(tài)大模型,它使“New Member新成員”能夠深度融合語音、文字、圖像及視頻等多種模態(tài)信息,提供自然流暢的人機(jī)交互體驗(yàn),主動(dòng)關(guān)懷用戶,精準(zhǔn)識(shí)別并滿足其需求,記錄用戶的喜好與習(xí)慣。商湯絕影還打造了中國首個(gè)“車載類人記憶框架”,賦予系統(tǒng)類人的記憶能力,包括臨時(shí)記憶和長期記憶,能夠自我迭代,通過持續(xù)推理的Always-on運(yùn)行框架,主動(dòng)為用戶提供貼心服務(wù)。
關(guān)于數(shù)據(jù)隱私,商湯絕影CTO肖楓表示,公司已為車端和云上數(shù)據(jù)提供了強(qiáng)大的加密技術(shù)方案。涉及用戶隱私的數(shù)據(jù)將保存在車端,而需要更多資源和算力的任務(wù)則在云端處理。對(duì)用戶而言,他們感受到的是強(qiáng)大的端云結(jié)合大模型服務(wù),無需區(qū)分?jǐn)?shù)據(jù)處理的位置。
在“城區(qū)無圖NOA”和“端到端智駕”等熱門領(lǐng)域,商湯絕影同樣展現(xiàn)了其實(shí)力。本次活動(dòng)上,商湯絕影展示了基于不同算力平臺(tái)的全場(chǎng)景高階智駕和端到端智駕產(chǎn)品體系,并宣布基于J6平臺(tái)的智駕方案預(yù)計(jì)將于2025年第二季度量產(chǎn)交付,而量產(chǎn)端到端智駕方案則預(yù)計(jì)于明年年底落地。商湯通過實(shí)車采集和仿真生成的“雙輪驅(qū)動(dòng)”數(shù)據(jù)閉環(huán),構(gòu)建了與世界模型深度融合的“車云一體”智駕新范式。
商湯絕影發(fā)布的世界模型“開悟”成為活動(dòng)亮點(diǎn)之一。該模型能生成高質(zhì)量、逼真的視頻數(shù)據(jù),用于訓(xùn)練智駕系統(tǒng)。基于多模態(tài)大模型打造的“開悟”,能夠理解物理和交通規(guī)則,支持多樣化自動(dòng)駕駛場(chǎng)景及Corner case的可控生成。目前,商湯絕影已能基于1024類場(chǎng)景泛化出更多平行世界,打造千萬級(jí)生成場(chǎng)景庫,預(yù)計(jì)2025年對(duì)行業(yè)開放。
在各大企業(yè)競相投入“百模大戰(zhàn)”、進(jìn)行大模型軍備競賽的背景下,手握數(shù)據(jù)和算力優(yōu)勢(shì)的商湯顯得尤為冷靜。作為計(jì)算機(jī)視覺領(lǐng)域的佼佼者,商湯在視覺數(shù)據(jù)積累上擁有顯著優(yōu)勢(shì)。商湯絕影與車企建立了數(shù)據(jù)閉環(huán)合作機(jī)制,利用量產(chǎn)車輛的真實(shí)數(shù)據(jù)驅(qū)動(dòng)基礎(chǔ)模型的訓(xùn)練和迭代,不斷提升模型性能。這種深度合作不僅提升了模型的精準(zhǔn)度和可靠性,也促進(jìn)了雙方技術(shù)的共同進(jìn)步。
商湯絕影的智能汽車業(yè)務(wù)已覆蓋超過30家車企,合作車型超過100款,包括廣汽、合眾、一汽、本田、比亞迪、長城、紅旗、極氪、奇瑞、蔚來等知名品牌。預(yù)計(jì)到2024年底,量產(chǎn)交付累計(jì)將超過350萬輛。這些智能汽車搭載了商湯絕影的智能駕駛輔助系統(tǒng)和智能座艙技術(shù),為用戶提供全方位的智能出行體驗(yàn)。
在AI技術(shù)發(fā)展和大模型風(fēng)潮的推動(dòng)下,眾多企業(yè)迎來了新的發(fā)展機(jī)遇。商湯絕影正致力于把握好自己的生態(tài)位,與車企、智艙和智駕供應(yīng)商、手機(jī)廠商及互聯(lián)網(wǎng)巨頭等合作伙伴共同構(gòu)建新體驗(yàn)。