商湯絕影:用大模型,重做一遍智能座艙
2023-09-08 18:41:45 來源:程序員客棧
(資料圖片僅供參考)
作者丨顧見 監(jiān)制丨闌夕 1979年,阿斯頓馬丁遵循其未來主義楔形汽車?yán)砟?,首次嘗試在車上搭載LED顯示屏,這在某種意義成為智能座艙的先驅(qū)產(chǎn)品。之后的幾十年,有關(guān)智能座艙的暢想層出不窮。在電影《金龜車賀比》、《霹靂游俠》中,智能座艙是具有獨(dú)立決策能力,可以用多種黑科技為車主保駕護(hù)航的夢幻搭檔。 而現(xiàn)實中,智能座艙帶給用戶的體驗感與科幻電影相差甚遠(yuǎn)。即使在前裝搭載率不斷提升的當(dāng)下,仍然有為數(shù)不少的聲音認(rèn)為智能座艙是偽命題,其內(nèi)涵不過是普通汽車加幾塊大屏幕,亦或是“行走的大號手機(jī)”。 造成這個尷尬現(xiàn)狀的根本原因在于,以往的智能座艙產(chǎn)品是傳統(tǒng)制造業(yè)發(fā)展框架下的產(chǎn)物,是車載音響、液晶屏、通信模塊,以及其它車載軟硬件產(chǎn)品各自迭代形成的結(jié)合體。 這樣的智能座艙產(chǎn)品缺乏整體性——雖然可以通過“堆料”實現(xiàn)每個局部的最優(yōu)解,卻難以打通功能權(quán)限實現(xiàn)整車功能調(diào)度、互聯(lián)網(wǎng)應(yīng)用、人車交互、智能駕駛的整齊劃一。相對應(yīng)的,也就無法涌現(xiàn)出真正的產(chǎn)品智慧。 “大模型時代”的到來,讓智能座艙產(chǎn)品迎來了一次重塑。 在近期的德國慕尼黑車展上,就涌現(xiàn)出這樣野心勃勃的“中國力量”:“智能汽車時代的通用人工智能核心供應(yīng)商”商湯絕影,首次全方位展示了智能座艙大模型產(chǎn)品體系——絕影智能車艙,用AGI時代的全新產(chǎn)品范式劍指出行場景痛點(diǎn),為智能汽車市場的大模型產(chǎn)品革命按下快進(jìn)鍵。 01、智能座艙進(jìn)化論:從硬件堆料,到智能座艙大模型產(chǎn)品體系 不可否認(rèn),硬件堆料式的智能座艙產(chǎn)品還是帶給行業(yè)很多積極變量。 在1.0時代,座艙逐漸擁有顯示和控制功能,為后續(xù)智能化發(fā)展打下了基礎(chǔ)。2.0時代,市場參與者在智能手機(jī)應(yīng)用生態(tài)里尋找靈感,把車聯(lián)網(wǎng)、在線娛樂、人車語音交互等相關(guān)產(chǎn)品帶入其中。3.0時代,座艙硬件能力持續(xù)升級,在OMS攝像頭等硬件加持下,智能車艙已經(jīng)具備一定的感知能力,從而實現(xiàn)了沉浸式游戲等互動玩法。 商湯絕影率先步入智能座艙4.0時代,通過多模態(tài)大模型和座艙大腦的加持,讓智能座艙不斷進(jìn)化的同時,擁有更高、更全面的智能化交互能力與權(quán)限,圍繞出行場景大幅提升產(chǎn)品價值,開創(chuàng)出了更多、更實用的應(yīng)用場景,讓駕駛員安全、高效行車,乘客得到有趣、有料的娛樂休閑體驗。 眾所周知,大模型價值創(chuàng)造能力的大小與落地場景息息相關(guān)。場景越垂直、市場空間越大的領(lǐng)域,越有機(jī)會通過大模型脫穎而出,智能座艙恰恰符合這一規(guī)律。而用戶所期待的,像科幻電影里那樣的智能座艙產(chǎn)品,也需要通用型人工智能來發(fā)揮主導(dǎo)作用,可謂是產(chǎn)業(yè)趨勢與用戶訴求一拍即合。 在此背景下,商湯絕影的智能座艙大模型系列全產(chǎn)品應(yīng)運(yùn)而生。 早在2017年,商湯就與本田建立長期戰(zhàn)略合作,成為亞洲首個與全球前五大車企品牌合作開發(fā)自動駕駛技術(shù)的AI企業(yè)。2021年商湯科技推出“SenseAuto絕影”智能汽車平臺,并于后續(xù)成立了絕影智能汽車事業(yè)群,進(jìn)一步明確了智能座艙、智能駕駛、車路協(xié)同三大業(yè)務(wù)板塊的全棧體系。 從產(chǎn)品的設(shè)計思路上看,絕影智能車艙沒有選擇拼樂高式的“硬件集合體”路線,而是出于整體性考量,打造了以“座艙大腦”為核心的全新產(chǎn)品架構(gòu),將車端的攝像頭、各種感知硬件和長短記憶模塊和云端的AIDC基礎(chǔ)設(shè)施、日日新大模型串聯(lián)在一起,再以擁有多段對話能力且富有親和力的數(shù)字人助手作為人車交互介質(zhì),為車主提供各種主動、被動服務(wù)。 這就有效避免了傳統(tǒng)智能座艙硬件各自為戰(zhàn)、交互體驗呆板的痛點(diǎn),讓整個車艙都能接收、執(zhí)行“座艙大腦”的指令,全方位的服務(wù)車主。 從產(chǎn)品的成長力角度看,智能車艙是整個絕影智能汽車事業(yè)群駕、艙、云三位一體產(chǎn)品體系的重要組成部分,擁有極高的戰(zhàn)略意義。對內(nèi),它既可以接受AI云的大模型賦能,又能和絕影的自動駕駛能力聯(lián)動實現(xiàn)“駕艙一體”,發(fā)揮連接器的效力。對外,它將是商湯絕影與整車廠結(jié)為利益共同體的“科技橄欖枝”,以及商湯AI能力在C端的一次重要閱兵。 這意味著,絕影智能車艙必須快速實現(xiàn)迭代、進(jìn)化。而商湯科技的“大模型+大裝置”,就是其源源不斷的“成長力”。 大模型方面,今年4月10日商湯科技推出的“日日新SenseNova”大模型體系,集自然語言處理、內(nèi)容生成、自動化數(shù)據(jù)標(biāo)注、自定義模型訓(xùn)練等多種大模型及能力,確保了絕影智能車艙在模型能力和問題處理方面處于行業(yè)領(lǐng)先地位。 商湯的大裝置SenseCore,則打通了大模型開發(fā)、生產(chǎn)、應(yīng)用場景。目前SenseCore實現(xiàn)了3萬塊GPU部署,最大可輸出6000P算力,最高可支持萬億參數(shù)超大模型訓(xùn)練。 隨著絕影自研數(shù)據(jù)閉環(huán)平臺將車端高質(zhì)量數(shù)據(jù)導(dǎo)入,疊加大模型自動數(shù)據(jù)標(biāo)注、產(chǎn)品檢測能力,能夠幾百倍的提升模型迭代的效率并降低成本,使得絕影艙內(nèi)算法能夠快速迭代,形成獨(dú)一檔的市場競爭力。 在高工智能汽車研究院公布的“中國市場乘用車前裝座艙AI軟件供應(yīng)商標(biāo)配搭載量”相關(guān)排行榜單中,商湯絕影以9.47萬輛搭載上險量、15.79%的市場份額高居第一。 不難看出,絕影智能車艙既有AI頂層設(shè)計理念,又找到了通過大模型、大裝置自我強(qiáng)化的路徑,堪稱是贏在起跑線上的智能座艙“新物種”。 02、向“第三生活空間”,更進(jìn)一步 《2023年度中國主要城市通勤監(jiān)測報告》顯示,2022年,單程5公里以內(nèi)的“幸福通勤”人口比重持續(xù)下降,達(dá)到50%。與此同時,超過30個城市的單程通勤時間超過60分鐘的“極端通勤”人口比重增加。 通勤時長的大幅增長,是“超級城市化”進(jìn)程中不可避免的副產(chǎn)物,但也間接成為智能座艙的發(fā)展契機(jī)——當(dāng)智能座艙進(jìn)化到一定程度時,就可以讓那些被浪費(fèi)的通勤時間重新得到利用。 率先實現(xiàn)“大模型上車”的商湯絕影自然明白這個道理,也看到了自己作為“AI跨界者”的最大優(yōu)勢——那就是建立一個以AI貫穿全場景的智能座艙應(yīng)用生態(tài)。 在車艙大腦的賦能下,絕影智能車艙已經(jīng)圍繞安全、娛樂、教育、效率四大場景,打造出10款以上的行業(yè)首發(fā)應(yīng)用,讓車艙場景變?yōu)榧踩浴⑿旭傂?、娛樂性、教育服?wù)為一體的“第三生活空間”。 在安全性方面,絕影智能車艙的車艙視覺算法已經(jīng)實現(xiàn)多項領(lǐng)先,可以為駕駛員解決一系列安全痛點(diǎn)。 針對光斑、小眼睛、逆光、墨鏡等場景,在確保眼部成像清晰的情況下,算法可以保障Recall(召回率)在80%以上,針對ENCAP主要測試的normal case,甚至可以做到100% Recall。處理車內(nèi)各種遮擋、眼睛反光、頭姿視線不一致、不同坐姿等導(dǎo)致的誤報時,也處于行業(yè)領(lǐng)先地位。 車內(nèi)教育、娛樂方面,絕影智能車艙不是簡單的將互聯(lián)網(wǎng)應(yīng)用移植過來,而是結(jié)合車內(nèi)娛樂的場景特性打造出更有針對性的服務(wù)。 以服務(wù)于不同年齡段孩子的“兒童模式”為例,介紹這項功能前不妨想象一個畫面:親子出行時孩子總是嘰嘰喳喳說個不停,導(dǎo)致駕車的父母不得不分心回應(yīng),最終釀成事故。類似的場景在現(xiàn)實中不勝枚舉,甚至還被很多災(zāi)難、懸疑電影借鑒。 絕影智能車艙的“兒童模式”,可以通過高頻互動的方式為孩子提供故事伴讀、共讀古詩詞、共創(chuàng)故事等玩法。這不是機(jī)械式的“播放音視頻”,而是會不斷拋出互動問題推動互動的深入,讓“教育、娛樂二合一”,為孩子們旺盛的精力找到歸屬,從而解放駕駛員的注意力,消除一項安全隱患。 效率提升方面,絕影智能車艙把豐富的智能化功能融會貫通,會以開放式對話的方式在合適時機(jī)向車主賦能。 比如遇到車輛問題時,車主無需拿出生澀難懂的說明書,也無需致電專業(yè)人員,只要用“大白話”與系統(tǒng)進(jìn)行語音交互,即可激活“AI說明書”功能,輕松找到解決方案。再比如“旅游攻略”功能,會在人車交互的開放式對話中適時開啟,結(jié)合地圖App、用戶自駕周期、住宿需求、交通情況推薦合適的目的地,為出行平添幾分浪漫色彩和神秘感。 史蒂夫·喬布斯認(rèn)為,顧客不知道自己想要什么,因此企業(yè)無需去問消費(fèi)者想要什么,只需要去創(chuàng)造出消費(fèi)者需要但表達(dá)不出來的需求。而絕影智能車艙的場景創(chuàng)新,恰恰就是把“消費(fèi)者需要但表達(dá)不出來的需求”變成了現(xiàn)實。 03、以技術(shù)之矛劍指全球,智能車遇見“絕影速度” 對于智能汽車這樣的技術(shù)密集型產(chǎn)業(yè)來說,車企要想形成競爭優(yōu)勢就必須提升技術(shù)深度。于是,越來越多的頭部車企開始注意到商湯絕影的價值。 作為智能汽車時代稀缺的通用人工智能核心供應(yīng)商,商湯絕影的產(chǎn)品體系能夠緊隨AI發(fā)展趨勢,快人一步占據(jù)AI“制高點(diǎn)”,把前沿技術(shù)轉(zhuǎn)化為產(chǎn)品力。 就像商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛所說,商湯絕影長期沉淀的大模型技術(shù)能力和量產(chǎn)經(jīng)驗將讓智能座艙變成暖心懂你的好管家,讓智能駕駛變成安全可靠的老司機(jī),與全球客戶共同開啟人機(jī)共駕新體驗。 比如在視覺算法方面,商湯絕影在歐盟認(rèn)證駕駛員嗜睡和注意力警告系統(tǒng)(DDAW)測試中交出了recall 70%的成績單,遠(yuǎn)高于法規(guī)要求40%,且誤報率僅為4%。做到既能無風(fēng)險的通過法規(guī),也能保障用戶體驗,減少誤報。 智能駕駛專利方面,商湯科技在知識產(chǎn)權(quán)媒體IPRDaily發(fā)布的2020年-2021年10月中旬全球智能駕駛專利排行榜(TOP 100)中位列前十,也是國內(nèi)第一批率先激活L2++級別自動駕駛量產(chǎn)的服務(wù)商。 不久前在計算機(jī)視覺界“奧斯卡”之稱的CVPR 2023,商湯及聯(lián)合實驗室還首個提出感知決策一體化的自動駕駛通用大模型UniAD,在接收率僅為0.02%的評選中斬獲最佳論文獎,成為CVPR歷史上第一篇以自動駕駛為主題的最佳論文。 該論文首次將檢測、跟蹤、建圖、預(yù)測及規(guī)劃整合到一個基于 Transformer 的端到端網(wǎng)絡(luò)框架下,實現(xiàn)多目標(biāo)追蹤準(zhǔn)確率提升20%、車道線預(yù)測準(zhǔn)確率提升30%、目標(biāo)軌跡預(yù)測誤差下降38%、規(guī)劃誤差下降28%。新算法的量產(chǎn)預(yù)計將于2023年四季度準(zhǔn)備就緒,進(jìn)一步提高絕影自動駕駛產(chǎn)品的行業(yè)競爭力。 不斷打磨自有產(chǎn)品、技術(shù)之余,商湯絕影也在積極與合作伙伴分享技術(shù)生產(chǎn)力。比如面向客戶發(fā)布的SenseAuto Empower商湯絕影賦能引擎,把商湯絕影在數(shù)據(jù)管理、數(shù)據(jù)標(biāo)注、模型訓(xùn)練評測及模型部署上的一站式解決方案開放給車企,以極低的數(shù)據(jù)標(biāo)注、管理和訓(xùn)練成本加速算法迭代。 正是這種為車企全面賦能、提高產(chǎn)品競爭力的全棧體系,讓絕影智能車艙能夠享譽(yù)全球。數(shù)據(jù)顯示,今年上半年商湯絕影量產(chǎn)業(yè)務(wù)實現(xiàn)5.7倍同比增長,量產(chǎn)交付數(shù)量達(dá)到39萬臺車,新增定點(diǎn)數(shù)量達(dá)500多萬臺,累計定點(diǎn)車型160多款,有近20款海外車型。 比如在與蔚來汽車的合作中,絕影智能車艙為其5款歐洲銷售車型搭載了多項AI技術(shù),帶去人性化、智能化、場景化的智能車艙體驗,大大提升了這些車型的國際市場競爭力。為高合HiPhi Z豪華純電超跑GT搭載DMS駕駛員感知系統(tǒng)與OMS乘員感知系統(tǒng),不僅可及時預(yù)警駕駛員疲勞分心狀態(tài),還可智能感知乘員手勢進(jìn)行美顏拍照,一路守護(hù)駕乘安全的同時豐富車載娛樂體驗。 2023年被稱為AI大模型爆發(fā)元年,也是AI公司為千行百業(yè)創(chuàng)造價值產(chǎn)生質(zhì)變的一年。有理由相信,絕影智能車艙將以技術(shù)為矛,用“絕影速度”讓中國造車勢力在國際舞臺大放異彩。關(guān)鍵詞:
相關(guān)閱讀
-
商湯絕影:用大模型,重做一遍智能座艙
作者丨顧見監(jiān)制丨闌夕1979年,阿斯頓馬丁遵循其未來主義楔形汽車?yán)砟睿?/a> -
我和拼多多上的外貿(mào)人,聊了聊中國制造...
文|闌夕中國經(jīng)濟(jì)的騰飛,離不開全球化,而實踐全球化這個抽象概念的, -
【本地】燈塔市成大現(xiàn)代科技有限公司:...
日前,記者在燈塔市成大現(xiàn)代科技有限公司葡萄大棚內(nèi)看到,一串串玫瑰紅 -
Python網(wǎng)絡(luò)爬蟲中這七個li標(biāo)簽下面的屬...
點(diǎn)擊上方“Python爬蟲與數(shù)據(jù)挖掘”,進(jìn)行關(guān)注回復(fù)“書籍”即可獲贈P... -
盤點(diǎn)一個Pandas處理Excel數(shù)據(jù)的實戰(zhàn)案例
點(diǎn)擊上方“Python爬蟲與數(shù)據(jù)挖掘”,進(jìn)行關(guān)注回復(fù)“書籍”即可獲贈P... -
python中如何使用正則表達(dá)匹配\本身?(...
點(diǎn)擊上方“Python爬蟲與數(shù)據(jù)挖掘”,進(jìn)行關(guān)注回復(fù)“書籍”即可獲贈P...