商湯絕影:用大模型,重做一遍智能座艙
2023-09-08 18:41:45 來源:程序員客棧
(資料圖片僅供參考)
作者丨顧見 監(jiān)制丨闌夕 1979年,阿斯頓馬丁遵循其未來主義楔形汽車理念,首次嘗試在車上搭載LED顯示屏,這在某種意義成為智能座艙的先驅產品。之后的幾十年,有關智能座艙的暢想層出不窮。在電影《金龜車賀比》、《霹靂游俠》中,智能座艙是具有獨立決策能力,可以用多種黑科技為車主保駕護航的夢幻搭檔。 而現(xiàn)實中,智能座艙帶給用戶的體驗感與科幻電影相差甚遠。即使在前裝搭載率不斷提升的當下,仍然有為數(shù)不少的聲音認為智能座艙是偽命題,其內涵不過是普通汽車加幾塊大屏幕,亦或是“行走的大號手機”。 造成這個尷尬現(xiàn)狀的根本原因在于,以往的智能座艙產品是傳統(tǒng)制造業(yè)發(fā)展框架下的產物,是車載音響、液晶屏、通信模塊,以及其它車載軟硬件產品各自迭代形成的結合體。 這樣的智能座艙產品缺乏整體性——雖然可以通過“堆料”實現(xiàn)每個局部的最優(yōu)解,卻難以打通功能權限實現(xiàn)整車功能調度、互聯(lián)網應用、人車交互、智能駕駛的整齊劃一。相對應的,也就無法涌現(xiàn)出真正的產品智慧。 “大模型時代”的到來,讓智能座艙產品迎來了一次重塑。 在近期的德國慕尼黑車展上,就涌現(xiàn)出這樣野心勃勃的“中國力量”:“智能汽車時代的通用人工智能核心供應商”商湯絕影,首次全方位展示了智能座艙大模型產品體系——絕影智能車艙,用AGI時代的全新產品范式劍指出行場景痛點,為智能汽車市場的大模型產品革命按下快進鍵。 01、智能座艙進化論:從硬件堆料,到智能座艙大模型產品體系 不可否認,硬件堆料式的智能座艙產品還是帶給行業(yè)很多積極變量。 在1.0時代,座艙逐漸擁有顯示和控制功能,為后續(xù)智能化發(fā)展打下了基礎。2.0時代,市場參與者在智能手機應用生態(tài)里尋找靈感,把車聯(lián)網、在線娛樂、人車語音交互等相關產品帶入其中。3.0時代,座艙硬件能力持續(xù)升級,在OMS攝像頭等硬件加持下,智能車艙已經具備一定的感知能力,從而實現(xiàn)了沉浸式游戲等互動玩法。 商湯絕影率先步入智能座艙4.0時代,通過多模態(tài)大模型和座艙大腦的加持,讓智能座艙不斷進化的同時,擁有更高、更全面的智能化交互能力與權限,圍繞出行場景大幅提升產品價值,開創(chuàng)出了更多、更實用的應用場景,讓駕駛員安全、高效行車,乘客得到有趣、有料的娛樂休閑體驗。 眾所周知,大模型價值創(chuàng)造能力的大小與落地場景息息相關。場景越垂直、市場空間越大的領域,越有機會通過大模型脫穎而出,智能座艙恰恰符合這一規(guī)律。而用戶所期待的,像科幻電影里那樣的智能座艙產品,也需要通用型人工智能來發(fā)揮主導作用,可謂是產業(yè)趨勢與用戶訴求一拍即合。 在此背景下,商湯絕影的智能座艙大模型系列全產品應運而生。 早在2017年,商湯就與本田建立長期戰(zhàn)略合作,成為亞洲首個與全球前五大車企品牌合作開發(fā)自動駕駛技術的AI企業(yè)。2021年商湯科技推出“SenseAuto絕影”智能汽車平臺,并于后續(xù)成立了絕影智能汽車事業(yè)群,進一步明確了智能座艙、智能駕駛、車路協(xié)同三大業(yè)務板塊的全棧體系。 從產品的設計思路上看,絕影智能車艙沒有選擇拼樂高式的“硬件集合體”路線,而是出于整體性考量,打造了以“座艙大腦”為核心的全新產品架構,將車端的攝像頭、各種感知硬件和長短記憶模塊和云端的AIDC基礎設施、日日新大模型串聯(lián)在一起,再以擁有多段對話能力且富有親和力的數(shù)字人助手作為人車交互介質,為車主提供各種主動、被動服務。 這就有效避免了傳統(tǒng)智能座艙硬件各自為戰(zhàn)、交互體驗呆板的痛點,讓整個車艙都能接收、執(zhí)行“座艙大腦”的指令,全方位的服務車主。 從產品的成長力角度看,智能車艙是整個絕影智能汽車事業(yè)群駕、艙、云三位一體產品體系的重要組成部分,擁有極高的戰(zhàn)略意義。對內,它既可以接受AI云的大模型賦能,又能和絕影的自動駕駛能力聯(lián)動實現(xiàn)“駕艙一體”,發(fā)揮連接器的效力。對外,它將是商湯絕影與整車廠結為利益共同體的“科技橄欖枝”,以及商湯AI能力在C端的一次重要閱兵。 這意味著,絕影智能車艙必須快速實現(xiàn)迭代、進化。而商湯科技的“大模型+大裝置”,就是其源源不斷的“成長力”。 大模型方面,今年4月10日商湯科技推出的“日日新SenseNova”大模型體系,集自然語言處理、內容生成、自動化數(shù)據(jù)標注、自定義模型訓練等多種大模型及能力,確保了絕影智能車艙在模型能力和問題處理方面處于行業(yè)領先地位。 商湯的大裝置SenseCore,則打通了大模型開發(fā)、生產、應用場景。目前SenseCore實現(xiàn)了3萬塊GPU部署,最大可輸出6000P算力,最高可支持萬億參數(shù)超大模型訓練。 隨著絕影自研數(shù)據(jù)閉環(huán)平臺將車端高質量數(shù)據(jù)導入,疊加大模型自動數(shù)據(jù)標注、產品檢測能力,能夠幾百倍的提升模型迭代的效率并降低成本,使得絕影艙內算法能夠快速迭代,形成獨一檔的市場競爭力。 在高工智能汽車研究院公布的“中國市場乘用車前裝座艙AI軟件供應商標配搭載量”相關排行榜單中,商湯絕影以9.47萬輛搭載上險量、15.79%的市場份額高居第一。 不難看出,絕影智能車艙既有AI頂層設計理念,又找到了通過大模型、大裝置自我強化的路徑,堪稱是贏在起跑線上的智能座艙“新物種”。 02、向“第三生活空間”,更進一步 《2023年度中國主要城市通勤監(jiān)測報告》顯示,2022年,單程5公里以內的“幸福通勤”人口比重持續(xù)下降,達到50%。與此同時,超過30個城市的單程通勤時間超過60分鐘的“極端通勤”人口比重增加。 通勤時長的大幅增長,是“超級城市化”進程中不可避免的副產物,但也間接成為智能座艙的發(fā)展契機——當智能座艙進化到一定程度時,就可以讓那些被浪費的通勤時間重新得到利用。 率先實現(xiàn)“大模型上車”的商湯絕影自然明白這個道理,也看到了自己作為“AI跨界者”的最大優(yōu)勢——那就是建立一個以AI貫穿全場景的智能座艙應用生態(tài)。 在車艙大腦的賦能下,絕影智能車艙已經圍繞安全、娛樂、教育、效率四大場景,打造出10款以上的行業(yè)首發(fā)應用,讓車艙場景變?yōu)榧踩?、行駛效率、娛樂性、教育服務為一體的“第三生活空間”。 在安全性方面,絕影智能車艙的車艙視覺算法已經實現(xiàn)多項領先,可以為駕駛員解決一系列安全痛點。 針對光斑、小眼睛、逆光、墨鏡等場景,在確保眼部成像清晰的情況下,算法可以保障Recall(召回率)在80%以上,針對ENCAP主要測試的normal case,甚至可以做到100% Recall。處理車內各種遮擋、眼睛反光、頭姿視線不一致、不同坐姿等導致的誤報時,也處于行業(yè)領先地位。 車內教育、娛樂方面,絕影智能車艙不是簡單的將互聯(lián)網應用移植過來,而是結合車內娛樂的場景特性打造出更有針對性的服務。 以服務于不同年齡段孩子的“兒童模式”為例,介紹這項功能前不妨想象一個畫面:親子出行時孩子總是嘰嘰喳喳說個不停,導致駕車的父母不得不分心回應,最終釀成事故。類似的場景在現(xiàn)實中不勝枚舉,甚至還被很多災難、懸疑電影借鑒。 絕影智能車艙的“兒童模式”,可以通過高頻互動的方式為孩子提供故事伴讀、共讀古詩詞、共創(chuàng)故事等玩法。這不是機械式的“播放音視頻”,而是會不斷拋出互動問題推動互動的深入,讓“教育、娛樂二合一”,為孩子們旺盛的精力找到歸屬,從而解放駕駛員的注意力,消除一項安全隱患。 效率提升方面,絕影智能車艙把豐富的智能化功能融會貫通,會以開放式對話的方式在合適時機向車主賦能。 比如遇到車輛問題時,車主無需拿出生澀難懂的說明書,也無需致電專業(yè)人員,只要用“大白話”與系統(tǒng)進行語音交互,即可激活“AI說明書”功能,輕松找到解決方案。再比如“旅游攻略”功能,會在人車交互的開放式對話中適時開啟,結合地圖App、用戶自駕周期、住宿需求、交通情況推薦合適的目的地,為出行平添幾分浪漫色彩和神秘感。 史蒂夫·喬布斯認為,顧客不知道自己想要什么,因此企業(yè)無需去問消費者想要什么,只需要去創(chuàng)造出消費者需要但表達不出來的需求。而絕影智能車艙的場景創(chuàng)新,恰恰就是把“消費者需要但表達不出來的需求”變成了現(xiàn)實。 03、以技術之矛劍指全球,智能車遇見“絕影速度” 對于智能汽車這樣的技術密集型產業(yè)來說,車企要想形成競爭優(yōu)勢就必須提升技術深度。于是,越來越多的頭部車企開始注意到商湯絕影的價值。 作為智能汽車時代稀缺的通用人工智能核心供應商,商湯絕影的產品體系能夠緊隨AI發(fā)展趨勢,快人一步占據(jù)AI“制高點”,把前沿技術轉化為產品力。 就像商湯科技聯(lián)合創(chuàng)始人、首席科學家、絕影智能汽車事業(yè)群總裁王曉剛所說,商湯絕影長期沉淀的大模型技術能力和量產經驗將讓智能座艙變成暖心懂你的好管家,讓智能駕駛變成安全可靠的老司機,與全球客戶共同開啟人機共駕新體驗。 比如在視覺算法方面,商湯絕影在歐盟認證駕駛員嗜睡和注意力警告系統(tǒng)(DDAW)測試中交出了recall 70%的成績單,遠高于法規(guī)要求40%,且誤報率僅為4%。做到既能無風險的通過法規(guī),也能保障用戶體驗,減少誤報。 智能駕駛專利方面,商湯科技在知識產權媒體IPRDaily發(fā)布的2020年-2021年10月中旬全球智能駕駛專利排行榜(TOP 100)中位列前十,也是國內第一批率先激活L2++級別自動駕駛量產的服務商。 不久前在計算機視覺界“奧斯卡”之稱的CVPR 2023,商湯及聯(lián)合實驗室還首個提出感知決策一體化的自動駕駛通用大模型UniAD,在接收率僅為0.02%的評選中斬獲最佳論文獎,成為CVPR歷史上第一篇以自動駕駛為主題的最佳論文。 該論文首次將檢測、跟蹤、建圖、預測及規(guī)劃整合到一個基于 Transformer 的端到端網絡框架下,實現(xiàn)多目標追蹤準確率提升20%、車道線預測準確率提升30%、目標軌跡預測誤差下降38%、規(guī)劃誤差下降28%。新算法的量產預計將于2023年四季度準備就緒,進一步提高絕影自動駕駛產品的行業(yè)競爭力。 不斷打磨自有產品、技術之余,商湯絕影也在積極與合作伙伴分享技術生產力。比如面向客戶發(fā)布的SenseAuto Empower商湯絕影賦能引擎,把商湯絕影在數(shù)據(jù)管理、數(shù)據(jù)標注、模型訓練評測及模型部署上的一站式解決方案開放給車企,以極低的數(shù)據(jù)標注、管理和訓練成本加速算法迭代。 正是這種為車企全面賦能、提高產品競爭力的全棧體系,讓絕影智能車艙能夠享譽全球。數(shù)據(jù)顯示,今年上半年商湯絕影量產業(yè)務實現(xiàn)5.7倍同比增長,量產交付數(shù)量達到39萬臺車,新增定點數(shù)量達500多萬臺,累計定點車型160多款,有近20款海外車型。 比如在與蔚來汽車的合作中,絕影智能車艙為其5款歐洲銷售車型搭載了多項AI技術,帶去人性化、智能化、場景化的智能車艙體驗,大大提升了這些車型的國際市場競爭力。為高合HiPhi Z豪華純電超跑GT搭載DMS駕駛員感知系統(tǒng)與OMS乘員感知系統(tǒng),不僅可及時預警駕駛員疲勞分心狀態(tài),還可智能感知乘員手勢進行美顏拍照,一路守護駕乘安全的同時豐富車載娛樂體驗。 2023年被稱為AI大模型爆發(fā)元年,也是AI公司為千行百業(yè)創(chuàng)造價值產生質變的一年。有理由相信,絕影智能車艙將以技術為矛,用“絕影速度”讓中國造車勢力在國際舞臺大放異彩。關鍵詞:
相關閱讀
-
商湯絕影:用大模型,重做一遍智能座艙
作者丨顧見監(jiān)制丨闌夕1979年,阿斯頓馬丁遵循其未來主義楔形汽車理念, -
我和拼多多上的外貿人,聊了聊中國制造...
文|闌夕中國經濟的騰飛,離不開全球化,而實踐全球化這個抽象概念的, -
【本地】燈塔市成大現(xiàn)代科技有限公司:...
日前,記者在燈塔市成大現(xiàn)代科技有限公司葡萄大棚內看到,一串串玫瑰紅 -
Python網絡爬蟲中這七個li標簽下面的屬...
點擊上方“Python爬蟲與數(shù)據(jù)挖掘”,進行關注回復“書籍”即可獲贈P... -
盤點一個Pandas處理Excel數(shù)據(jù)的實戰(zhàn)案例
點擊上方“Python爬蟲與數(shù)據(jù)挖掘”,進行關注回復“書籍”即可獲贈P... -
python中如何使用正則表達匹配\本身?(...
點擊上方“Python爬蟲與數(shù)據(jù)挖掘”,進行關注回復“書籍”即可獲贈P...