加速智能汽車駛入AGI時代 商湯絕影系列原生態大模型亮相

版權聲明:本文版權爲本站汽車所有,轉載請註明出處。

本站汽車4月26日報道 在本屆北京車展上,商湯絕影攜系列原生態大模型及相關產品矩陣首次亮相。作爲首個提出感知決策一體化自動駕駛通用模型的公司,商湯絕影在本屆車展上首次向公衆展示了面向量產的真·端到端自動駕駛解決方案UniAD(Unified Autonomous Driving)的道路測試表現,同時還帶來了以多模態場景大腦爲核心的AI大模型座艙產品矩陣以及全新座艙3D交互演示,全景展示了通用人工智能(AGI)技術驅動的靈活自適應、深度個性化、安全可信賴、有人文關懷的未來出行全新體驗。

商湯科技聯合創始人、首席科學家、絕影智能汽車事業羣總裁王曉剛表示:“未來汽車智能化的競爭,本質上是通用人工智能技術融合應用的比拼。商湯絕影致力於成爲加速智能汽車駛入AGI時代的核心技術夥伴,給智能汽車產業帶來生產效率和交互體驗的雙重革新,將攜手合作夥伴提供通用人工智能技術驅動的智能汽車全新體驗,共同定義未來出行。”

像人一樣開車

憑藉前瞻的行業洞察和率先佈局,商湯及其聯合實驗室在2022年底便提出了行業首個感知決策一體化自動駕駛通用模型UniAD,並在次年榮獲2023年國際計算機視覺與模式識別會議(CVPR)最佳論文,引領端到端自動駕駛的創新潮流。

此次在北京車展上,商湯絕影以UniAD自動駕駛解決方案令人驚豔的實車測試成果展現了中國端到端智駕的實力。在無高精地圖條件下,僅依靠視覺感知的實際道路測試成果。無論是複雜城市道路還是無中線的鄉村道路上,車輛能高效準確地完成包括大角度左轉上橋、避讓佔道車輛及施工區域、繞行跑步行人等一系列高難度操作,做到“像人一樣開車”。

搭載UniAD方案的車輛可真正做到“像人一樣開車”

今年年初,特斯拉開始向部分用戶推送FSD V12版本的端到端自動駕駛方案,業內隨之出現了越來越多的“端到端”智駕方案,不過大部分端到端方案採用的是更容易落地的由感知和決策兩個模型組成的 “兩段式”架構,兩個模型之間依然存在信息傳遞過濾或丟失的問題。而UniAD將感知、決策、規劃等模塊都整合到一個全棧Transformer端到端模型,實現感知決策一體化的真·端到端自動駕駛。

當前,行業需要真·端到端自動駕駛方案,因爲基於規則的智駕方案的天花板已開始顯現。隨着城區成爲智駕落地的主戰場,場景計算的複雜度呈指數級增長。大量的人力資源投入也只是增加有限的規則,無法應對數量無限的複雜場景和長尾路況(corner case)。端到端技術的出現開闢了一條全新的道路,開始推動自動駕駛範式從鋪設大量人力轉變爲持續算力投入和高質量數據輸入。

憑藉商湯大裝置的豐沛算力、高質量仿真數據和行業領先的模型性能,UniAD端到端方案有更高的能力上限,強大的學習和思考能力讓它能夠像人一樣開車;數據驅動的端到端模型泛化能力強、迭代效率快,可以幫助車企低成本快速開城;純視覺感知的無圖方案,進一步降低系統的軟硬件成本,助力智駕普及,實現全國都能開。

在端到端系統基礎上,商湯絕影還在本次車展期間前瞻介紹了新一代自動駕駛大模型DriveAGI,推動自動駕駛從數據驅動向認知驅動的躍遷。依託多模態大模型強大的世界理解、推理能力、決策能力以及交互能力,DriveAGI將是目前最貼近人類思維模式、最能理解人類意圖並有最強解決駕駛困難場景能力的技術方案,向完全無人駕駛邁出重要一步。

“多模態場景大腦” 提供真正懂你的智能座艙

前不久上市的小米SU7(參數丨圖片)將AI大模型帶進座艙,而商湯“日日新”大模型也全面助力小愛同學車載語音場景應用。

4月23日,商湯科技發佈全新升級的“日日新SenseNova 5.0”大模型。6000億參數的“日日新5.0”採用混合專家架構(MOE),具備更強的知識、數學、推理及代碼能力,成爲國內首個全面對標甚至超越GPT-4 Turbo的大模型,多模態能力領先GPT-4V。基於端雲結合的架構,商湯端側大模型大幅超越同量級大模型,越級比肩7B、13B大模型,更適合車端部署。

基於多模態大模型、大語言模型、文生圖模型等能力組合,商湯絕影構建了以多模態場景大腦爲核心的一系列全景感知、主動關懷且富有創造力的大模型座艙產品。

商湯絕影正在打造的敏銳洞察、深度思考、高效執行的多模態場景大腦,是助力智能汽車邁向AGI時代的核心產品之一。通過應用場景和用戶需求驅動,多模態場景大腦讓智能汽車可以高效準確地全景感知和深度理解用戶需求和周圍環境,並以場景大腦爲核心打通不同應用,將離散的單點功能聚合在一起,從而爲用戶提供更多深度個性化的主動關懷和服務。

基於地理位置推薦符合用戶喜好的餐廳、介紹用戶感興趣的外部自然景物,並進行優質景點推薦是絕影AI大模型座艙產品的基礎功能。憑藉強大的多模態感知能力,搭載商湯絕影方案的車輛能夠準確感知並識別車外的信息,包括周圍車輛的車型、標誌性建築物等,以語音、圖片或者視頻等方式爲艙內人員提供更爲準確和全面的內容,幫助用戶瞭解和掌握外部環境信息,打破座艙本身的限制,讓用戶享受更爲自由無束縛的出行體驗。

此外,以多模態場景大腦爲核心,商湯絕影還能提供更多基於汽車場景的AI大模型座艙產品。以商湯“大醫”醫療健康大模型爲橋樑的“旅醫”,讓用戶在座艙內就可以獲得專業及個性化的健康管理服務,讓出行更安心。基於AIGC大模型技術的“神筆”,可以把用戶簡單的繪畫線條轉變成具有美感的藝術作品,增添駕乘樂趣。

人機交互的創新也是驅動座艙體驗升維的重要因素,去年Apple Vision Pro的問世展現了3D交互的創新體驗和應用潛力。商湯絕影憑藉深厚的感知技術研發實力和高效的創新迭代效率,將3D Gaze高精視線交互和3D 動態手勢交互這兩大全新座艙3D交互演示帶到現場,讓觀衆體驗到更符合人類直覺的艙內交互方式,推動座艙交互向更安全、更便利的3D交互升維進化。

其中, 3D Gaze高精視線交互是商湯絕影全球首創的能夠通過視線定位與屏幕圖標進行交互的智能座艙技術,讓用戶無需點按屏幕,通過眼神即可精準控制中控圖標,完成多種交互操作;3D 動態手勢交互是行業領先的支持動態手勢和手部微動作識別的智能座艙技術,用戶通過手勢“隔空”實現各類座艙精細化的交互,打破傳統按鍵和屏幕觸控方式的繁瑣和侷限。

(商湯絕影3D Gaze高精視線交互:通過眼神即可精準控制中控圖標)

面向未來,商湯絕影還在進一步探索艙駕融合,實現智能駕駛和智能座艙在硬件、軟件及應用層面的全面融合,提升用戶體驗、降低系統成本,進一步打破艙內外的界限和束縛,涌現更多創新功能,帶來更安全、更加全方位,更具人文關懷的新體驗。

商湯絕影加速智能汽車駛入AGI時代

未來一到兩年,智能汽車處在一個關鍵的時間節點,它與通用人工智能的深度融合將開啓一個全新的時代。沒有公司能在新時代單打獨鬥成功,車企需要強有力的核心技術夥伴攜手共進,而商湯絕影正是行業稀缺的同時具備“算力+算法+量產經驗”全棧技術領先的核心供應商,是一匹應勢而躍的千里馬,能夠助力合作伙伴在AGI時代持續領先。

AGI的突破掀起技術範式的革新,堅實的核心研發能力成爲行業競爭的關鍵。依託商湯大裝置深厚的算力儲備、原生的汽車垂類大模型、領先的軟硬件架構和全棧數據生產管線,商湯絕影率先構建了四大技術基座,正在成長爲加速智能汽車駛入AGI時代的核心技術夥伴。

SenseCore商湯大裝置是行業領先的AI基礎設施,能夠以高達12,000 petaFLOPS的豐沛算力支持商湯絕影系列原生態大模型的高效迭代;商湯絕影爲智能汽車前瞻構建了UniAD、DriveAGI以及面向座艙的多模態場景大腦等系列原生態大模型,加速端到端自動駕駛和大模型在智能座艙場景的落地;端雲協同和艙駕融合的創新軟硬件架構,讓智能汽車降本增效、涌現創新功能;全棧的數據生產管線,實現大模型的高質量訓練。

憑藉四大AGI技術基座,商湯絕影將推動智能汽車加速擁抱通用人工智能時代,以端到端大模型解決智能駕駛規模化普及難題,以多模態場景大腦讓智能座艙告別傳統的單點功能開發模式,驅動行業生產效率革新,並打破艙內外的界限和束縛,驅動人機交互體驗革新,提供靈活自適應、深度個性化、安全可信賴、有人文關懷的未來出行全新體驗。

如今,商湯絕影已經構建了智能駕駛、智能座艙和AI雲的多元AGI產品體系,正在加速推動原生態大模型產品在汽車智能化領域的全方位深度應用,加速AGI融入汽車產業,與廣大車企合作共贏,開啓未來出行的新篇章。