在全球汽車產(chǎn)業(yè)向智能化、網(wǎng)聯(lián)化加速轉型的浪潮中,大模型技術的崛起為汽車領域帶來了前所未有的變革機遇。黑芝麻智能在高性能芯片和基礎軟件架構領域的持續(xù)創(chuàng)新,正全力推動汽車智能化的發(fā)展,為行業(yè)注入新的活力。
大模型全面助力輔助駕駛邁向智能化
隨著人工智能技術的飛速發(fā)展,大模型在汽車領域的應用日益廣泛,成為推動輔助駕駛智能化的關鍵力量。從智能底盤、智能座艙到輔助駕駛,大模型的應用場景不斷拓展,為用戶帶來更智能、更便捷的出行體驗。
在輔助駕駛領域,大模型能夠實現(xiàn)端到端的決策控制,基于世界模型進行環(huán)境感知和路徑規(guī)劃,大幅提升輔助駕駛系統(tǒng)的決策效率和準確性。例如,DriveGPT4 和 DriveMLM 等模型通過整合多模態(tài)數(shù)據(jù),實現(xiàn)了更精準的環(huán)境感知和駕駛決策,推動輔助駕駛技術向更高級別發(fā)展。而在智能座艙中,基于 LLM/MLM 的多模態(tài)交互技術,如語音交互、艙內行為監(jiān)控等,能夠實現(xiàn)更自然、更智能的人車交互,提升用戶的駕駛體驗。
然而,大模型上車也對端側設備提出了更高的要求。傳統(tǒng)的模塊化方案在面對多模型、多任務時,往往存在模塊間信息丟失、計算負擔重、難以應對長尾場景等問題。例如,模塊優(yōu)化目標的不統(tǒng)一使得系統(tǒng)整體性能難以達到最優(yōu),而每個模塊的最壞情況執(zhí)行時間(WCET)難以精確控制,導致整體時延較大,這對駕駛安全來說是個不小的挑戰(zhàn)。
多模態(tài)大模型與世界模型:輔助駕駛的未來方向
多模態(tài)大模型和世界模型的出現(xiàn),為輔助駕駛技術的發(fā)展提供了新的思路和方法。多模態(tài)大模型通過融合視覺、語言等多種模態(tài)信息,能夠更全面地理解駕駛環(huán)境,提升輔助駕駛系統(tǒng)的感知能力和決策能力。例如,BLIP-2、LLaVA 等多模態(tài)模型在視覺問答、圖像描述等任務中表現(xiàn)出色,為輔助駕駛中的場景理解和決策提供了有力支持。
世界模型則通過構建虛擬環(huán)境模型,使輔助駕駛系統(tǒng)能夠在虛擬環(huán)境中進行模擬和學習,提升系統(tǒng)的適應性和安全性。從 2018 年的 World models 到 2024 年的 WorldDreamer 等,世界模型在輔助駕駛中的應用不斷深化,為輔助駕駛技術的發(fā)展提供了新的動力。
黑芝麻智能:以技術創(chuàng)新引領汽車智能化
面對汽車智能化的挑戰(zhàn)和機遇,黑芝麻智能積極投身于技術創(chuàng)新,致力于為行業(yè)提供高性能、靈活可靠的解決方案。
黑芝麻智能積極擁抱下一代電子電氣架構的演進,推動架構從傳統(tǒng)模塊化向集成化、集中化、跨域融合升級,通過域控制器(DCU)、跨域多域控制器(MDC)、車載電腦(CCU + Zone)等的運用,為汽車智能化提供高效、靈活的硬件基礎。武當系列芯片平臺借助先進的封裝技術和高速通信接口,實現(xiàn)了算力的靈活擴展和高效通信,能夠滿足不同場景下的多樣化需求。
在芯片創(chuàng)新方面,黑芝麻智能武當系列和華山系列芯片,為輔助駕駛智能化提供強大算力支持。武當系列芯片憑借高性能、高安全性以及開源開放的特點,在行業(yè)內脫穎而出。以武當C1296 芯片為例,作為行業(yè)首顆支持多域融合的芯片平臺,它集成了整車數(shù)據(jù)計算、自動泊車系統(tǒng)、安全信息系統(tǒng)等多種功能,為汽車智能化提供了全方位的支撐。而華山系列芯片依靠九韶架構、BaRT 等先進技術,為輔助駕駛提供了高效的計算能力。
同時,黑芝麻智能充分認識到基礎軟件架構的重要性,積極研發(fā)面向未來的智能化基礎軟件架構。其開源基礎軟件參考實現(xiàn)符合《車載智能計算基礎平臺參考架構 2.0》規(guī)范,為用戶提供了標準化且可靠的技術底座。通過引入 Cloud Native、OTA、Model Based Design、SOA 等通信技術,基礎軟件架構更好地支持大模型運行和應用,為輔助駕駛發(fā)展奠定堅實基礎。
開源生態(tài)與合作:共筑汽車智能化未來
黑芝麻智能深知開源生態(tài)對于汽車智能化發(fā)展的重要性,因此積極回饋開源社區(qū),并與眾多合作伙伴攜手構建開放、協(xié)作的產(chǎn)業(yè)生態(tài)。
通過代碼開源和接口開放,黑芝麻智能吸引了全球范圍內的開發(fā)者參與,促進了技術的快速傳播和應用。目前,武當系列芯片的開源代碼和開放接口,為開發(fā)者提供了靈活的開發(fā)環(huán)境,加速了智能網(wǎng)聯(lián)汽車的上市進程。
此外,黑芝麻智能還與產(chǎn)業(yè)鏈上下游的眾多企業(yè)深度合作,共同探索新技術、新模式,推動汽車智能化的持續(xù)發(fā)展。通過這種緊密的合作,黑芝麻智能構建了一個涵蓋芯片、操作系統(tǒng)、中間件、應用軟件等全產(chǎn)業(yè)鏈的生態(tài)系統(tǒng),為汽車智能化的全面發(fā)展提供了有力的支持。
黑芝麻智能將繼續(xù)秉持創(chuàng)新無界、合作開放的理念,不斷加大在技術研發(fā)和開源生態(tài)建設方面的投入。隨著下一代高性能芯片和基礎軟件架構的持續(xù)創(chuàng)新,黑芝麻智能將為輔助駕駛的發(fā)展提供更強大的技術驅動力。