在全球汽車產(chǎn)業(yè)向智能化、網(wǎng)聯(lián)化加速轉(zhuǎn)型的浪潮中，大模型技術(shù)的崛起為汽車領(lǐng)域帶來(lái)了前所未有的變革機(jī)遇。黑芝麻智能在高性能芯片和基礎(chǔ)軟件架構(gòu)領(lǐng)域的持續(xù)創(chuàng)新，正全力推動(dòng)汽車智能化的發(fā)展，為行業(yè)注入新的活力。

大模型全面助力輔助駕駛邁向智能化

隨著人工智能技術(shù)的飛速發(fā)展，大模型在汽車領(lǐng)域的應(yīng)用日益廣泛，成為推動(dòng)輔助駕駛智能化的關(guān)鍵力量。從智能底盤(pán)、智能座艙到輔助駕駛，大模型的應(yīng)用場(chǎng)景不斷拓展，為用戶帶來(lái)更智能、更便捷的出行體驗(yàn)。

在輔助駕駛領(lǐng)域，大模型能夠?qū)崿F(xiàn)端到端的決策控制，基于世界模型進(jìn)行環(huán)境感知和路徑規(guī)劃，大幅提升輔助駕駛系統(tǒng)的決策效率和準(zhǔn)確性。例如，DriveGPT4 和 DriveMLM 等模型通過(guò)整合多模態(tài)數(shù)據(jù)，實(shí)現(xiàn)了更精準(zhǔn)的環(huán)境感知和駕駛決策，推動(dòng)輔助駕駛技術(shù)向更高級(jí)別發(fā)展。而在智能座艙中，基于 LLM/MLM 的多模態(tài)交互技術(shù)，如語(yǔ)音交互、艙內(nèi)行為監(jiān)控等，能夠?qū)崿F(xiàn)更自然、更智能的人車交互，提升用戶的駕駛體驗(yàn)。

然而，大模型上車也對(duì)端側(cè)設(shè)備提出了更高的要求。傳統(tǒng)的模塊化方案在面對(duì)多模型、多任務(wù)時(shí)，往往存在模塊間信息丟失、計(jì)算負(fù)擔(dān)重、難以應(yīng)對(duì)長(zhǎng)尾場(chǎng)景等問(wèn)題。例如，模塊優(yōu)化目標(biāo)的不統(tǒng)一使得系統(tǒng)整體性能難以達(dá)到最優(yōu)，而每個(gè)模塊的最壞情況執(zhí)行時(shí)間（WCET）難以精確控制，導(dǎo)致整體時(shí)延較大，這對(duì)駕駛安全來(lái)說(shuō)是個(gè)不小的挑戰(zhàn)。

多模態(tài)大模型與世界模型：輔助駕駛的未來(lái)方向

多模態(tài)大模型和世界模型的出現(xiàn)，為輔助駕駛技術(shù)的發(fā)展提供了新的思路和方法。多模態(tài)大模型通過(guò)融合視覺(jué)、語(yǔ)言等多種模態(tài)信息，能夠更全面地理解駕駛環(huán)境，提升輔助駕駛系統(tǒng)的感知能力和決策能力。例如，BLIP-2、LLaVA 等多模態(tài)模型在視覺(jué)問(wèn)答、圖像描述等任務(wù)中表現(xiàn)出色，為輔助駕駛中的場(chǎng)景理解和決策提供了有力支持。

世界模型則通過(guò)構(gòu)建虛擬環(huán)境模型，使輔助駕駛系統(tǒng)能夠在虛擬環(huán)境中進(jìn)行模擬和學(xué)習(xí)，提升系統(tǒng)的適應(yīng)性和安全性。從 2018 年的 World models 到 2024 年的 WorldDreamer 等，世界模型在輔助駕駛中的應(yīng)用不斷深化，為輔助駕駛技術(shù)的發(fā)展提供了新的動(dòng)力。

黑芝麻智能：以技術(shù)創(chuàng)新引領(lǐng)汽車智能化

面對(duì)汽車智能化的挑戰(zhàn)和機(jī)遇，黑芝麻智能積極投身于技術(shù)創(chuàng)新，致力于為行業(yè)提供高性能、靈活可靠的解決方案。

黑芝麻智能積極擁抱下一代電子電氣架構(gòu)的演進(jìn)，推動(dòng)架構(gòu)從傳統(tǒng)模塊化向集成化、集中化、跨域融合升級(jí)，通過(guò)域控制器（DCU）、跨域多域控制器（MDC）、車載電腦（CCU + Zone）等的運(yùn)用，為汽車智能化提供高效、靈活的硬件基礎(chǔ)。武當(dāng)系列芯片平臺(tái)借助先進(jìn)的封裝技術(shù)和高速通信接口，實(shí)現(xiàn)了算力的靈活擴(kuò)展和高效通信，能夠滿足不同場(chǎng)景下的多樣化需求。

在芯片創(chuàng)新方面，黑芝麻智能武當(dāng)系列和華山系列芯片，為輔助駕駛智能化提供強(qiáng)大算力支持。武當(dāng)系列芯片憑借高性能、高安全性以及開(kāi)源開(kāi)放的特點(diǎn)，在行業(yè)內(nèi)脫穎而出。以武當(dāng)C1296 芯片為例，作為行業(yè)首顆支持多域融合的芯片平臺(tái)，它集成了整車數(shù)據(jù)計(jì)算、自動(dòng)泊車系統(tǒng)、安全信息系統(tǒng)等多種功能，為汽車智能化提供了全方位的支撐。而華山系列芯片依靠九韶架構(gòu)、BaRT 等先進(jìn)技術(shù)，為輔助駕駛提供了高效的計(jì)算能力。

同時(shí)，黑芝麻智能充分認(rèn)識(shí)到基礎(chǔ)軟件架構(gòu)的重要性，積極研發(fā)面向未來(lái)的智能化基礎(chǔ)軟件架構(gòu)。其開(kāi)源基礎(chǔ)軟件參考實(shí)現(xiàn)符合《車載智能計(jì)算基礎(chǔ)平臺(tái)參考架構(gòu) 2.0》規(guī)范，為用戶提供了標(biāo)準(zhǔn)化且可靠的技術(shù)底座。通過(guò)引入 Cloud Native、OTA、Model Based Design、SOA 等通信技術(shù)，基礎(chǔ)軟件架構(gòu)更好地支持大模型運(yùn)行和應(yīng)用，為輔助駕駛發(fā)展奠定堅(jiān)實(shí)基礎(chǔ)。

開(kāi)源生態(tài)與合作：共筑汽車智能化未來(lái)

黑芝麻智能深知開(kāi)源生態(tài)對(duì)于汽車智能化發(fā)展的重要性，因此積極回饋開(kāi)源社區(qū)，并與眾多合作伙伴攜手構(gòu)建開(kāi)放、協(xié)作的產(chǎn)業(yè)生態(tài)。

通過(guò)代碼開(kāi)源和接口開(kāi)放，黑芝麻智能吸引了全球范圍內(nèi)的開(kāi)發(fā)者參與，促進(jìn)了技術(shù)的快速傳播和應(yīng)用。目前，武當(dāng)系列芯片的開(kāi)源代碼和開(kāi)放接口，為開(kāi)發(fā)者提供了靈活的開(kāi)發(fā)環(huán)境，加速了智能網(wǎng)聯(lián)汽車的上市進(jìn)程。

此外，黑芝麻智能還與產(chǎn)業(yè)鏈上下游的眾多企業(yè)深度合作，共同探索新技術(shù)、新模式，推動(dòng)汽車智能化的持續(xù)發(fā)展。通過(guò)這種緊密的合作，黑芝麻智能構(gòu)建了一個(gè)涵蓋芯片、操作系統(tǒng)、中間件、應(yīng)用軟件等全產(chǎn)業(yè)鏈的生態(tài)系統(tǒng)，為汽車智能化的全面發(fā)展提供了有力的支持。

黑芝麻智能將繼續(xù)秉持創(chuàng)新無(wú)界、合作開(kāi)放的理念，不斷加大在技術(shù)研發(fā)和開(kāi)源生態(tài)建設(shè)方面的投入。隨著下一代高性能芯片和基礎(chǔ)軟件架構(gòu)的持續(xù)創(chuàng)新，黑芝麻智能將為輔助駕駛的發(fā)展提供更強(qiáng)大的技術(shù)驅(qū)動(dòng)力。