【ITBEAR】理想汽車近日宣布其智能駕駛技術(shù)取得重大突破，正式全量推送端到端+VLM系統(tǒng)，標(biāo)志著理想汽車正式邁入AI大模型時(shí)代。這一創(chuàng)新技術(shù)首次亮相于今年7月的理想汽車夏季智能駕駛發(fā)布會，以其獨(dú)特的one-model結(jié)構(gòu)和將視覺語言模型VLM部署到車端芯片上的雙系統(tǒng)方案，引起了廣泛關(guān)注。
理想汽車的端到端+VLM系統(tǒng)在實(shí)際場景中表現(xiàn)出色，能夠應(yīng)對路邊起步、環(huán)島、U型掉頭等復(fù)雜場景，同時(shí)基于VLM技術(shù)，實(shí)現(xiàn)了對限時(shí)公交車道、潮汐/可變車道等特殊場景的識別和應(yīng)對，顯著提升了駕駛的安全性、舒適性和效率。
此次全量推送的版本是基于V4.8.6模型，是在400萬clips基礎(chǔ)上迭代的第16個(gè)版本。主要升級點(diǎn)包括提升超車場景的理解能力、導(dǎo)航信息理解能力以及障礙物檢測精度，使駕駛體驗(yàn)更加流暢和安全。
在交互方面，理想汽車也進(jìn)行了升級。系統(tǒng)1的端到端模型文字彈窗更加豐富易懂，實(shí)時(shí)交互展示導(dǎo)航、交規(guī)等相關(guān)信息。系統(tǒng)2的VLM視覺語言模型則新增了圖文視窗，能夠在特殊場景下展示模型的思考過程和結(jié)果，增強(qiáng)了用戶的理解和信任。
理想汽車的這一技術(shù)創(chuàng)新，使其在智能駕駛領(lǐng)域?qū)崿F(xiàn)了彎道超車。盡管面臨諸多挑戰(zhàn)，但理想汽車通過引入VLM視覺語言模型和使用泛化能力極強(qiáng)的世界模型進(jìn)行測試，確保了方案的安全性和高效性。
理想汽車智能駕駛副總裁郎咸朋表示，端到端技術(shù)的最大改變在于開始真正用人工智能的方式來做自動駕駛。通過給大模型喂高質(zhì)量的數(shù)據(jù)并提升模型能力，使系統(tǒng)能夠做出更好的規(guī)劃和決策。
在數(shù)據(jù)量和算力方面，理想汽車也取得了顯著進(jìn)展。目前其智能駕駛累積訓(xùn)練里程已超過25億公里，預(yù)計(jì)年底將超過30億公里。同時(shí)，訓(xùn)練算力也在不斷提升，預(yù)計(jì)到2024年底將超過8EFLOPS。
隨著消費(fèi)者對智能駕駛技術(shù)的認(rèn)可度不斷提高，自動駕駛市場正在快速發(fā)展。據(jù)預(yù)測，2024年我國自動駕駛市場規(guī)模將達(dá)3832億元。理想汽車的這一技術(shù)創(chuàng)新，無疑將為智能駕駛領(lǐng)域的發(fā)展注入新的活力。
