當(dāng)前，“端到端”技術(shù)已經(jīng)獲得了國內(nèi)外眾多主機廠和供應(yīng)商的青睞，預(yù)計在2025年會迎來更大爆發(fā)。有理由相信，隨著技術(shù)的進(jìn)步，“端到端”將在不久的將來重塑智駕格局。

從概念興起到深入布局，“端到端”幾乎已經(jīng)成為了車企近階段在自動駕駛領(lǐng)域的重點工作。8月初，有媒體報道稱，小鵬汽車近期對自動駕駛部門進(jìn)行了相應(yīng)的組織架構(gòu)調(diào)整，新設(shè)AI模型開發(fā)、AI應(yīng)用開發(fā)、AI效能開發(fā)三大板塊職能，旨在加速AI能力進(jìn)化和組織AI化轉(zhuǎn)型。無獨有偶，6月蔚來也被曝重組了智駕團(tuán)隊，將感知和規(guī)控團(tuán)隊合并為大模型團(tuán)隊，而理想汽車也在7月成立了“端到端自動駕駛”實體組織，規(guī)模約200人。“

‘端到端’采用神經(jīng)網(wǎng)絡(luò)作為信息傳遞的橋梁，通過數(shù)據(jù)驅(qū)動實現(xiàn)全局優(yōu)化，理論上性能上限更高，可以更好地處理復(fù)雜場景，避免了模塊化系統(tǒng)中各部分獨立優(yōu)化可能帶來的整體性能損失，并具備利用數(shù)據(jù)閉環(huán)進(jìn)行快速更新的能力，獲得了國內(nèi)外眾多主機廠和供應(yīng)商的青睞，有望推動智能駕駛向更高級別的發(fā)展。”清華汽研院智能網(wǎng)聯(lián)中心技術(shù)總監(jiān)孫輝在接受采訪時表示，2024年已經(jīng)有一些企業(yè)宣稱在測試或量產(chǎn)“端到端”方案，預(yù)計在2025年會迎來更大的爆發(fā)。隨著技術(shù)的進(jìn)步，相信“端到端”將在不久的將來重塑智駕格局。

忽如一夜春風(fēng)來，家家都上“端到端”

有的人因為相信才看見，例如特斯拉，而有的人則因為看見了才相信，例如近期公開“端到端”自動駕駛方案上車規(guī)劃的一眾車企。

其實“端到端”并不是一個新詞，早在2016年，英偉達(dá)就提出采用單個神經(jīng)網(wǎng)絡(luò)來實現(xiàn)“端到端”的自動駕駛，但只完成了小規(guī)模的demo驗證。直到隨著Transformer網(wǎng)絡(luò)架構(gòu)和車端算力（逐步可支持0.1B~1B級參數(shù)量網(wǎng)絡(luò)運行）的提升，One Model的“端到端”方案才又重新回到人們的視野中。

特斯拉成為了這一時期“第一個吃螃蟹的人”。2023年8月，特斯拉在公布FSD V12版本時正式宣布引入了“端到端”技術(shù)。今年3月，特斯拉開始在北美地區(qū)大范圍推送FSD V12。這套智駕系統(tǒng)的優(yōu)秀表現(xiàn)，讓從業(yè)者和用戶都迅速感受到了智能化技術(shù)所帶來的駕乘體驗提升，因此也在一定程度上推動了“端到端”自動駕駛技術(shù)路線在短期內(nèi)形成了大范圍的共識。

同樣作為“端到端”技術(shù)的忠實擁護(hù)者，小鵬積極跟進(jìn)，先是在今年1月30日提出未來將實現(xiàn)“端到端”模型全面上車，隨后在5月20日宣布開始向用戶推送基于“端到端”大模型的智能駕駛和智能座艙系統(tǒng)。到了7月30日，小鵬汽車官宣將向全球用戶全量推送AI天璣系統(tǒng)XOS 5.2.0版本，同時提出在2024年四季度可以實現(xiàn)“門到門”的智能駕駛，即居住小區(qū)停車場到單位園區(qū)停車場的高級別輔助駕駛。

其余企業(yè)也紛紛行動起來。4月，華為推出了采用“端到端”架構(gòu)的ADS 3.0，并已搭載于6月上市的享界S9；在北京車展上，元戎啟行展示了基于DeepRoute IO的“端到端”解決方案，商湯絕影則推出了面向量產(chǎn)的“端到端”自動駕駛解決方案“UniAD”；地平線在5月發(fā)布了SuperDrive全場景智能駕駛解決方案，使用了動態(tài)、靜態(tài)、Occupancy三網(wǎng)合一的感知“端到端”架構(gòu)；7月5日，理想宣布，向全量理想AD Max用戶推送“全國都能開”的無圖NOA并發(fā)布基于“端到端”模型、VLM視覺語言模型和世界模型的全新自動駕駛技術(shù)架構(gòu)；7月27日，蔚來正式發(fā)布智能駕駛技術(shù)架構(gòu)，并表示該技術(shù)架構(gòu)在算法層升級引入了自研的蔚來世界模型的“端到端”架構(gòu)。

原教旨定義的“端到端”仍在路上

有意思的是，盡管“端到端”已經(jīng)被公認(rèn)為自動駕駛技術(shù)發(fā)展的大趨勢，但業(yè)界對其定義仍存有爭議，一位國內(nèi)一線智駕車企工程師甚至在接受媒體采訪時這樣說道：“目前為止，我沒有聽到任何一家做到了（原教旨定義下的）‘端到端’。沒有任何一家，包括特斯拉。”

對此，孫輝提出，“端到端”是一種通用的技術(shù)類別，根據(jù)不同應(yīng)用具有不同的含義。目前行業(yè)內(nèi)普遍認(rèn)可的“端到端”技術(shù)主要分為兩類，一類是感知規(guī)劃“端到端”，以多傳感器數(shù)據(jù)為輸入，行駛軌跡規(guī)劃為輸出，該路線繼承自BEV、OCC，有良好的產(chǎn)業(yè)量產(chǎn)基礎(chǔ)和較低的運行算力需求，是最主要的路線。第二類則是基于多模態(tài)大模型（VLM、MLM）的“端到端”，利用大語言模型的知識底座，通過微調(diào)的方式適應(yīng)自動駕駛場景理解和決策。孫輝指出，這類大模型由于參數(shù)量過大的原因，無法用于實時推理，但對corner case的理解能力更強，決策更擬人化，可作為有效補充。

根據(jù)前不久發(fā)布的《端到端自動駕駛行業(yè)研究報告》（以下簡稱《報告》)，在目前國內(nèi)“端到端”技術(shù)路線的主要“玩家”中，商湯絕影和小鵬汽車跑得比較靠前。其中，小鵬的“端到端”大模型有三個組成部分，包括神經(jīng)網(wǎng)絡(luò)XNet、規(guī)控大模型XPlanner和大語言模型XBrain；而商湯絕影的“端到端UniAD”屬于“模塊化端到端”類型，與決策規(guī)劃模型化的技術(shù)架構(gòu)（即“兩段式端到端網(wǎng)絡(luò)”）相比，不需要對感知數(shù)據(jù)進(jìn)行抽象和逐級傳遞，實現(xiàn)了感知決策一體化和系統(tǒng)的聯(lián)合優(yōu)化。

不過，誠如上述車企工程師所說，幾乎目前市面上所有的“端到端”技術(shù)都留有“兜底規(guī)則”，也就是說，系統(tǒng)中的規(guī)控大部分仍是混合架構(gòu)。“目前看來，‘兜底’是非常有必要的事情。”孫輝告訴記者，在“端到端”模型沒有達(dá)到足夠可靠的時候，可能需要基于規(guī)則的方法和“端到端”模型同時工作。一方面，這在資源分配上是可行的，因為傳統(tǒng)方法多依賴CPU資源，而端到端依賴GPU/NPU資源；另一方面，智駕研發(fā)企業(yè)并不適合在沒有成熟基于規(guī)則的方法之前，跳過該環(huán)節(jié)直接開發(fā)“端到端”方案，這樣會降低系統(tǒng)的可靠性。他認(rèn)為，“兜底規(guī)則”或基于規(guī)則的安全保障，將在很長的時間內(nèi)都是一個必備的模塊，隨著技術(shù)的發(fā)展，其觸發(fā)幾率會持續(xù)降低。

上車制約因素：可靠性、適應(yīng)性和實時性

盡管像孫輝所說，今年就已經(jīng)有一些企業(yè)宣稱在測試或量產(chǎn)“端到端”方案，預(yù)計在2025年會迎來更大的爆發(fā)。但對于現(xiàn)在的智能駕駛汽車企業(yè)而言，要實現(xiàn)“端到端”的量產(chǎn)上車仍需面臨可靠性、適應(yīng)性和實時性等因素的制約。

在孫輝看來，企業(yè)會根據(jù)所依托的控制器硬件選擇合理的模型規(guī)模，其主要挑戰(zhàn)在于當(dāng)網(wǎng)絡(luò)規(guī)模受限時，如何訓(xùn)練出可靠性高、泛化能力好的模型。借鑒其他領(lǐng)域的經(jīng)驗，如采用大規(guī)模數(shù)據(jù)訓(xùn)練（如SAM）、教師模型蒸餾、人工反饋的強化學(xué)習(xí)（RLHF）等，還需要行業(yè)內(nèi)更多的探索嘗試。

在這一過程中，數(shù)據(jù)和算力就成為了擺在車企面前的兩大難題。理想汽車總裁、總工程師馬東輝在今年第一季度財報電話會上直言，特斯拉的“端到端”大模型需要大量的數(shù)據(jù)和訓(xùn)練算力，“這不是所有車企都有能力和資源做到的”。

另一大挑戰(zhàn)是“端到端”如何處理corner case。孫輝指出，在升級為大模型之前，邊緣場景對“端到端”算法來說依然是挑戰(zhàn)，因為邊緣場景在數(shù)據(jù)中呈現(xiàn)出極度稀疏的狀態(tài)，很難被有效學(xué)習(xí)。目前行業(yè)里的一種解決方法是單獨添加標(biāo)簽，采用類似Focal Loss的方式提高其貢獻(xiàn)，另一種則是采用合成數(shù)據(jù)來人為制造邊緣場景用于學(xué)習(xí)。

“特斯拉在2021年和2022年年底的AI Day上分別公布了BEV和Ocuupancy Network的技術(shù)架構(gòu)，而國內(nèi)車企開始OTA基于BEV/Occupancy Network的功能普遍在2023-2024年，與特斯拉的研發(fā)進(jìn)度差大概在1.5~2年。”《報告》認(rèn)為，參考前述追趕進(jìn)度，國內(nèi)自動駕駛公司的模塊化“端到端”方案上車量產(chǎn)時間可能會在2025年。

孫輝對此抱持相同的觀點。“在已有技術(shù)的基礎(chǔ)上，或多或少地添加‘端到端’的方案具有較好的可行性，OTA技術(shù)也為后續(xù)持續(xù)更新奠定了基礎(chǔ)。”孫輝表示，隨著技術(shù)的進(jìn)步，有理由相信“端到端”將在不久的將來重塑智駕格局。

注：本文首發(fā)于《汽車縱橫》雜志2024年9月刊“熱點追蹤”欄目，敬請關(guān)注。

圖片：來自網(wǎng)絡(luò)

文章：汽車縱橫

排版：汽車縱橫

       原文標(biāo)題 : “端到端”風(fēng)口已至？