“一段式”與“兩段式”，看不見(jiàn)上限的軍備競(jìng)賽

10月29日，小米在發(fā)布會(huì)上表示10月30日在全國(guó)范圍內(nèi)部署城區(qū)NOA。而“端到端”將在11月底內(nèi)測(cè)，12月底推送先鋒版。其實(shí)，今年夏天開(kāi)始，“端到端”智駕就成了業(yè)內(nèi)最火的概念。就在小米發(fā)聲前一周，理想汽車(chē)也剛剛宣布了自己的端到端進(jìn)程。

小米還在瘋狂趕工中的“端到端”，是“一段式”（感知和規(guī)控合為一體），還是“兩段式”（感知和規(guī)控模塊分開(kāi)，中間嵌入人工接口），目前沒(méi)有公開(kāi)信息。不過(guò)，9月份小米將原來(lái)“感知”和“規(guī)控”兩個(gè)二級(jí)部門(mén)合并為“端到端算法與功能部”。組織架構(gòu)的變化，暗示小米至少將“一段式”作為目標(biāo)。

截至目前，已經(jīng)有十幾家主機(jī)廠和供應(yīng)商，聲稱(chēng)上馬或者即將上馬“端到端”，以至于這個(gè)概念，從新鮮到濫俗，只花了不到1年時(shí)間。不管有沒(méi)有，都得說(shuō)有。看如今的流量打法，嘴上輸了就等于“輸陣”。閩南人說(shuō)“輸人不輸陣，輸陣歹看面”。對(duì)潛在受眾和自家團(tuán)隊(duì)構(gòu)成士氣打擊，不是小事。

圖：一段式端到端示意圖

“一段式”和“兩段式”，雙方旗鼓相當(dāng)

目前，聲稱(chēng)已部署“一段式”端到端的供應(yīng)商，只有Momenta。智己、廣豐、埃安，作為Momenta的客戶(hù)，宣布同期部署。就在10月28日舉辦的品牌智能駕駛技術(shù)日上，智己汽車(chē)宣布IM AD 3.0完成從“最像人”到“有直覺(jué)”的進(jìn)化，邁入“直覺(jué)”智駕新時(shí)代。

而表示“即將”部署“一段式”的品牌，則包括理想、小米、商湯科技、元戎啟行等。“兩段式”主機(jī)廠和供應(yīng)商似乎數(shù)量更多，目前有小鵬、極氪、極越、魏牌藍(lán)山、鴻蒙智行等。

而寶駿作為大疆的用戶(hù)，不但部署了卓馭+寶駿云海（參數(shù)丨圖片），還特意標(biāo)明為“中算力兩段式端到端”。

至于華為的鴻蒙系，客戶(hù)包括問(wèn)界、享界、智界、嵐圖、阿維塔、方程豹、廣汽傳祺。東風(fēng)猛士、尊界也宣布了與華為合作的信息，但迄今尚無(wú)“端到端”部署規(guī)劃。華為的態(tài)度，暫時(shí)未將“一段式”作為目標(biāo)。而且，華為也不認(rèn)為“兩段式”是通往“一段式”的過(guò)渡形式。

除此之外，奇瑞、長(zhǎng)安啟源、地平線、輕舟智航等，雖然規(guī)劃了端到端，但未說(shuō)明形式。

到現(xiàn)在為止，端到端領(lǐng)域，看似支持“兩段式”品牌略多于“一段式”。如果將同一供應(yīng)商技術(shù)來(lái)源的，都視為一個(gè)品牌，兩者幾乎旗鼓相當(dāng)。

在實(shí)現(xiàn)高等級(jí)自動(dòng)駕駛諸多技術(shù)路徑當(dāng)中，端到端值得嘗試，很可能不是唯一路徑，甚至不是最優(yōu)路徑。

我們?cè)岬竭^(guò)，“兩段式”的優(yōu)勢(shì)在于，人工接口信息可觀測(cè)，但感知輸出的白盒狀態(tài)，就意味著信息過(guò)濾后存在損失。

而“一段式”和“兩段式”相比，理論上前者信息丟失少，上限應(yīng)該比較高。但鑒于“一段式”可解釋性更差，到底突破什么下限，大家都沒(méi)底。因此所有廠商，不管做的是“一段式”還是“兩段式”，無(wú)一例外都設(shè)置了兜底規(guī)則（rule-based）。這也意味著“兩段式”同樣存在不可解釋的部分。

數(shù)據(jù)需求決定部署規(guī)模

雖然“端到端”的參數(shù)量只相當(dāng)于中模型，在一枚英偉達(dá)Orin-X上就能跑起來(lái)，貌似消耗算力不多。但背后必須有大數(shù)據(jù)和大模型支持。數(shù)據(jù)的門(mén)檻不僅是對(duì)絕對(duì)數(shù)量的要求，對(duì)于數(shù)據(jù)的分布和多樣性要求也極高，而且還要求是100%的好數(shù)據(jù)（合規(guī)最優(yōu)操作）。

主機(jī)廠自研，和由供應(yīng)商推動(dòng)，最大的區(qū)別不是技術(shù)本身，而是數(shù)據(jù)獲取能力。后者理論上能獲得多個(gè)品牌的產(chǎn)品數(shù)據(jù)，數(shù)據(jù)量更大。

有人表示，“一段式”端到端應(yīng)部署在20萬(wàn)元以上中高端車(chē)上。現(xiàn)在沒(méi)有跡象表明，“一段式”就比”兩段式“需要更大的車(chē)端算力和更強(qiáng)的感知能力（比如有無(wú)激光雷達(dá)）。將端到端能力作為入門(mén)級(jí)和高配區(qū)分的一個(gè)維度，有可操作性，但同時(shí)其演化規(guī)律又要求更大的數(shù)據(jù)量，即盡量擴(kuò)大部署規(guī)模。兩者要求背離。

何去何從，需要掂量一下。當(dāng)前端到端的競(jìng)爭(zhēng)主軸并非現(xiàn)實(shí)商業(yè)利益，而是盡快迭代起來(lái)，形成明顯的使用價(jià)值。由此可見(jiàn)，即便實(shí)地部署了“一段式”端到端，迭代到可用、好用，群眾滿意的地步，也需要長(zhǎng)期投入。

算力大比拼

不可否認(rèn)，“一段式”模型，設(shè)計(jì)源頭就比“兩段式”難度更大，調(diào)參回路更長(zhǎng)、落地流程也更艱難一些。

圖：AlexNet多層神經(jīng)網(wǎng)絡(luò)

設(shè)計(jì)一個(gè)可工作的神經(jīng)網(wǎng)絡(luò)（模型）需要很多人類(lèi)智力資源，訓(xùn)練它更復(fù)雜。神經(jīng)網(wǎng)絡(luò)的每一個(gè)子網(wǎng)絡(luò)，都涉及歸一化、偏差、非線性輸出，校正回歸等一堆問(wèn)題。而且多層網(wǎng)絡(luò)讓這些問(wèn)題的復(fù)雜度上升了維度。

訓(xùn)練促使模型從出生到成熟，訓(xùn)練的本質(zhì)是定量分析。如果用5000萬(wàn)個(gè)clips（視頻片段）訓(xùn)練模型20輪，相當(dāng)于分析1B個(gè)clips。訓(xùn)練中心算力直接決定系統(tǒng)迭代速度。

圖：訓(xùn)練系統(tǒng)

而算力還用于推理計(jì)算，可以將其理解為自動(dòng)化標(biāo)注。以前人工標(biāo)注的速度慢，但精度高。推理計(jì)算的標(biāo)注精度低，需要反復(fù)刷標(biāo)提高精度。特斯拉計(jì)劃將后臺(tái)算力推高至100E（1EFOLPs=10^18次浮點(diǎn)計(jì)算）。根據(jù)ChatGPT的經(jīng)驗(yàn)，訓(xùn)練量達(dá)到一定量級(jí)，也許會(huì)出現(xiàn)大語(yǔ)言模型的“涌現(xiàn)”現(xiàn)象。是否需要與其相當(dāng)?shù)目褚八懔Γ魏稳硕紱](méi)有經(jīng)驗(yàn)，也沒(méi)人宣稱(chēng)，多少后臺(tái)算力就夠了，包括特斯拉自己。

只要想自己搭建訓(xùn)練和推理系統(tǒng)，買(mǎi)算力卡的費(fèi)用絕對(duì)省不了。考慮到英偉達(dá)H100，甚至閹割版H800/A800，包括同樣能力的AMD，對(duì)中國(guó)禁售措施越來(lái)越嚴(yán)格，各家如何搭建算力，是一個(gè)很有意思的問(wèn)題。

4月份的時(shí)候，特斯拉在Q1財(cái)報(bào)會(huì)議上透露將AI訓(xùn)練集群擴(kuò)展到35000塊H100算力卡。而同期國(guó)內(nèi)能買(mǎi)到1000塊算力卡的廠家，都是鳳毛麟角。

華為的昇騰910B（按照性能最強(qiáng)的910 Pro B），性能據(jù)說(shuō)和H100的算力差不多。但最緊要的并非峰值算力，而是FLOP利用率。英偉達(dá)的算力卡FLOP利用率出了名的低（FP8模型35%左右）。而昇騰系列的問(wèn)題是產(chǎn)能供不應(yīng)求，一塊昇騰910 ProB一度炒至28萬(wàn)元。

假設(shè)國(guó)內(nèi)企業(yè)的模型設(shè)計(jì)水平，與特斯拉相當(dāng)，而昇騰系列算力卡優(yōu)于英偉達(dá)一倍以上（這一點(diǎn)存疑），那么想達(dá)到特斯拉FSD V12的水平，至少也需要1萬(wàn)塊以上910B算力卡。

江湖傳聞，910B的2023年出貨量大概50萬(wàn)塊，這些卡被誰(shuí)買(mǎi)走了，缺乏信源。基于眾所周知的原因，華為對(duì)高制程芯片的生產(chǎn)細(xì)節(jié)諱莫如深。

圖：算力中心

種種跡象表明，能夠攢起萬(wàn)塊以上算力卡的主機(jī)廠和供應(yīng)商，國(guó)內(nèi)一只手就能數(shù)過(guò)來(lái)。遠(yuǎn)不像場(chǎng)面上人手一份“端到端”那么花團(tuán)錦簇……

如果這是一場(chǎng)看不見(jiàn)上限的軍備競(jìng)賽，不考慮成本的話顯然越高越好。顯然，國(guó)內(nèi)廠商中間，華為確定有能力跟一下，其他主機(jī)廠和模型供應(yīng)商都需要買(mǎi)卡。如果訓(xùn)練相當(dāng)于挖礦，英偉達(dá)被定位“賣(mài)鏟子的”，那么華為一面賣(mài)鏟子，一面也自己動(dòng)手挖礦，因此獲得了額外的算力供應(yīng)鏈優(yōu)勢(shì)。

算力比拼正在演化為各家投資力度競(jìng)賽，沒(méi)有取巧之機(jī)。

插混香餑餑，跨國(guó)車(chē)企必須得與自己和解時(shí)髦的“端到端”智駕，走到哪一步了馬斯克兜售的夢(mèng)，圓在中國(guó)