斑馬魚腦科學融合自動駕駛 馬斯克中國門徒新進展 不挑車也不挑芯片
端到端進入Next Level了?
特斯拉帶火了端到端,行業爭先轉向,拋棄規則驅動,擁抱數據驅動。
甚至有人直呼,數據驅動的端到端,就是自動駕駛的終局。
然而就在最近,由當年特斯拉Autopilot骨干創辦的Nullmax,公開提出了一種新的范式:
智能驅動。
將腦科學與自動駕駛結合,嘗試探索端到端的下一個階段。
這一方向也正在吸引知名主機廠和供應商,投入研究,比如理想和地平線。
現在的局勢,玄之又玄的端到端,變得更加妙不可言了。
端到端進入Next Level了?
Nullmax近日推出了最新技術方案:Nullmax Intelligence (以下簡稱NI),基于端到端的架構,采用了多模態大模型和安全類腦。
首先來看,多模態大模型,參數量十億級別。
作為源流特斯拉的初創企業,Nullmax同樣是純視覺的信徒,方案沒有使用激光雷達。
但其NI模型輸入的又不止是視覺信息,還包括了聲音,文本等。
輸出端則包括駕駛動作,可視化結果以及場景描述。
模型輸出結果后,Nullmax還會用兩級仲裁機制,評判自車是否會與其他交通參與者發生碰撞。
一級仲裁是行業的常見手段,在此基礎上,Nullmax還引入二級仲裁“安全類腦”。
所謂“安全類腦”,是一個參數十萬量級的神經網絡,規模對應斑馬魚的神經元數。
斑馬魚就是腦科學界的“小白鼠”,大腦結構和人腦高度相似,而且可透視,用熒光分子進行處理后,能觀測到神經元活動和魚運動之間的關系,相關成果《Internal state dynamics shape brainwide activity and foraging behaviour》已在《Nature》發表。
共同第一作者李孟博士,是哈佛大學的博士后研究員,現在巖思類腦研究院任職。
Nullmax正是和其合作,將腦科學與自動駕駛結合.
在行業變革之際,理想和地平線也正和Nullmax一道,嘗試探索這一全新領域。
理想聯合清華大學,正嘗試將人類的快慢思考,融入自動駕駛,形成系統1和系統2。
地平線智駕方案Super Drive的決策規劃核心“交互式博弈算法”,讓車子仿佛擁有了一顆“大腦”,背后的思維動因也是人的“慢思考”。
不過Nullmax的“類腦”模型,是直接參考斑馬魚腦結構設計,與兩家的靈感來源不同,因此Nullmax在數據驅動的端到端基礎上,提出“智能驅動”。
邁向新階段,“智能驅動”也存在著數據和訓練兩大瓶頸。
Nullmax認為,高質量的數據仍然很關鍵。但是高質量的數據,可遇不可求,因此Nullmax建立了數據平臺,既包括了真實采集的數據,也有視頻生成的虛擬數據,兩者結合加快算法迭代。
高質量的數據之外,還有一個瓶頸就是訓練。
包括如何去輸入數據,按照什么樣的順序,以及debug模型和調參。
以上就是Nullmax上層技術的最新進展,將在明年初落地。
支持Nullmax商業化落地的關鍵技術,是其自研中間件平臺:
不挑車,不挑芯片,不挑攝像頭。
Nullmax的商業化落地
Nullmax的商業化落地,目前主要依托1個平臺和3個產品方案。
1個平臺,即中間件平臺MaxOS,其將多模態輸入token化,解耦軟件算法、域控和芯片,盡可能地抽象軟件層,支持不同算力平臺,適配任意傳感器,比如車企定制的攝像頭,甚至能適應不同位置。
MaxOS為Nullmax適配不同車型、不同硬件配置,從而落地產品提供了可能。
目前其產品根據算力需求和實現能力,可分為以下三種:
1V2T,一個攝像頭,加上一顆德州儀器的2TOPS算力芯片,實現基礎的L2級輔助駕駛。5V/6V8T,5/6個攝像頭,利用8TOPS算力,實現高速NOA和記憶泊車,且泊車過程可檢測障礙物。11V,實現L2+,包括高速NOA和自主代客泊車。
Nullmax介紹稱,未來智能驅動的方案,將以小于100TOPS的稀疏算力,實現全場景NOA。
總結Nullmax的商業化落地,展現出了兩大特點:
高靈活度和高性價比。
Nullmax為什么會選擇打造這樣的產品?
Nullmax認為,行業利用不同算力規模的芯片,形成了各種各樣的方案,但還沒有一家做出能夠適配不同芯片,覆蓋2TOPS-2000TOPS算力區間的方案。
市場一片空白,這就是Nullmax的機會,也是產品具有高靈活度的原因。
另一方面,盡管行業目前高階智駕卷的很熱鬧,但熱鬧都是少部分人的,只有高端車型才能享有高階智駕,而更廣闊的性價比車型,也存在著高階智駕的需求,因此,Nullmax做出了一套高性價比的方案。
高靈活度和高性價比的方案,已為Nullmax贏得了多家知名合作伙伴,包括頭部主機廠比亞迪、奇瑞、上汽和福特等,以及知名Tier 1大陸和德賽西威等。
創立八年,Nullmax從硅谷出發,是如何一步步打通商業模式,贏得伙伴信任的?
Nullmax的創立與發展
Nullmax創始人、CEO兼CTO徐雷,本科畢業于中國科學技術大學計算機科學專業,后在美國紐約州立大學法羅分校獲得計算機科學博士學位。
畢業后,徐雷曾在高通工作過三年,后加盟特斯拉,成為特斯拉Autopilot團隊核心成員,工作直接匯報給馬斯克。
在特斯拉期間,徐雷從零開始領導搭建Tesla Vision深度學習網絡,并用其成功取代了第一代產品中Mobleye的視覺系統,后來Model X搭載的方案,就是徐雷領導研發的。
2016年,徐雷離開特斯拉,與同事特斯拉供應鏈及產品高級經理宋新雨,在硅谷聯合成立了Nullmax,是國內最早獲得加州自動駕駛路測牌照的公司之一。
2017年初,Nullmax總部落地上海。
兩年后,Nullmax很快發布了L3級自動駕駛方案,Max 1.0,可實現高速代駕和自主泊車,直接開上了上海中環。


不過就在此次發布會后,Nullmax罕有對外發聲,直到四年以后。
2023年冬,當Nullmax再度回歸到聚光燈下時,已經實現產品交付上車,并且獲得了7.8億元的新融資,累計吸金超10.66億元。
成立八年,起于硅谷,興于上海的Nullmax,在沉寂中悄然壯大,跑通了商業模式。
并且技術方面,持續探索,在行業爭相轉向之際,再次召開技術發布會發聲,提出了新的范式。
不是簡單的去用模型取代原有的規則模塊,而是進行了一些有意思的探索,比如將多模態大模型上車,腦科學引入自動駕駛。
在發布會后,徐雷也發出感慨,“只有不斷地探索,不可能一下子找到最優解。”
探索的道路上,行業競爭不可避免。
誰是給行業造成競爭壓力最大的玩家?
毫無疑問,正是徐雷曾在硅谷給他打工過的那個男人。
面對競爭,在談到如何看待特斯拉的FSD入華時,徐雷做了很有意思的類比,展現了灑脫與期待:
高水平的比賽,才能培養出高水平的球員。
引進高水平的方案,行業才會變得更強。
本站所有文章、數據、圖片均來自互聯網,一切版權均歸源網站或源作者所有。
如果侵犯了你的權益請來信告知我們刪除。郵箱:business@qudong.com













