
近日,中國(guo)汽車工程學會(hui)向(xiang)斑(ban)馬智(zhi)行(xing)頒發(fa)先進(jin)科技(ji)成果(guo)評價,經專家組嚴格評審,認定斑(ban)馬智(zhi)行(xing)"基于(yu)多模態(tai)端(duan)側大模型的智(zhi)能座艙技(ji)術(Auto Omni)研發(fa)及應(ying)用",總(zong)體技(ji)術達(da)到(dao)國(guo)內先進(jin)水平,標志著我國(guo)智(zhi)能座艙AI技(ji)術實現重大突破。
中國汽車工程(cheng)學會(hui)是國內(nei)最具(ju)權威(wei)的汽車技(ji)術學術組織,先(xian)進科技(ji)成果(guo)評(ping)(ping)價不(bu)僅針(zhen)對(dui)技(ji)術先(xian)進性,更(geng)要(yao)看實際市場應用價值,被視為行業發展風(feng)向標(biao)。本次成果(guo)評(ping)(ping)價由學會(hui)組織行業專家組成評(ping)(ping)審組,對(dui)斑(ban)馬智行Auto Omni技(ji)術進行了全面、嚴格的評(ping)(ping)審。
專(zhuan)家組一致(zhi)認為(wei),該(gai)項(xiang)目"系統(tong)復雜、技術(shu)(shu)難度大、創新性強,開發(fa)了多(duo)模態端側智能核(he)心技術(shu)(shu),知識產權(quan)自主可控,總體技術(shu)(shu)達到(dao)國內(nei)先進水平(ping)",推動智能座(zuo)艙從“語音助手(shou)”升級為(wei)“類(lei)人(ren)伙伴”。
評(ping)審專家(jia)組(zu)的評(ping)價意見指(zhi)出,Auto Omni技(ji)(ji)術的突破性(xing)創(chuang)新(xin),主(zhu)要體(ti)現(xian)在三大核(he)心技(ji)(ji)術領域:
第(di)一,構建了(le)基于端側多(duo)(duo)模(mo)態大模(mo)型的車載智(zhi)(zhi)能架構體系。基于通義千問Qwen-Omni,面(mian)向(xiang)智(zhi)(zhi)艙(cang)場景打造、深度定制(zhi)的車載多(duo)(duo)模(mo)態大模(mo)型技術(shu),創新(xin)性地(di)提(ti)出"原始多(duo)(duo)模(mo)態數(shu)據直接輸(shu)入、統一理解、決策(ce)行動"的端側閉環開發(fa)方法(fa),使多(duo)(duo)模(mo)態輸(shu)入下的任務響應準(zhun)確率提(ti)升(sheng)30%,端側首字響應速(su)度提(ti)升(sheng)50%,真正實現了(le)"即問即答(da)"的流暢體驗。
第(di)二(er),首次(ci)提(ti)出"短期-長期-時(shi)空(kong)"三級(ji)全時(shi)空(kong)記憶(yi)建模方法(fa)。 該方法(fa)發明了基于上(shang)下(xia)文免喚(huan)醒+場(chang)景免喚(huan)醒的(de)(de)主(zhu)動(dong)服務(wu)估計算法(fa),創(chuang)建了基于端側向量數據庫的(de)(de)記憶(yi)精準管控技術(shu),研制了隱私保護下(xia)的(de)(de)個性(xing)化成(cheng)長記憶(yi)系統,實現了"喚(huan)醒依賴+無狀態(tai)服務(wu)",使座(zuo)艙交(jiao)互自然(ran)度提(ti)升40%,用戶可享受更(geng)貼(tie)心、更(geng)智能的(de)(de)主(zhu)動(dong)服務(wu)體驗。
第三(san),突破車載(zai)服(fu)(fu)務(wu)生態(tai)協同(tong)技術。 項目提出基于"場景引擎"的平臺(tai)級(ji)Agent控制策略(lve),實(shi)現了車載(zai)OS、全模態(tai)大(da)模型(xing)與云端實(shi)時調(diao)節與無(wu)縫銜接,使(shi)車載(zai)服(fu)(fu)務(wu)場景覆蓋廣(guang)度提升50%,銜接成功率提升35%,為用戶(hu)帶來更加連(lian)貫、自然的智能交互體驗。
在2025云棲大會上(shang),斑馬(ma)智行聯合(he)通義(yi)及高通全球首發全模(mo)態端側大模(mo)型(xing)實(shi)車(che)方(fang)案Auto Omni,助(zhu)力(li)車(che)企客戶(hu)實(shi)現智能座艙體驗從指令式(shi)交互到(dao)Always On主(zhu)動服(fu)務的(de)代際提升。
“圣誕想和(he)幾家朋友去美(mei)國(guo)”,“看(kan)到車里落東西提(ti)(ti)醒我(wo)一下”,“播一首我(wo)們幾個人都(dou)喜(xi)歡的歌”,“你覺得(de)我(wo)和(he)副駕誰(shui)好(hao)看(kan)?”……在即(ji)時型場(chang)(chang)景、條件型場(chang)(chang)景、規(gui)劃型場(chang)(chang)景、閑聊型場(chang)(chang)景,類人AI助手都(dou)能(neng)提(ti)(ti)供主動(dong)服務、隱私無憂(you)的產品(pin)體驗,90%的場(chang)(chang)景斷網可用。
斑馬智行CTO司羅表(biao)示,傳(chuan)統(tong)智能(neng)座(zuo)艙存在交互模式單一、服務(wu)被動(dong)滯后、依賴云端推理(li)、無個性化(hua)記憶等(deng)痛點,遠遠未能(neng)滿(man)足用戶(hu)需求(qiu)。
Auto Omni從“技術突破-場景落(luo)地-生態構建(jian)”三層開展系統性(xing)研發,針對傳統座艙智能系統的(de)四大(da)瓶頸(jing),斑(ban)馬(ma)智行(xing)創新性(xing)地提(ti)出"端到端全(quan)模態架構+端側原生智能體(ti)+全(quan)時空(kong)記憶系統"的(de)技術路線,實現智能座艙交互體(ti)驗的(de)代際提(ti)升(sheng)。
斑(ban)馬智(zhi)(zhi)行Auto Omni自(zi)2025年9月發(fa)布之后(hou),3個(ge)月定點(dian)了4家國內頭部自(zi)主(zhu)車(che)企。2026年將實現量產落地。斑(ban)馬智(zhi)(zhi)行將以此次技術突(tu)破為新起點(dian),持續加大在智(zhi)(zhi)能座艙領(ling)域的(de)(de)研(yan)發(fa)投入(ru),加速Auto Omni技術在更多車(che)型(xing)上的(de)(de)規(gui)模(mo)化應用,進(jin)一步提升用戶體驗。(斑(ban)馬智(zhi)(zhi)行)

