5月20日,小鵬汽車舉辦AI DAY,正式開啟AI智駕時代,并將全量推送AI“天璣系統(tǒng)”,何為AI“天璣系統(tǒng)”?小鵬汽車稱其為“首個將AI技術(shù)同時應(yīng)用于智能座艙與智能駕駛的操作系統(tǒng)”。下面我們就來了解一下這套系統(tǒng)的功能亮點。
幾天前,我們提前體驗了內(nèi)測版本的車型,先說下感受,整體測試下來,AI天璣系統(tǒng)最大的亮點變化是AI代駕的推出,那么,AI代駕是什么呢?
AI代駕是用戶在手動駕駛時,系統(tǒng)主動記憶學(xué)習(xí)用戶的日常駕駛路線,駕駛完成后24小時內(nèi)即可生成定制路線,下一次行駛該路段時,車輛可以按照記憶保存的路線智能輔助駕駛,類似于“真人代駕”,可用于上下班通勤的智能代駕,而且還可以在不能開啟XNGP的路段使用該功能。覆蓋范圍:不限城市范圍、不限道路屬性,不依賴XNGP開城節(jié)奏,覆蓋全國城市、縣城、鄉(xiāng)鎮(zhèn)的國道、省道、縣道及多屬性復(fù)合路線,并且單個用戶可存儲10條記憶路線,最長可達100km,最細可覆蓋小路,最難可搞定掉頭。
AI代駕的原理是什么?簡單來說,就是你自己在城市道路上,開一段日常的路線,比如上下班、去商場等,讓汽車自己去記憶這段路線,通過將車載傳感器的感知數(shù)據(jù),與云端導(dǎo)航地圖的數(shù)據(jù)相比較,結(jié)合車輛自身的智能駕駛算法,去學(xué)習(xí)這一段路線的駕駛,最后形成點對點的導(dǎo)航輔助駕駛,其實這項功能之前是被一些智能駕駛做得比較好的廠家用在了停車場的代客泊車上,比如華為系的智界S7,兩者大致原理是類似的,用戶先自己把車停在停車場,開一次到車位上,車輛在這個過程中對停車場進行掃描建模,相當(dāng)于有了停車場的高精地圖,這樣停一次后,下一次車輛就能自己在這個停車場里,開到指定或者鄰近的車位上。如今同樣的技術(shù)路線,從停車場擴展到了日常通勤道路上,其實對于智能駕駛的軟硬件需求,是一致的,換句話說只要這個廠商能夠做好,不依賴于高精地圖的城市NOA,那么從技術(shù)能力上來看,它就已經(jīng)具備了做好AI代駕模式的條件。
值得一提的是,這個功能不同廠家有不同的叫法,小鵬汽車叫AI代駕,理想汽車叫通勤NOA,大疆車載叫記憶行車等。將來在別的品牌那里或許還會有其他的名字,不過可以預(yù)測的是這項功能可能成為智能駕駛發(fā)展進程中普及度、用戶感知、用戶認(rèn)知的重要拐點。
為什么這么說呢?原因就是汽車廠商花了極高的成本研發(fā)出的智能駕駛技術(shù),卻沒有太多人愿意為其買單,這樣基本上沒法持續(xù)下去了。而且目前很多汽車廠商都在去高精地圖化,因為高精地圖價格太貴更新太慢,城市領(lǐng)航輔助駕駛不會走依賴高精地圖的技術(shù)路線,但即便不依賴高精地圖城市領(lǐng)航輔助駕駛還是要靠廠商一個城市一個城市的去做適配測試,然后才能開通。但是AI代駕模式的出現(xiàn)有可能改變這一現(xiàn)狀,因為AI代駕模式只要具備了基本的軟硬件,不需要等待高精地圖的更新,也不需要等待廠商的適配與測試,只需要通過用戶的手動訓(xùn)練,就可以做日常通勤路線的城市道路記憶領(lǐng)航輔助駕駛,而且這個功能特別適合從小區(qū)到單位地下停車場。另外,這樣做還有一個好處,就是當(dāng)越來越多的用戶都訓(xùn)練出了自己熟悉的路線,相當(dāng)于汽車廠商一下子擁有了大量的數(shù)據(jù)積累,如果再能把不同用戶之間的訓(xùn)練數(shù)據(jù)打通共享,整個城市的領(lǐng)航輔助駕駛進程也會提速,這對于用戶來說不管在任何地方都覺得車上裝的智能駕駛硬件有用了,最重要的是也能深刻感知到城市領(lǐng)航輔助駕駛的功能了,體驗好了,自然愿意為其買單。
這樣來看,在國內(nèi)汽車廠商里蔚小理、華為系、百度系在能力上基本上都已經(jīng)到位了,剩下的就是要不斷靠數(shù)據(jù)積累、迭代算法、完善模型驗證可用性與穩(wěn)定性,到了2024年判斷智能駕駛是否領(lǐng)先的標(biāo)準(zhǔn),可用可靠的AI代駕或者說通勤模式也是一項重要的考核目標(biāo)了。
AI代駕模式的出現(xiàn),不只是智能駕駛技術(shù)的進步,更是智能駕駛一種智駕模式的創(chuàng)新,它能夠提升高階智能駕駛硬件的利用率,讓用戶愿意為這些硬件買單,真正把高高在上的智能駕駛變得大眾化,提高用戶感知度,提升普及率。
▍什么是AI天璣系統(tǒng)?
AI天璣系統(tǒng)是全?接?了AI?模型的全新AI?載操作系統(tǒng),也是?次將AI技術(shù)全?應(yīng)用于智能座艙與智能駕駛的操作系統(tǒng)。
適用車型:小鵬X9/G6/G9/P7i Pro和Max版本
推送時間:5月20日
軟件版本:XOS5.1.0
核心能力:全?接?AI?模型后系統(tǒng)感知和理解能力?幅提升,AI天璣系統(tǒng)能實現(xiàn)讓用戶擁有專屬的?載AI助理,同時智駕感知和理解能力賦能座艙,達到無論?駕或智駕都能擁有更安全舒心的駕乘體驗。
▍智能駕駛方面
小鵬汽車應(yīng)用端到端大模型,智駕能力將提升2倍,從手寫代碼到通過端到端大模型的深度應(yīng)用,用無限的數(shù)據(jù)輸入,生成無限的規(guī)則,來應(yīng)對無限的場景?;诙说蕉舜竽P?,小鵬汽車的XNGP高階智能駕駛輔助系統(tǒng),將完成感知大模型升級和規(guī)控大模型上車。具體來看,小鵬汽車將通過行業(yè)首個量產(chǎn)的2K純視覺占用網(wǎng)絡(luò)大模型上車,用超過200萬個高精度網(wǎng)格重構(gòu)世界,能清晰識別動、靜態(tài)障礙物的每一個細節(jié)。此外,小鵬汽車在行業(yè)首個引入基于神經(jīng)網(wǎng)絡(luò)的規(guī)劃控制大模型XPlanner,具備強推理的特點。
在人機共駕方面,小鵬汽車的AI車載操作系統(tǒng),無論智駕還是人駕,都能讓用戶擁有更安全舒心的駕乘體驗。小鵬汽車的AI保鏢通過升級SR感知能力,能夠?qū)鼍案兄秶鷶U大至1.8個標(biāo)準(zhǔn)足球場大小,可精準(zhǔn)識別50+個目標(biāo)物。通過哨兵模式,可做到24小時在線,提前預(yù)警潛在風(fēng)險。
在AI智駕方面,小鵬汽車出行助理AI司機的視覺感知能力和規(guī)控能力得到了很大的提升,通過AI代駕、AI泊車,為用戶提供更便捷的智能出行體驗。其中,AI代駕功能基于強大的自主學(xué)習(xí)能力,能夠在用戶手動駕駛時精準(zhǔn)記憶行駛路徑。僅需一次學(xué)習(xí),系統(tǒng)便可生成定制化的駕駛路線,為用戶提供覆蓋全程的智能輔助駕駛,每個用戶最多可選擇10條路線,每條路線最長100km。真正做到了智駕和人駕開得一樣好,全國都能用,全程都好用。
▍智能座艙方面
除了智能駕駛應(yīng)用了AI進行輔助,小鵬汽車的全新智能座艙系統(tǒng)也應(yīng)用了AI天璣系統(tǒng)?;贏I大模型的深度應(yīng)用,小鵬汽車的AI小P,將具備更高級別的理解能力,并能通過個性化組合100多項座艙功能,實現(xiàn)精準(zhǔn)預(yù)測、順暢溝通及準(zhǔn)確執(zhí)行用戶需求。
智能座艙方面天璣系統(tǒng),可以對導(dǎo)航地圖+應(yīng)用的分屏顯示、自定義Dock欄、全場景車感SR界面、升級了AI小P等功能。功能如下:
1、分屏多任務(wù)
針對XOS天璣系統(tǒng)實現(xiàn)了導(dǎo)航地圖+N種應(yīng)用的分屏顯示。用戶可以通過自定義設(shè)置,實現(xiàn)了導(dǎo)航地圖+SR畫面、導(dǎo)航地圖+車輛設(shè)置界面、導(dǎo)航地圖+視頻界面、導(dǎo)航地圖+音樂界面等分屏任務(wù)界面。真正做到了多任務(wù)執(zhí)行互不干擾。
2、自定義Dock欄
通過對中控屏幕下方的Dock自定義,用戶可以將常用功能進行排列組合,最多可支持8種常用功能的自定義排列。真正做到高頻需求,一鍵觸達。
3、全場景車感SR
在XOS天璣系統(tǒng)的SR界面中,做到了行泊一體的全場景覆蓋。同時,該界面還可以進行全向風(fēng)險的預(yù)警,例如通過紅綠燈路口、開門預(yù)警、變道方向信息、無死角通過窄路等場景。
4、AI小P
天璣系統(tǒng)的小P形象也進行了全新的升級,小P擁有了更多動態(tài),可以更好的融入到不同場景下。小P的喚醒,無需加“你好”兩個字,對話更自然。
▍升級核心內(nèi)容
AI小P,使AI小P更擬人更懂人,包括形象/聲?/動作/神態(tài)擬人化以及上百個動作表情,任務(wù)接收自然語言化具備推理能力,表達能力自然語言化使語音交互通俗自然。
AI司機,覆蓋行車及泊車的所有出行場景,點到點的智能駕駛,包括駕駛技巧嫻熟駕齡每季度持續(xù)提升、全國可用全程可用不限城市不限路線。
AI保鏢,智駕能力賦能手動駕駛場景,包括感知識別范圍?類別多,感知范圍有1.8個標(biāo)準(zhǔn)足球場大小,可識別含井蓋、懸掛路牌等50+目標(biāo)物。窄路激活全景影像,支持小窗和全屏可選轉(zhuǎn)向激活后側(cè)影像,告別變道盲區(qū)。
小P畫畫&小P百科,接入AI大模型,實時聯(lián)網(wǎng)提供生活服務(wù),小P可完成用車管家、百科老師、神筆小P及生活助理般的擬?陪伴體驗。例如:小P畫一張風(fēng)景畫。
小P看世界,小P感知理解車外世界,基于強大的感知和理解能力,小P可以感知并理解車外的真實物理世界,協(xié)助完成用車過程中的指令需求。例如:前?這個是什么車,貴嗎?
AI代駕,AI學(xué)習(xí)?遍記憶點到點可用的智能駕駛,基于AI?主學(xué)習(xí)能力,在用戶手動駕駛時,系統(tǒng)主動記憶用戶的駕駛路徑,24h內(nèi)即可生成定制路線,可使用覆蓋整條路線的智能輔助駕駛。覆蓋范圍:不限城市范圍、不限道路屬性,不依賴XNGP開城節(jié)奏,覆蓋全國城市、縣城、鄉(xiāng)鎮(zhèn)的國道、省道、縣道及多屬性復(fù)合路線。單個用戶可存儲10條記憶路線,最長可達100km,最細可覆蓋小路,最難可搞定掉頭。
AI泊車,泊車過程中選定車位后,下車關(guān)門,無需手機遙控,車輛自動泊入車位,手機App可隨時暫停和繼續(xù)完成?輛泊入。
XNGP:覆蓋高速及城區(qū)的高階智能輔助駕駛,基于普通地圖發(fā)起導(dǎo)航并激活功能后,?輛可完成A點到B點的智能導(dǎo)航輔助駕駛,并可實現(xiàn)順利通過紅綠燈、完成左右轉(zhuǎn)、變道、合流通?等典型交通場景,以及?道內(nèi)側(cè)偏主動避讓貨?等?型?輛、?天夜晚安全降速、根據(jù)綠燈倒計時和綠燈閃爍路?提前降速、鬼探頭場景預(yù)防性減速及合流??側(cè)向來?主動鳴笛等。
▍AI天璣系統(tǒng)技術(shù)亮點
一、AI大模型深度應(yīng)用
技術(shù)路線:側(cè)重于推理??內(nèi)容生成的路線,讓?P擁有更高級的理解能力,通過推理來識別和預(yù)測用戶需求。
技術(shù)亮點:
行業(yè)首個座艙交互全流量使用LLM進行用戶滿足的算法架構(gòu)
1.超過100+的座艙功能控制編程接?API,可結(jié)合?型語言模型LLM進?隨意組合使用。
2.每次語?交互均使用LLM進?語義理解,可支持超長上下文理解,以及多?區(qū)交互等。
3.深度結(jié)合LLM的推理能力,可完成多項用戶需求推理及執(zhí)?,包括座艙內(nèi)空間位置推理,用戶模糊意圖理解等。
4.在保障實時性的用戶體驗基礎(chǔ)上,可?持?模型參數(shù)規(guī)模7B到30B模型的切換,進?步提升整體的座艙用戶交互體驗。
多模態(tài)及定制化能力的深度融合(+智譜AI)
1.借助LLM的能力,與智譜AI合作實現(xiàn)圖文生成,故事生成等多模態(tài)AIGC相關(guān)能力滿足。
2.深度結(jié)合小P約定等定制化能力,單模型統(tǒng)?所有?任務(wù),更精準(zhǔn)拆解與推理用戶需求。
二、XNet深度視覺感知神經(jīng)?絡(luò)2.0
技術(shù)說明:基于BEV+Transformer架構(gòu),將多個攝像頭采集的數(shù)據(jù),進?多幀時序前融合,輸出BEV視角下的動態(tài)?標(biāo)物的4D信息(如車輛,二輪車等的大小、距離、位置及速度、行為預(yù)測等),以及靜態(tài)目標(biāo)物的3D信息(如車道線和馬路邊緣的位置),利用神經(jīng)網(wǎng)絡(luò)實現(xiàn)端到端數(shù)據(jù)驅(qū)動算法迭代,不依賴高精地圖,使之具備時空理解的感知能力。
技術(shù)亮點:
1.XNet2.0時空理解能力增強:融合動態(tài)、靜態(tài)和占用?絡(luò),三?合?,感知范圍提升200%,感知類別增加11種。
2.行業(yè)?個運用?模型具備時空理解能力的感知:可讀懂路牌等?字信息,理解不同城市特點交通元素,具備時間觀念。
3.行業(yè)?個量產(chǎn)的2K純視覺占用?絡(luò):裸眼3D,像激光雷達?樣強?。用超過200萬個?格重構(gòu)世界,對現(xiàn)實世界中的可通?空間進?3D高真實度還原,清晰識別動靜態(tài)障礙物的每?個細節(jié)。?格精度為業(yè)內(nèi)最高精度的2倍以上,看世界的清晰度猶如2K電影與普清電影的區(qū)別。
三、XPlanner規(guī)控大模型上車
技術(shù)說明:XPlanner是行業(yè)?次引?基于神經(jīng)?絡(luò)的規(guī)劃控制?模型,率領(lǐng)?業(yè)?次進?感知+規(guī)控的?動駕駛?模型2.0時代。從圖像數(shù)據(jù)的感知輸?,到?駛路徑的規(guī)劃控制,實現(xiàn)??類手寫規(guī)則的代碼更智能、泛化能力更強、智駕系統(tǒng)開發(fā)效率更高,讓智能駕駛體驗更接近?類駕駛員的駕駛過程,進?步加速高階智能導(dǎo)航輔助駕駛的大范圍普及。
技術(shù)亮點:
1.海量數(shù)據(jù)時刻訓(xùn)練:通過海量優(yōu)秀?類駕駛數(shù)據(jù)投喂,實現(xiàn)數(shù)據(jù)驅(qū)動,不斷提升XNGP智駕規(guī)控能力,針對XNGP?駛路徑和應(yīng)變策略做針對性訓(xùn)練。
2.駕駛策略高度擬人:基于海量?類駕駛員訓(xùn)練數(shù)據(jù)的?持和驅(qū)動,實現(xiàn)路徑規(guī)劃策略更擬人,尤其在路?左右轉(zhuǎn)時,行駛策略與成熟?類駕駛員高度接近。
3.模型能力不斷進化:模型上車后可通過影?模式運?,實時采集脫敏數(shù)據(jù),持續(xù)迭代進化,提升規(guī)控體能力,為用戶提供安全、舒適的智能駕駛體驗。
來源:第一電動網(wǎng)
作者:張芳超
本文地址:http://www.medic-health.cn/carnews/yongche/231259
文中圖片源自互聯(lián)網(wǎng),如有侵權(quán)請聯(lián)系admin#d1ev.com(#替換成@)刪除。