2022年1024 XPENG TECH DAY

智能駕駛方面，小鵬汽車不僅分享了行業(yè)首個量產(chǎn)落地的城市高等級輔助駕駛功能“城市NGP”的技術(shù)思考，并基于全新一代XNGP智能駕駛輔助系統(tǒng)，展示其在軟件架構(gòu)、AI及數(shù)據(jù)體系方面的競爭優(yōu)勢，保持在智能駕駛下半場的持續(xù)領(lǐng)先。智能交互方面，全新一代的語音架構(gòu)及基礎(chǔ)語音能力自研讓小鵬語音的體驗進(jìn)一步加強(qiáng)，在全場景語音2.0的強(qiáng)大功能加持下，我們打造行業(yè)首個全車全時的語音交互系統(tǒng)，并通過智能場景功能，讓用戶“自定義自己的智能汽車”變成可能。在智能機(jī)器人及飛行汽車領(lǐng)域，小鵬也分享了技術(shù)演進(jìn)的最新思考與成果，智能機(jī)器人與飛行汽車都有了全新一代的造型及功能設(shè)計，飛行汽車已完成試驗樣機(jī)的首次試飛。小鵬汽車期望通過持續(xù)的探索及思考，建立技術(shù)競爭優(yōu)勢，持續(xù)推動行業(yè)向前，并通過智能科技的量產(chǎn)落地，真正為用戶帶來更美好出行生活。 

以體系與效率優(yōu)勢 保持智能駕駛下半場的持續(xù)領(lǐng)先

9月17日起，城市NGP智能導(dǎo)航輔助駕駛開始在廣州試點(diǎn)，陸續(xù)推送給P5用戶，全棧自研的小鵬汽車成為首個讓高階智能輔助駕駛在城市場景中量產(chǎn)落地的汽車品牌。小鵬汽車自動駕駛副總裁吳新宙博士首先再次強(qiáng)調(diào)了城市場景對智能駕駛發(fā)展的意義。數(shù)據(jù)表明，用戶的總用車?yán)锍讨校�城市道路占比高達(dá) 71%，換成用車時長維度則可以占到90%。同時，每天僅有25%的用戶出行會通過高速，而城市道路則是100%。因此，城市場景不僅是用戶的高頻場景，也是剛需。為此，小鵬汽車的城市NGP及LCC增強(qiáng)版采用全新技術(shù)架構(gòu)，包括定位、感知、預(yù)測、規(guī)控等方面能力全面提升。相比高速NGP，城市NGP的代碼量提升至6倍，感知模型數(shù)量提升至4倍，預(yù)測/規(guī)劃/控制相關(guān)代碼量提升至88倍。當(dāng)前，城市NGP周用戶滲透率達(dá)到84%，里程滲透率達(dá)到63%，通行效率可接近人類司機(jī)的90%，每百公里被動接管僅0.6次�？梢哉f，城市NGP已成為用戶日常通勤的最佳幫手。

小鵬智能輔助駕駛未來發(fā)展

城市場景的落地，只是智能輔助駕駛下半場的開局，小鵬G9搭載的XNGP智能輔助駕駛系統(tǒng)，則具備全場景智能輔助駕駛能力，也是實現(xiàn)無人駕駛前，輔助駕駛的終極技術(shù)形態(tài)。它不僅無需高精地圖，全國各個城市和路段都能用，同時可覆蓋日常通勤，無縫連接高速、城市、地下停車場等各種場景，體驗不中斷。在高速、城快接近零接管，安全性、道路博弈能力和通行效率上，XNGP的體驗也將超過大部分司機(jī)。為了實現(xiàn)這一能力，小鵬汽車大幅升級硬件，采用508 TOP算力+雙激光雷達(dá)+800W像素高清攝像頭，并應(yīng)用能力再次提升的軟件架構(gòu)以及全閉環(huán)、自成長的AI和數(shù)據(jù)體系。

XNGP智能輔助駕駛系統(tǒng)

其中，XNet 深度視覺神經(jīng)網(wǎng)絡(luò)將多個攝像頭采集的數(shù)據(jù)，進(jìn)行多幀時序前融合，輸出BEV視角下的動態(tài)目標(biāo)物的4D信息（如車輛，二輪車等的大小、距離、位置及速度、行為預(yù)測等），以及靜態(tài)目標(biāo)物的3D信息（如車道線和馬路邊緣的位置）。XNet和小鵬汽車的第一代視覺感知架構(gòu)相比，利用神經(jīng)網(wǎng)絡(luò)替代了繁復(fù)的手寫邏輯，實現(xiàn)了端到端數(shù)據(jù)驅(qū)動算法迭代。當(dāng)然，出色技術(shù)的背后，是龐大的數(shù)據(jù)采集、標(biāo)注、訓(xùn)練和間距的部署工作。以50萬段訓(xùn)練數(shù)據(jù)Clip，10億個物體為例，采用全人工標(biāo)注需2000人年，以2400TFLOPS算力的服務(wù)器進(jìn)行單機(jī)訓(xùn)練需276天。同時，若將其不經(jīng)優(yōu)化的部署至車端，僅此單一網(wǎng)絡(luò)就可占用單個Orin-X算力的122%。因此，小鵬汽車打造全自動標(biāo)注系統(tǒng)，標(biāo)注效率是人工標(biāo)注的45000倍，即XNet所需2000人年的標(biāo)注量，現(xiàn)在僅需16.7天即可完成。此外，小鵬汽車在烏蘭察布建成中國最大的自動駕駛智算中心“扶搖”，基于阿里云智能計算平臺，算力可達(dá)600PFLOPS（每秒浮點(diǎn)運(yùn)算60億億次）。在“扶搖”的加持下，自動駕駛模型訓(xùn)練效率提升602倍。與2400TOPS算力的服務(wù)器進(jìn)行單機(jī)訓(xùn)練相比，80機(jī)并行訓(xùn)練可將訓(xùn)練時長由276天縮短至11小時。同時，自城市NGP研發(fā)積累的極致工程化能力，讓動態(tài)XNet 所需的122%的Orin-X 算力，優(yōu)化后僅需 9%。極致的工程部署能力，是 XNet 上線的關(guān)鍵，更是未來持續(xù)迭代的關(guān)鍵。

XNet 深度視覺神經(jīng)網(wǎng)絡(luò)

此外，數(shù)據(jù)閉環(huán)的基礎(chǔ)能力由采集、標(biāo)注、訓(xùn)練、部署四大核心能力組成，效率是AI體系的重要KPI之一。因此，小鵬汽車通過定向采集的方式，可以通過海量車輛，收集到大量的訓(xùn)練數(shù)據(jù)，在自動標(biāo)注體系和扶搖的幫助下，快速進(jìn)行修正。即使是一些非常少見的極端場景，也可以通過仿真系統(tǒng)，生成大量的同類型數(shù)據(jù)，進(jìn)行快速迭代訓(xùn)練。通過定向采集和仿真結(jié)合，一年內(nèi)累計解決1000個以上Corner case（極限場景），高速NGP事故率降低95%。同時，每一行代碼改動，都需要經(jīng)過行駛 5 千萬公里的仿真里程，5000+ 個核心模擬場景，挑戰(zhàn) 17000+ 個專項模擬場景，確保功能迭代的可靠及正向演進(jìn)。

小鵬汽車自動駕駛副總裁 吳新宙發(fā)表演講

在軟硬件體系帶來的高效率下，XNGP系統(tǒng)將在2023年上半年之前，除G9 Max版本車型交付即有高速NGP、記憶泊車、LCC、智能泊車等功能外，在全國范圍（所有無圖城市）開放識別紅綠燈并直行通過路口能力，城市NGP覆蓋廣州、深圳、上海三座城市。2023年下半年，大在部分無圖城市開放變道、超車、左右轉(zhuǎn)能力（部分高等級能力可用范圍將根據(jù)用戶數(shù)量和測試進(jìn)度分階段開放），2024年完成全場景打通，實現(xiàn)從車位到車位的智能導(dǎo)航輔助駕駛能力。此外，針對XPILOT版本的用戶，小鵬的智能輔助駕駛能力也將持續(xù)更新。2022年起至2023年上半年，小鵬G9 Pro版在交付即有高速NGP、記憶泊車、LCC、智能泊車等功能基礎(chǔ)上，開放紅綠燈識別、車道級導(dǎo)航功能，該功能在小鵬P5 P版、E版，小鵬P7 E版、智尊版也將開放，小鵬P5 P版的城市NGP將新增開放城市深圳、上海，城市NGP與LCC增強(qiáng)版性能也將進(jìn)一步提升。2023年下半年，小鵬G9 Pro版的高速 NGP、VPA、LCC 將迎性能提升，以上所有版本車型的高速NGP功能也將在該周期內(nèi)迎來在限速調(diào)節(jié)、脫手檢測方面的策略優(yōu)化。（注：城市NGP城市開放進(jìn)度以O(shè)TA計劃為準(zhǔn)，部分功能升級需具備相應(yīng)軟件及服務(wù)）

XNGP發(fā)布計劃

XPILOT發(fā)布計劃

近日，小鵬汽車還完成了一項創(chuàng)舉，成功通過了自動駕駛封閉場地測試，并取得了智能網(wǎng)聯(lián)汽車道路測試許可，G9成為行業(yè)首款在不改變硬件的情況下，僅通過自動駕駛軟件升級強(qiáng)化而順利通過自動駕駛封閉場地測試并獲得“智能網(wǎng)聯(lián)汽車道路測試”許可的在售量產(chǎn)車。未來小鵬汽車將通過自動駕駛和高等級輔助駕駛雙線并行，實現(xiàn)數(shù)據(jù)和能力的反哺閉環(huán)。

語音交互更快更自由 小鵬汽車升級自研語音架構(gòu)并首個進(jìn)行語音基礎(chǔ)能力自研

在2020年的1024上，小鵬汽車行業(yè)首創(chuàng)“全場景語音”功能技驚四座，成為行業(yè)首個全語音交互系統(tǒng)。2年過去，小鵬依然未滿足，以不斷精進(jìn)的探索精神推動改善用戶體驗，讓交互更快更自由，帶來行業(yè)首個全車全時的語音交互功能——全場景語音2.0。它首次將MIMO多音區(qū)技術(shù)應(yīng)用在車載語音系統(tǒng)，實現(xiàn)小P全程待命，車內(nèi)多位乘員無需喚醒，多人同時人車語音對話；G9還高效利用本地算力實現(xiàn)了本地對話，在弱網(wǎng)、無網(wǎng)條件下也可穩(wěn)定控制600多項車輛功能；此外，依托完善的語音端云一體化方案，G9的語音響應(yīng)速度達(dá)到毫秒級，更貼近人性化溝通，說到即做到。

全場景語音2.0

為了實現(xiàn)這一點(diǎn)，小鵬汽車不僅升級了語音交互自研技術(shù)架構(gòu)，擁有功能領(lǐng)先、架構(gòu)靈活、性能提升等特點(diǎn)，并可解決半自研內(nèi)外對接復(fù)雜、周期長、進(jìn)度和關(guān)鍵技術(shù)風(fēng)險不可控等研發(fā)和項目風(fēng)險，并進(jìn)一步提高隱私安全級別，保障用戶利益。該技術(shù)架構(gòu)可以實現(xiàn)全車多路語音流并行處理，支持處理四音區(qū)并發(fā)、端云一體、實時流式識別理解、并行指令等各種功能交織的語音交互請求；并可全車多路上下文理解，同時既維護(hù)單人的對話和上下文管理，也兼容多人的對話和上下文理解。全時多路拒識在噪聲請求量數(shù)倍于單路拒識噪聲量的情況下，仍能保證準(zhǔn)確率不下降，并解決多發(fā)聲通道、四路語音交互之間的回復(fù)沖突，讓用戶都能實現(xiàn)語音交互時也有較好的反饋。

行業(yè)首家車企自研語音基礎(chǔ)能力

除此以外，小鵬汽車也作為行業(yè)首家自研語音基礎(chǔ)能力的車企，包含聲學(xué)信號處理、本地語音識別、在線語音識別及語音喚醒等方面。這將幫助小鵬解決新一代系統(tǒng)下，對信號處理的更高要求，解決更高復(fù)雜度的語音問題，使性能指標(biāo)大幅提升，如回聲消除最多可支持30dB，識別準(zhǔn)確率高達(dá)97%，錯誤率相比非基礎(chǔ)能力自研，標(biāo)準(zhǔn)安靜場景降低7.7%、中英文混合場景降低7.16%、噪聲環(huán)境場景降低36.79%、帶地域口音場景降低33.84%。同時，自研語音基礎(chǔ)能力也讓語音的CPU使用率降低65.9%，內(nèi)存使用降低42.3%，優(yōu)化工程能力的同時實現(xiàn)快速迭代、用戶隱私安全保障，降低數(shù)據(jù)成本。

未來，小鵬汽車的語音能力還將向著更接近人人交互的方向進(jìn)化：讓語音助手可聽音、察言、觀色，實現(xiàn)無拘無束的輕松交流；可理解、學(xué)習(xí)、推理、記憶，做更懂用戶的鵬友；可感知、共情、表達(dá)，成為陪伴用戶全場景的可靠伙伴。

智能場景 讓用戶可以“自定義你的智能汽車”

智能場景是小鵬智能座艙的全新自定義能力，讓用戶擁有專屬的座艙功能服務(wù)。它將行業(yè)領(lǐng)先的整車能力原子開放，創(chuàng)造無限用車場景，讓用戶可以定義自己的智能汽車。同時，率先研發(fā)的遠(yuǎn)程智能場景，用戶不在車上時，車輛依然可根據(jù)自身感知能力，繼續(xù)執(zhí)行用戶定義的場景；多個場景之間，可根據(jù)上一個場景的執(zhí)行結(jié)果，并主動判斷串聯(lián)后續(xù)場景，滿足用戶整個行程周期的全時需求；普通用戶可直接選擇自己喜歡的場景，一鍵開啟全程服務(wù)，并支持社區(qū)、社媒傳播和跨車型繼承；極客用戶更可深度參與共創(chuàng)，一鍵串聯(lián)開拓想象。

智能場景功能示意 

智能機(jī)器人  “小白龍”又長大了一歲

小鵬鵬行的智能機(jī)器人自2021年首次亮相后，在這一年里持續(xù)探索，迎來了新一代原型機(jī)。相比上一代，現(xiàn)款機(jī)型造型更加科幻，擁有未來風(fēng)格：頭部集成了AR投影，是對機(jī)器人交互形式的探索；在足底使用與高端跑鞋相同的“EVA超臨界發(fā)泡”及耐磨橡膠，提供優(yōu)秀的緩震、靜音與耐磨性能；頸部等區(qū)域使用新型彈性織物與液態(tài)硅膠材料，解決多自由度運(yùn)動的設(shè)計問題，且耐沖擊、耐刮擦。

小鵬鵬行新一代智能機(jī)器人

除造型升級外，“小白龍”也迎來架構(gòu)升級。身體及腿部的“骨骼”借鑒了汽車領(lǐng)域的輕量化設(shè)計思路，相比初代更堅固，且更輕盈；新一代AI計算單元與智能汽車同代算力，大幅提升機(jī)器人智能潛力；同時，它還配備了高保真音響系統(tǒng)帶來細(xì)膩語音及影音娛樂享受；當(dāng)然，最顯著的一點(diǎn)是，升級后的“小白龍” 搭載6軸協(xié)作機(jī)械臂，與四足底盤協(xié)作，可執(zhí)行家居環(huán)境下的多種功能，大幅提升了機(jī)器人與物理環(huán)境交互的潛力。

在小鵬生態(tài)體系下，智能機(jī)器人在研發(fā)過程中，動力系統(tǒng)、自動駕駛、人機(jī)交互、研發(fā)體系等技術(shù)方面從智能汽車研發(fā)領(lǐng)域得到了有效賦能，包括動力系統(tǒng)、自動駕駛、人機(jī)交互及AI能力等。AI能力將成為驅(qū)動機(jī)器人智能與汽車智能技術(shù)發(fā)展的“引擎”，數(shù)據(jù)將成為驅(qū)動技術(shù)發(fā)展的“能源”，汽車智能與機(jī)器人智能將互相“成就彼此”。當(dāng)前，機(jī)器人最佳形態(tài)的探討仍在進(jìn)行中，未來鵬行的產(chǎn)品可能會具備全新形態(tài)。

小鵬匯天 全球首個電動垂起飛行汽車

2021年1024科技日，何小鵬帶來了飛行汽車的概念車型。一年過去，在原有基礎(chǔ)上，小鵬匯天也在不斷以量產(chǎn)為目標(biāo)推進(jìn)。本屆1024，小鵬匯天發(fā)布了飛行汽車最新構(gòu)型，具備機(jī)臂折疊收納系統(tǒng)，可進(jìn)行陸行和飛行模式的切換。在機(jī)臂折疊收納狀態(tài)，它的尺寸和常規(guī)汽車相當(dāng)，能夠在開放道路自由行駛；可進(jìn)行陸行和飛行模式的切換。在法規(guī)、環(huán)境允許的條件下垂直起降，飛行跨越擁堵、障礙、河流等，滿足人們短距離低空出行的需求。

小鵬匯天飛行汽車陸行/飛行狀態(tài)

相比去年的概念車型，最新設(shè)計由橫列雙旋翼構(gòu)型優(yōu)化為分布式多旋翼構(gòu)型�，F(xiàn)方案機(jī)臂及槳葉更短，飛行狀態(tài)總長、總寬更小，對起降場地的尺寸限制更小，飛行的可通過性更好，使用更便捷。同時，取消槳葉折疊、周期變距槳轂，折疊收納方式更簡單。整體系統(tǒng)設(shè)計復(fù)雜度降低，安全及可靠性提升的同時獲得更低噪聲水平。此外，它具備飛控的容錯控制功能和動力的雙備份，即使發(fā)生單點(diǎn)失效，依然能夠保持可控飛行和安全著陸，當(dāng)前小鵬匯天已成功在前期探索產(chǎn)品上進(jìn)行多次單電機(jī)失效試驗。

小鵬匯天飛行汽車試驗樣車成功首飛

當(dāng)前，小鵬匯天飛行汽車已完成試驗樣車的成功首飛，這是全球首個真正的電動垂起飛行汽車。要讓約2噸重的試驗樣車成功起飛，需要克服飛行控制、動力等多方面困難，業(yè)內(nèi)無成熟經(jīng)驗可以借鑒，小鵬匯天通過全棧自研達(dá)成挑戰(zhàn)，讓飛行汽車的研發(fā)有了實質(zhì)性的突破。

飛行汽車還將創(chuàng)新性的采用小鵬匯天自研的飛行汽車駕駛操控系統(tǒng)。它耦合飛機(jī)與汽車操控的各項功能，滿足飛行和陸行兩種方式的駕駛需求。陸行狀態(tài)下，與現(xiàn)有汽車的駕駛方式基本一致；飛行狀態(tài)下，通過方向盤與右側(cè)檔桿的配合，輕松實現(xiàn)飛行汽車在空中的前進(jìn)、后退、轉(zhuǎn)彎，以及上升、懸停、下降等。該操作系統(tǒng)的出現(xiàn)，真正讓“路空一體”變成了可能。當(dāng)前，飛行汽車的研發(fā)進(jìn)度正在有序進(jìn)行中，小鵬匯天也呼吁國家能夠加快飛行汽車行業(yè)相關(guān)政策和標(biāo)準(zhǔn)的落地，讓飛行汽車的發(fā)展擁有配套政策的支持。

小鵬汽車董事長 CEO 何小鵬在1024發(fā)布會分享探索成果

從預(yù)見，到不止遇見，中間的挑戰(zhàn)與探索往往是最容易被忽略的部分。小鵬汽車作為“未來出行探索者”，從不會只為了噱頭打造產(chǎn)品，而是希望通過一個個新科技的量產(chǎn)，真正為用戶創(chuàng)造更美好的出行生活，讓用戶小時候?qū)ξ磥淼哪切╊A(yù)見，在不久的將來也可以“不止遇見”。而在此過程中，小鵬汽車也將持續(xù)打造技術(shù)競爭優(yōu)勢，在不斷的探索和對未來的創(chuàng)造中，保持持續(xù)的領(lǐng)先優(yōu)勢。1024小鵬汽車科技日，明年見！