在本屆CES展會(huì)上,地平線發(fā)布名為Matrix的最新自動(dòng)駕駛計(jì)算平臺(tái),該平臺(tái)基于地平線BPU2.0處理器架構(gòu)(伯努利架構(gòu)),能夠?yàn)長(zhǎng)3和L4級(jí)別的自動(dòng)駕駛提供高性能的感知系統(tǒng),目前已向世界頂級(jí)自動(dòng)駕駛廠商大規(guī)模供貨。
除此之外,憑借依托Matrix邊緣計(jì)算能力,地平線還展出了NavNet眾包高精地圖采集與定位方案,以及地平線激光雷達(dá)感知方案。
Matrix自動(dòng)駕駛計(jì)算平臺(tái):高性能、低功耗、低延時(shí)
地平線Matrix自動(dòng)駕駛計(jì)算平臺(tái)
Matrix平臺(tái)利用地平線AI加速IP最大化了嵌入式AI計(jì)算性能,可支持激光雷達(dá)、毫米波雷達(dá)的接入和多傳感器融合。以視覺感知能力為例,該平臺(tái)能夠基于稀疏化和定點(diǎn)化神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)8類不同類型物體的目標(biāo)檢測(cè)和多達(dá)25類像素級(jí)語義分割。
同時(shí),Matrix平臺(tái)結(jié)合有助于預(yù)測(cè)和深度估計(jì)的三維車輛檢測(cè),能夠更好地理解復(fù)雜場(chǎng)景,可輕松應(yīng)對(duì)高度遮擋,且需快速響應(yīng)場(chǎng)景下的自動(dòng)駕駛。
而在保證高性能的前提下,其可在31W的低功耗下運(yùn)行,無需水冷系統(tǒng),滿足了高性能和低功耗的行業(yè)應(yīng)用級(jí)需求,非常適合嵌入式自動(dòng)駕駛的應(yīng)用和產(chǎn)品化。依托地平線自主研發(fā)的工具鏈,開發(fā)者可以基于Matrix平臺(tái)部署神經(jīng)網(wǎng)絡(luò)模型,實(shí)現(xiàn)開發(fā)、驗(yàn)證、優(yōu)化和部署。
兩款配套方案,實(shí)現(xiàn)地圖采集與實(shí)時(shí)建圖
依托Matrix的邊緣計(jì)算能力,地平線開發(fā)出NavNet眾包高精地圖采集與定位方案,以及激光雷達(dá)感知方案。這些方案在本屆CES上均是首次公開亮相,并搭載到實(shí)車,為試乘觀眾現(xiàn)場(chǎng)展示NavNet僅通過單目攝像頭視覺感知即可在車端實(shí)現(xiàn)的地圖采集與實(shí)時(shí)建圖能力,以及激光雷達(dá)感知方案的多線360度激光雷達(dá)點(diǎn)云3D檢測(cè)能力。
地平線NavNet是地平線基于Matrix開發(fā)的眾包高精地圖采集與定位解決方案。該方案將點(diǎn)云建圖過程全部在邊緣進(jìn)行,輸出建立好的局部三維地圖,進(jìn)而用以與已有高精地圖進(jìn)行匹配獲取定位,同時(shí)可在無地圖區(qū)域進(jìn)行自動(dòng)建圖。
當(dāng)前,地平線NavNet針對(duì)眾包場(chǎng)景,利用深度學(xué)習(xí)和SLAM技術(shù)進(jìn)行道路場(chǎng)景的語義三維重建,支持16大類地圖元素的重建、識(shí)別、矢量化。并且在僅使用單目攝像頭的情況下,便能夠?qū)崿F(xiàn)重建結(jié)果與全局地圖的匹配定位和眾包建圖,并根據(jù)實(shí)時(shí)重建的局部地圖與云端高精地圖進(jìn)行關(guān)聯(lián)優(yōu)化,持續(xù)提升高精地圖的質(zhì)量。
而地平線Matrix激光雷達(dá)感知方案采用全卷積深度神經(jīng)網(wǎng)絡(luò)對(duì)柵格化后的點(diǎn)云特征,進(jìn)行車輛,行人等障礙物的實(shí)時(shí)檢測(cè),具備高性能,低時(shí)延,低功耗的特點(diǎn),且可基于地平線工具鏈進(jìn)行自主開發(fā)。
除上述兩項(xiàng)全新方案外,同樣基于Matrix平臺(tái)的地平線Matrix前向視覺感知方案、地平線360度視覺感知方案, 以及基于地平線征程處理器的地平線紅外熱成像避障方案等也在本次CES上展出。
XForce計(jì)算平臺(tái):密集人群時(shí)空結(jié)構(gòu)化方案
除了關(guān)于自動(dòng)駕駛方面的新品與方案外,地平線還展出了基于XForce計(jì)算平臺(tái)的密集人群時(shí)空結(jié)構(gòu)化方案、跨鏡多目標(biāo)軌跡動(dòng)線方案以及安防視頻結(jié)構(gòu)化方案等多個(gè)嵌入式人工智能解決方案。
地平線密集人群時(shí)空結(jié)構(gòu)化方案可以在極低的功耗下實(shí)現(xiàn)大規(guī)模人臉和人體的抓拍識(shí)別、人體行為分析、視頻結(jié)構(gòu)化等。地平線跨鏡多目標(biāo)軌跡動(dòng)線方案融合業(yè)界領(lǐng)先的人體檢測(cè)、人體Skeleton、人體單例分割、單目標(biāo)跟蹤、人體ReID及多目標(biāo)跟蹤等視覺感知技術(shù),能夠?qū)崿F(xiàn)對(duì)多目標(biāo)、跨區(qū)域的跟蹤。
地平線安防視頻結(jié)構(gòu)化方案對(duì)視頻每一幀中的行人、機(jī)動(dòng)車、非機(jī)動(dòng)車等信息進(jìn)行檢測(cè)、跟蹤、抓取和識(shí)別,將非結(jié)構(gòu)化數(shù)據(jù)結(jié)構(gòu)化,以進(jìn)行視頻數(shù)據(jù)的存儲(chǔ)、分析及后續(xù)應(yīng)用。
地平線基于XForce打造的系列解決方案可應(yīng)用于商業(yè)、城市安全、交通等多個(gè)場(chǎng)景,如商業(yè)中的客流統(tǒng)計(jì)、自動(dòng)建檔、消費(fèi)者動(dòng)線、場(chǎng)景熱力圖、消費(fèi)者行為分析等;在交通、城市安全等多類城市公共場(chǎng)景中也可以實(shí)現(xiàn)高效率的人臉、人頭、人體檢測(cè),以及多人的人體骨骼點(diǎn)和單例分割。
結(jié)合“端+云”,則更可實(shí)現(xiàn)商業(yè)場(chǎng)景中的智能化識(shí)別、管理、服務(wù);以及城市安全、交通等場(chǎng)景下的人臉管控、人員分析,車輛分析等,從而實(shí)現(xiàn)各類事件的及時(shí)發(fā)現(xiàn),甚至是事先預(yù)測(cè)。