強(qiáng)視覺(jué)感知與高算力SoC解決方案 助力車企高階自動(dòng)駕駛落地

2024-03-30 20:42:17·  來(lái)源:黑芝麻智能
 

隨著視覺(jué)算法的演進(jìn),BEV(Bird's-Eye-View Perception)感知算法成為主機(jī)廠和自動(dòng)駕駛公司發(fā)力城市場(chǎng)景的核心技術(shù)之一,BEV 感知通過(guò)從高處統(tǒng)觀全局的“上帝視角”,融合車載多視角攝像頭的輸入,然后變成鳥(niǎo)瞰圖的檢測(cè)輸出,有效地避免了誤差疊加;BEV 方案還支持「時(shí)序融合」,包含空間的融合和時(shí)間的融合,可以讓系統(tǒng)感知結(jié)果更穩(wěn)定,使得車輛對(duì)于道路情況的感知更加準(zhǔn)確,讓自動(dòng)駕駛更安全。


黑芝麻智能開(kāi)發(fā)多重亮點(diǎn)的BEV算法技術(shù)


BEV感知算法能夠更好地融合多傳感器的特征,提高感知和預(yù)測(cè)的準(zhǔn)確率,在一定程度上可以大幅提升自動(dòng)駕駛體驗(yàn)。在白天城市擁堵道路、快速路、雨天道路,和夜晚城市道路、城市隧道路段,以及彎道路段等常見(jiàn)城市場(chǎng)景中,黑芝麻智能自研視覺(jué)BEV感知算法能對(duì)場(chǎng)景中的車道線、車輛、行人、彎道車道線的擬合都有更完整、更穩(wěn)定、更精度的識(shí)別效果。



目前,億咖通科技基于黑芝麻智能華山二號(hào)A1000芯片打造的億咖通 · 天穹® Pro 智能駕駛計(jì)算平臺(tái),雙方共享視覺(jué)感知算法、工具鏈,其算力支撐2個(gè)前后攝像頭、4個(gè)側(cè)向攝像頭、4個(gè)環(huán)視攝像頭、5個(gè)毫米波雷達(dá)、12個(gè)超聲波雷達(dá)傳感器。



通過(guò)視覺(jué)與感知融合,應(yīng)對(duì)多種使用場(chǎng)景:當(dāng)車輛處于巡航狀態(tài)下,若前方出現(xiàn)彎道且車速較快時(shí),采用多視角視覺(jué)融合與毫米波雷達(dá)配合,實(shí)現(xiàn)“眼觀六路”的感知能力,自動(dòng)校正車道,如“老司機(jī)”般提前降低車速,讓過(guò)彎更舒適、更流暢;面對(duì)高速高架匝道擁堵加塞時(shí),采用多視角視覺(jué)感知融合以及超聲波雷達(dá)配合,可以精確捕捉相鄰車道上cut-in車輛入侵位置并預(yù)測(cè)變道趨勢(shì),從而提前規(guī)劃車輛行駛姿態(tài)與軌跡,避免磕頭或急剎的不良體驗(yàn);車輛進(jìn)出隧道時(shí),ISP的HDR性能和視覺(jué)感知功能,能夠?qū)饩€的突然明暗變化進(jìn)行有效處理識(shí)別,保證車輛在精準(zhǔn)進(jìn)出隧道,通行無(wú)憂。




自研高性能芯片為BEV模型落地提供支持


黑芝麻智能已將開(kāi)發(fā)的BEV模型部署到旗下華山二號(hào)A1000芯片上。A1000芯片擁有58TOPS(INT8)的強(qiáng)大算力,有矩陣運(yùn)行單元和非線性運(yùn)算單元,再加上DSP,能夠滿足行業(yè)需求。與此同時(shí),BEV模型還可部署在黑芝麻智能最新發(fā)布的武當(dāng)系列C1236及C1296芯片上。該系列是業(yè)內(nèi)首個(gè)智能汽車跨域計(jì)算芯片平臺(tái)。



作為中國(guó)本土智能汽車芯片的供應(yīng)商之一,黑芝麻智能擁有感知算法量產(chǎn)化能力,能夠提供客戶算法定制服務(wù),支持第三方算法移植,多種算法交付方式等靈活的商業(yè)模式。黑芝麻智能視覺(jué)感知算法能夠加速并且助力一些中短期內(nèi)智能領(lǐng)航和泊車應(yīng)用產(chǎn)品快速落地,從而加速整個(gè)芯片的量產(chǎn)及應(yīng)用。