全球領先的無線連接和智能傳感技術授權廠商CEVA發(fā)布了業(yè)界首款高性能傳感器集線器DSP架構SensPro?旨在環(huán)境感知設備中處理各種傳感器處理和融合工作負載。
SensPro專用處理器可以滿足行業(yè)對各種傳感器高效處理的需求,智能手機、機器人、汽車、增強現(xiàn)實/虛擬現(xiàn)實耳機、語音助手、智能家居設備以及正在通過工業(yè)4.0等舉措進行創(chuàng)新的新興工業(yè)和醫(yī)療應用都需要這些傳感器。這些傳感器包括攝像機、雷達、激光雷達、飛行時間(ToF)、麥克風和慣性測量單元(IMU)。它們可以從圖像、聲音、射頻和運動中生成各種類型和比特率的數(shù)據(jù),這些數(shù)據(jù)可用于創(chuàng)建完整的3D上下文感知設備。
為了以最高的性能功耗比處理復雜的多傳感器處理情況,SensPro的新架構結合了高動態(tài)范圍信號處理、點云創(chuàng)建和深度神經網絡(DNN)訓練的要求,并支持高性能單精度和半精度浮點數(shù)學函數(shù)。它還為語音、圖像、DNN推理處理和同時定位和映射(SLAM)提供大量8位和16位并行處理能力。SensPro集成了廣泛使用的ceva-bx 標量DSP,提供了從單傳感器系統(tǒng)設計到多傳感器上下文感知設計的無縫遷移路徑。
YoleDveloppement (Yole)傳感技術部的技術和市場分析師DimitriosDamianos說:“各種傳感器在智能系統(tǒng)中的使用不斷增加,為環(huán)境和環(huán)境感知提供了更精確的建模。傳感器變得越來越智能,目標不是獲得更多數(shù)據(jù),而是獲得更高質量的數(shù)據(jù),特別是在環(huán)境/環(huán)境感知的情況下,例如,使用環(huán)境傳感器中樞(智能家居/辦公室),該中樞結合了麥克風、壓力、濕度、慣性、溫度和氣體傳感器,以及ADAS/AV中的情境感知,其中許多傳感器(雷達、LID)
Yole的計算和軟件技術及市場分析師YohannTschudi說:“挑戰(zhàn)在于處理和融合來自不同類型傳感器的不同類型的數(shù)據(jù)。通過結合標量和矢量處理、浮點和定點數(shù)學運算以及先進的微架構,SensPro為系統(tǒng)和SoC設計人員提供了統(tǒng)一的處理器架構,以滿足任何上下文感知多傳感器設備的需求。”
SensPro使用高度可配置的8路VLIW架構,因此易于調整以適應廣泛的應用。它采用先進的微體系結構,結合了標量和矢量處理器,并集成了先進的多級流水線。7nm進程節(jié)點運行頻率為1.6GHz,SensPro集成ceva-bx2 標量處理器控制代碼執(zhí)行,性能達到4.3 CoreMark/MHz。采用寬SIMD可擴展處理器架構進行并行處理,最多可配置1024個8x8 MAC,256個16x16 MAC,專用8 x2 二進制神經網絡支持,64個單精度和128個半精度浮點MAC。SensPro在88網絡推理、二進制神經網絡推理和浮點運算中的性能分別高達3 TOPS、20 TOPS和400 GFLOPS。SensPro的其他主要功能包括提供每秒400GB帶寬的內存架構、4路指令緩存、2路矢量數(shù)據(jù)緩存、直接內存分配以及用于減輕數(shù)據(jù)交換中DSP負載的隊列和緩沖管理器。
為了加快系統(tǒng)設計,SensPro自帶了一套先進的軟件和開發(fā)工具。包括LLVM C/C編譯器、基于eclipse的集成開發(fā)環(huán)境(IDE)、OpenVX API、OpenCL軟件庫、CEVA深度神經網絡(CDNN)圖形編譯器帶CDNN-邀請API加入定制AI引擎、CEVA-CV圖像功能、CEVA-SLAM軟件開發(fā)工具包和可視化程序庫, ClearVox降噪功能、WhisPro語音識別、MotionEngine傳感器融合和SenslinQ軟件架構。
最初,SensPro DSP將提供三種配置,每種配置包括一個CEVA-BX2 標量處理器和各種矢量單元,它們被配置為實現(xiàn)最佳用例處理:
sp 250單矢量單元,帶256個8x8媒體訪問控制,針對以圖像、視覺和聲音為中心的應用
sp 500 f單矢量單元,512個88媒體訪問控制和64個單精度浮點媒體訪問控制,目標是以SLAM為中心的應用
sp 1000具有1024個雙矢量單元,由88媒體訪問控制和二進制網絡支持,面向以人工智能為中心的應用