瑞薩電子(Renesas Electronics)擴展具有AI功能的RZ/V系列微處理器(MPU),推出支援AI的新元件可處理來自多個攝影機的影像資料,為視覺AI應用提供更高水準的高精度影像辨識。新元件採用兩個64位元Arm Cortex-A53核心,能以最高1GHz的工作頻率提供高性能運算。RZ/V2MA特有的低功耗DRP-AI(動態可重構處理器)加速器,可以1 TOPS/W(每秒萬億次運算,每瓦)等級的性能處理視覺AI。
|
新的RZ/V2MA MPU具有用於影像處理的OpenCV加速器,並提供基於TVM的深度學習編譯器。 |
RZ/V2MA提供高速介面,例如乙太網、USB和PCI Express,允許影像從多個外部攝影機輸入。除了DRP-AI加速器之外,RZ/V2MA還包括一個OpenCV加速器,可同時進行規則式(rule-based)影像處理。這些功能為機器視覺產品(例如配備AI的閘道、視訊伺服器、門禁系統、POS終端和機械手臂)帶來了高度準確的影像辨識能力。
新的RZ/V2MA提供一套完整的開發工具來輔助視覺AI系統設計。除了現有的DRP-AI轉譯器,新元件還增加了基於開源深度學習編譯器Apache TVM技術的DRP-AI TVM。雖然DRP AI轉譯器旨在將AI模型轉換為DRP-AI可執行文件,但DRP-AI TVM編譯器讓DRP-AI加速器與CPU一起工作,使DRP-AI能夠轉換和產生比以往更多的AI模型。在第一階段,瑞薩將支援ONNX和PyTorch AI模型,並計畫在未來支援Tensorflow。
瑞薩企業基礎設施業務部副總裁Shigeki Kato表示:「嵌入式系統開發人員在實現機器學習的過程中,面臨的一項挑戰是跟上不斷發展的最新AI模型。DRP-AI TVM工具就是我們為設計人員提供擴展AI框架和AI模型的一個選項,這些框架和AI模型可以轉換為可執行格式,使他們能夠運用新的AI模型為嵌入式裝置帶來最新的影像辨識功能。」
橫河電機全資子公司amnimo Inc.總經理Chiharu Nakabayashi表示:「瑞薩的RZ/V系列非常適合嵌入式裝置,因為在運行AI時具有極低的功耗和發熱,因此不需要風扇或散熱器。有了這樣的元件,我們有信心開發出可以安裝在任何地方的強大影像人工智慧閘道。」
產品特色
● 兩個64位元Arm Cortex-A53核心,最高工作頻率為1 GHz
● AI加速器DRP-AI(1 TOPS/W級),在執行TinyYoloV3程式時達到52 fps(每秒幀數)
● 用於規則式影像處理的OpenCV加速器
● 乙太網、USB和PCI Express介面,可從外部攝影機輸入影像
● 視訊編解碼器(H.265和H.264)
● DRP-AI TVM工具,用於轉換基於TVM技術的AI模型。首先支援ONNX和PyTorch格式。
● 高速記憶體介面包括LPDDR4(3200Mbps)、USB 3.1(高達5Gbps)和PCI Express(2通道)
● 提供15mm方形BGA封裝