【導讀】視覺AI也稱為計算機視覺,旨在訓練計算機復制人類視覺系統,讓數字設備(如人臉檢測器、QR碼掃描儀)能夠像人類一樣識別和處理圖像、視頻中的物體。視覺AI可以主動識別不安全因素,實現AI智能值守,節約人力成本,滿足不同應用場景的安全管理需求。
瑞薩電子推出視覺AI網關解決方案,基于AI對象檢測與識別平臺,使用多個攝像頭收集數據并獲得有效的無線數據傳輸。方案采用了具有豐富外設功能的RZ/V2M AI-MPU和優化的電源IC、VersaClock時鐘發生器,以及用于Wi-Fi、藍牙和LTE的通信模塊,不僅具有靈活的連接選項和優化的電源系統,而且有助于加速強大AI網關設備的開發。該解決方案具有高性能和低功耗的特性,同時,集成的邊緣AI功能提高了此方案的網關應用價值。
器件詳解
視覺AI網關解決方案使用了內置視覺AI加速器的、能夠處理多個攝像頭圖像數據的全新RZ/V2MA器件,進一步擴充了RZ/V系列微處理器(MPU)產品線,并為視覺AI應用帶來了更高水平的高精度圖像識別能力。
這款器件集成了兩個64位Arm? Cortex? -A53內核,能夠1GHz最高工作頻率實現高計算性能;專有的低功耗DRP-AI(動態可重構處理器)加速器可以1TOPS/W(每秒百萬次操作/瓦)級的性能處理圖像數據。
RZ/V2MA器件配備以太網、USB和PCI Express等高速接口,可以從多個外部攝像頭輸入圖像。除了DRP-AI加速器外,RZ/V2MA還包含一個OpenCV加速器,可以同時執行基于規則的圖像處理。這些功能有助于AI網關、視頻服務器、安全門、POS終端和機械臂等機器視覺產品獲得高精度圖像識別能力。該器件的目標應用主要是AI功能網關和AI視頻服務器等。
系統框圖
為了幫助用戶快速上手,新款RZ/V2MA提供一整套開發工具輔助視覺AI系統設計。新器件的DRP-AI Translator可以將AI模型轉換為DRP-AI可執行文件,而新增的基于開源深度學習編譯器Apache TVM技術的DRP-AI TVM編譯器可讓DRP-AI加速器與CPU一起工作,使DRP-AI能夠轉換和生成比以往更多的AI模型。現在瑞薩已對ONNX和PyTorch AI模型的支持,計劃未來支持Tensorflow。
方案優勢
● 通過解碼視頻流(H.264或H.265)并以最小切換開銷處理多個AI推理,從而實現快速視覺AI處理
● 支持帶以太網協議的高速視覺網關功能:100/1000Mbps和快速USB連接:USB 3.1第1代(5Gbps)
● 支持PCI Express 2.0(第2代/2通道)的外設擴展
● RZ/V2MA內置電源時序控制功能可使電源設計更簡單且具有更高的可靠性
● 集成多種通信設備、高性能Wi-Fi模塊、緊湊且高性能的低功耗藍牙(LE)模塊和LTE Cat-M1蜂窩物聯網模塊
● 為合作伙伴提供評估板RZ/V2MA評估板
作為瑞薩電子“成功產品組合”的一部分,上述解決方案將相互兼容的瑞薩器件完美結合,實現無縫協作,幫助用戶縮短設計流程,加快產品上市。與此同時,這款視覺AI網關解決方案也將為電商個性化圖像搜索、3D模型構建、OCR掃描、人臉識別、圖像探測器等創新用例賦能。
免責聲明:本文為轉載文章,轉載此文目的在于傳遞更多信息,版權歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權問題,請聯系小編進行處理。
推薦閱讀: