视觉AI网关解决方案

视觉AI也称为计算机视觉，旨在训练计算机复制人类视觉系统，让数字设备（如人脸检测器、QR码扫描仪）能够像人类一样识别和处理图像、视频中的物体。视觉AI可以主动识别不安全因素，实现AI智能值守，节约人力成本，满足不同应用场景的安全管理需求。

瑞萨电子推出视觉AI网关解决方案，基于AI对象检测与识别平台，使用多个摄像头收集数据并获得有效的无线数据传输。方案采用了具有丰富外设功能的RZ/V2M AI-MPU和优化的电源IC、VersaClock时钟发生器，以及用于Wi-Fi、蓝牙和LTE的通信模块，不仅具有灵活的连接选项和优化的电源系统，而且有助于加速强大AI网关设备的开发。该解决方案具有高性能和低功耗的特性，同时，集成的边缘AI功能提高了此方案的网关应用价值。

器件详解

视觉AI网关解决方案使用了内置视觉AI加速器的、能够处理多个摄像头图像数据的全新RZ/V2MA器件，进一步扩充了RZ/V系列微处理器（MPU）产品线，并为视觉AI应用带来了更高水平的高精度图像识别能力。

这款器件集成了两个64位Arm® Cortex® -A53内核，能够1GHz最高工作频率实现高计算性能；专有的低功耗DRP-AI（动态可重构处理器）加速器可以1TOPS/W（每秒百万次操作/瓦）级的性能处理图像数据。

RZ/V2MA器件配备以太网、USB和PCI Express等高速接口，可以从多个外部摄像头输入图像。除了DRP-AI加速器外，RZ/V2MA还包含一个OpenCV加速器，可以同时执行基于规则的图像处理。这些功能有助于AI网关、视频服务器、安全门、POS终端和机械臂等机器视觉产品获得高精度图像识别能力。该器件的目标应用主要是AI功能网关和AI视频服务器等。

系统框图

为了帮助用户快速上手，新款RZ/V2MA提供一整套开发工具辅助视觉AI系统设计。新器件的DRP-AI Translator可以将AI模型转换为DRP-AI可执行文件，而新增的基于开源深度学习编译器Apache TVM技术的DRP-AI TVM编译器可让DRP-AI加速器与CPU一起工作，使DRP-AI能够转换和生成比以往更多的AI模型。现在瑞萨已对ONNX和PyTorch AI模型的支持，计划未来支持Tensorflow。

方案优势

●   通过解码视频流（H.264或H.265）并以最小切换开销处理多个AI推理，从而实现快速视觉AI处理

●   支持带以太网协议的高速视觉网关功能：100/1000Mbps和快速USB连接：USB 3.1第1代（5Gbps）

●   支持PCI Express 2.0（第2代/2通道）的外设扩展

●   RZ/V2MA内置电源时序控制功能可使电源设计更简单且具有更高的可靠性

●   集成多种通信设备、高性能Wi-Fi模块、紧凑且高性能的低功耗蓝牙（LE）模块和LTE Cat-M1蜂窝物联网模块

●   为合作伙伴提供评估板RZ/V2MA评估板

作为瑞萨电子“成功产品组合”的一部分，上述解决方案将相互兼容的瑞萨器件完美结合，实现无缝协作，帮助用户缩短设计流程，加快产品上市。与此同时，这款视觉AI网关解决方案也将为电商个性化图像搜索、3D模型构建、OCR扫描、人脸识别、图像探测器等创新用例赋能。