全新RZ/V2MA MPU具有用于图像处理的OpenCV加速器,并提供基于TVM的深度学习编译器
(资料图片)
全球半导体解决方案供应商瑞萨电子(TSE:6723)今日宣布,推出一款能够处理多个摄像头图像数据的全新RZ/V2MA器件,进一步扩充其RZ/V系列微处理器(MPU)产品线,并为视觉AI应用带来新水平的高精度图像识别能力。该新器件集成了两个64位Arm®Cortex®-A53内核,能够以1GHz的最高工作频率提供高计算性能;具备专有的低功耗DRP-AI(动态可重构处理器)加速器,可以以1 TOPS/W(每秒百万次操作/瓦)级的性能处理图像数据。
瑞萨电子发布内置视觉AI加速器的RZ V系列器件,实现精确图像识别与多摄像头图像支持
瑞萨用于视觉AI的64位RZ V微处理器
RZ/V2MA器件配备以太网、USB和PCI Express等高速接口,允许从多个外部摄像头输入图像。除DRP-AI加速器外,RZ/V2MA还包含一个OpenCV加速器,以便同时执行基于规则的图像处理。这些功能让AI网关、视频服务器、安全门、POS终端和机械臂等机器视觉产品获得高精度图像识别能力。
新款RZ/V2MA配有一整套开发工具来辅助视觉AI系统设计。除现有DRP-AI Translator,新器件还增加了基于开源深度学习编译器Apache TVM技术(注1)的DRP-AI TVM(注2)。DRP AI Translator旨在将AI模型转换为DRP-AI可执行文件,而DRP-AI TVM编译器则让DRP-AI加速器与CPU一起工作,使DRP-AI能够转换和生成比以往更多的AI模型。瑞萨针对产业发展的第一阶段提供对ONNX和PyTorch AI模型的支持,并计划在未来支持Tensorflow。
瑞萨电子企业基础设施业务部副总裁加藤茂树表示:“对于想要实现机器学习的嵌入式系统开发人员而言,所面对的挑战之一是如何跟上不断演进的最新AI模型。通过新款DRP-AI TVM工具,瑞萨为设计者带来扩展AI框架和AI模型的选择。这些框架和模型可转换为可执行格式,使他们能够利用新的AI模型为嵌入式设备构建最前沿的图像识别功能。”
物联网和基于AI的服务提供商、横河电机全资子公司amnimo Inc.总裁Chiharu Nakabayashi表示:“瑞萨RZ/V系列是嵌入式设备的理想选择。其在运行AI时仅产生极低的功耗和热量,因而无需风扇或散热器。借助这些器件,我们有信心开发出可安装在任何场合的强大图像AI网关。”
RZ/V2MA的关键特性
双64位Arm Cortex-A53内核,最大工作频率为1GHz
AI加速器DRP-AI(1 TOPS/W级),在执行TinyYoloV3程序时达到52 fps(每秒帧数)
OpenCV加速器,用于基于规则的图像处理
以太网、USB和PCI Express接口,用于外部摄像头图像输入
视频编解码器(H.265和H.264)
DRP-AI TVM工具,用于转换基于TVM技术的AI模型;目前阶段支持ONNX和PyTorch格式
高速内存接口包括LPDDR4(3200Mbps)、USB 3.1(高达5Gbps)和PCI Express(2通道)
可采用15mm方形BGA封装
基于RZ/V2MA的视觉AI网关解决方案
瑞萨开发的“视觉AI网关解决方案”作为一款基于AI的对象检测与识别平台,使用多个摄像头来收集数据并获得有效的无线数据传输。这一高速处理解决方案融合了RZ/V2MA MPU与电源IC、VersaClock时钟发生器,以及用于Wi-Fi、蓝牙和LTE的通信模块等相搭配的瑞萨产品,不仅带来灵活的连接选项和一个优化的电源系统,并且经过测试,以加速强大AI网关设备的开发。该解决方案作为瑞萨“成功产品组合”的一部分,将相互兼容的瑞萨器件完美结合,实现无缝协作,以帮助用户缩短设计过程,加速产品上市。基于其产品阵容中的多款产品,瑞萨现已推出超过300款“成功产品组合”。更多信息,请访问:http://www.renesas.com/win。
供货信息
RZ/V2MA及开发工具现已上市;更多信息,请访问:https://www.renesas.com/rzv2ma。
amnimo网站还提供AI边缘网关的演示视频;请访问:https://youtu.be/OUpY2w0VdNk。
该产品的设计目的是利用更少的功率推动在系统内节约能源。
关于瑞萨电子
瑞萨电子(TSE: 6723),科技让生活更轻松,致力于打造更安全、更智能、可持续发展的未来。作为全球微控制器供应商,瑞萨电子融合了在嵌入式处理、模拟、电源及连接方面的专业知识,提供完整的半导体解决方案。成功产品组合加速汽车、工业、基础设施及物联网应用上市,赋能数十亿联网智能设备改善人们的工作和生活方式。更多信息,敬请访问renesas.com。关注瑞萨电子微信公众号,发现更多精彩内容。