揭秘瑞芯微算力协处理器,RK3576/RK3588强大算力搭档
瑞芯微算力协处理器-Gongga1(简称“贡嘎”),是瑞芯微针对旗舰芯片平台RK3576/RK3588等SoC平台配套的算力处理器。凭借其先进的封装技术、高性能低功耗、超低延迟响应和多模态能力,为端侧部署大模型提供了强有力的支持。
下面,就由触觉智能从多个角度,为您解析瑞芯微算力协处理器性能特性。
Gongga1协处理器特性
先进封装技术,打破端侧部署大模型的带宽限制。可部署高达3B/7B参数量的端侧模型(最高16K上下文)。
- 高性能低功耗,端侧模型可达100tokens/s以上
- 超低端到端完整响应延时
- 多模态能力
- 主控互联
- 软件友好,现有应用易于移植
Gongga1协处理器规格
触觉智能作为瑞芯微长期合作伙伴,得到算力协处理器规格信息如下:
- 高带宽嵌入式片内DRAM(2.5GB版/5GB版)
- RISC-V CPU,支持128-bit矢量运算功能。
- 多核NPU,提供INT8及W4A16等多种数据类型的运算支持。
- 4K JPEG图像编解码。
- PCle2.0、USB3.0、I2S音频输入输出接口等。
Gongga1协处理器应用场景
根据Gongga1协处理器规格规格,可应用于语音、翻译、交互、视觉等应用场景:
触觉智能核心板+瑞芯微Gongga1
触觉智能基于RK3576、RK3588,提供可扩展1到多个Gongga1芯片,可提供从6T到50T的灵活算力配置方案。可广泛用于语音交互、车载多模态感知、机器人、安防视觉等领域。
*博客内容为网友个人发布,仅代表博主个人观点,如有侵权请联系工作人员删除。