国产自研NPU，算力3.0TOPS，基于A35内核，瑞芯微RK1808

一、简介

随着物联网和人工智能的兴起，AIoT(AI+IoT)芯片也随之兴起，RK1808是瑞芯微Rockchip发布的全新AIoT(AI+IoT)芯片。RK1808采用ARM双核Cortex-A35架构，最高频率可达1.6GHz，硬件VPU支持1080P H.264视频格式的DEcoder和ENcoder，硬件VAD支持麦克风阵列，内置了ISP支持摄像头视频信号输入。在工艺上，RK1808采用22nm FD-SOI工艺制造，相同性能下功耗比主流28nm工艺降低30％左右。

RK1808最大的特点就是内置NPU，算力最高可达3.0 TOPs。兼顾性能、功耗及运算精度的同时支持INT8(3TOPs)/INT16(300GOPs)/FP16(100GFLOPs)混合运算。提供的RKNN-Toolkit工具支持TensorFlow、Caffe、ONNX、Darknet等框架的网络模型转换，Rock-X SDK实现一行代码即可调用库内人工智能算法。

二、详细资源

RK1808拥有相当丰富的外设和接口，可以多种功能的设计。

三、工具链

A、RKNN-Toolkit

RKNN-Toolkit是Rockchip提供的一个进行模型转换、推理运行和性能评估的开发套件，最新版本到了1.4.0。用户通过提供的 python 接口可以便捷地完成模型转换、模型推理和性能评估等功能。但是对于自定义的网络层，这个工具可能无法进行转换，需要等待官方的更新。

B、Rock-X SDK

Rock-X SDK是Rockchip提供的一个支持C和Python的SDK，可以使用户通过一行代码即可调用算法库内的人工智能算法，无需花更多的精力在算法的部署上，极大地加快人工智能、物联网等项目的开发速度。

当前最新版本为1.2.0，人工智能算法包括包括：人脸检测、人脸识别、活体检测、人脸属性分析、人脸特征点、人头检测、人体骨骼关键点、手指关键点、人车物检测等功能，

四、开发硬件

A、AI人工智能计算棒

AI人工智能计算棒由开源官方论坛Toybrick发布。AI人工智能计算棒(AI Compute Stick)，定位于深度学习工具和AI加速器，并且兼容Mac、Windows和Linux三大操作系统平台，抛弃以前的GPU+CPU+FPGA结合的加速计算方案，计算棒通过USB接口连接PC，是的普通的PC也能获得强大的算力与推理能力。

B、TB-RK1808M0 Mini-PCIe计算卡

TB-RK1808M0 Mini-PCIe计算卡同样由开源官方论坛Toybrick发布。Mini-PCIe计算卡不仅能作为主芯片控制外围硬件，也可以作为计算模块集成在人工智能主板上。

本文归算法卡农所有。