ArmSoM
← 所有故事

将 Raspberry Pi 物体检测演示移植到 RKNN

将物体检测器移至 RKNN 包括转换、输出检查和应用程序集成。转换后的文件不足以证明检测仍然有用。在将其连接到相机服务之前,根据原始模型对其进行测试。

ArmSoM Sige5

ArmSoM Sige5

保留输入和输出的参考集

保存代表性图像、预期输出和原始模型配置。比较这些输入的转换模型,包括小物体、困难的照明和负面示例。在将不匹配归咎于量化之前,请检查预处理和输出解码。使用模型工件记录转换和运行时版本。

使用支持的工具进行转换

使用相关的Rockchip工具包和model-zoo示例作为起点,确认目标平台和所需版本。查看转换警告和操作员支持。校准数据应类似于设备将看到的图像。成功的出口只是一个中间的里程碑;比较困难场景和空旷场景以及明显目标的检测结果。

增量整合相机路径

在Sige5或Sige7s上实时捕捉之前运行保存的图像。然后分别测量捕获、预处理、推理和后处理。注意颜色顺序、步幅和纵横比错误。记录当处理速度慢于捕获速度时如何处理陈旧帧。响应式应用程序可能需要丢弃旧帧而不是无限期地对它们进行排队。

根据您的要求进行选择

要求或情况

评估什么

决定详情

参考

模型和评估集

转换前保存预测。

转换

目标、精度和警告

导出后检查准确性。

应用

实时摄像头和队列政策

测量端到端延迟。

示例设计

在活体检测之前使用保存的图像检查点

保存一个包含简单、困难和反面例子的小集合。在引入相机定时、颜色转换或缓冲之前,将原始模型的输出与转换后的模型进行比较。如果出现差异,此检查点会将调查范围缩小到转换和预处理。一旦输出可接受,添加实时摄像机并测量帧年龄。在两个版本中保持类别标签和置信度处理一致。

硬件和文档

Sige5 · RK3576

RK3576,四个 Cortex-A72 和四个 Cortex-A53 内核,6 TOPS NPU,双千兆以太网和 M.2 PCIe 2.1 x1。

硬件文档 · 产品详情

Sige7s · RK3588S

RK3588S、6 TOPS NPU、千兆以太网和可拆卸 eMMC。尺寸:85 × 56 × 17 mm。更换 eMMC 之前请断开电源。

硬件文档 · 产品详情

常见问题

我可以假设每个 ONNX 模型都会转换吗?

否。必须检查架构、运算符、动态形状和工具包支持。

产品信息和支持

了解 Sige5

联系 ArmSoM

来源

由 ArmSoM 使用以下文档编写。示例设计是建议,而不是测量的客户安装。

相关阅读