2026-11-18

在 reComputer RK3576 上使用 YOLO26 统计传送带上的药片

在传送带视频上画一条线,利用 RK3576 NPU 上的 YOLO26n INT8 推理统计经过该线的药片。

CVObject TrackingYOLOGitHub

概述

演示程序会在启动时分析一段预先录制的传送带视频。C++ 引擎使用 MPP 解码、RGA 预处理,并通过 RKNN 在 RK3576 NPU 上运行 YOLO26n INT8 药片检测模型。播放时,浏览器根据视频时间戳叠加跟踪框。

浏览器演示中穿过计数线的药片

在 reComputer RK3576 上运行

请使用 MPP、RGA 和 RKNPU 驱动均可正常工作的系统镜像。安装支持虚拟环境的 Python 和包含 ffprobe 的 FFmpeg。如果 MPP 重复输出最后一帧的时间戳,演示程序会使用 ffprobe 恢复时间戳。

将 rk3576-ai-demos 和 rockchip-yolo-cpp 两个检出目录放在同一父目录下。在 rockchip-yolo-cpp 的根目录中,使用提交 2b30157 或包含其空间分类 logits 解码修复的更新版本,然后构建引擎的命令行程序。

bash
./nvr build --cli-only

切换到 rk3576-ai-demos 的根目录。确认 examples/cv/pill-counter/run.py 存在,并且 models/pills-rk3576-int8/ 中包含 best-rk3576.rknn 及其配套的 metadata.yaml。将本地 H.264 MP4 视频放在 examples/cv/pill-counter/data/watermarked_preview.mp4,或修改 --video 参数以指向你的视频。

bash
python3 -m venv .venv
source .venv/bin/activate
python -m pip install fastapi==0.115.6 'uvicorn[standard]==0.34.0'

如果使用引擎自带的本地 SDK 构建,请将其运行时库添加到当前 shell 的库搜索路径。

bash
engine_repo="$(cd ../rockchip-yolo-cpp && pwd)"
export LD_LIBRARY_PATH="$engine_repo/.local/deps/rknn/lib:$engine_repo/.local/deps/rga/lib:$engine_repo/.local/deps/mpp/lib${LD_LIBRARY_PATH:+:$LD_LIBRARY_PATH}"

在同一个 shell 中启动演示程序。

bash
python examples/cv/pill-counter/run.py \
  --engine ../rockchip-yolo-cpp/.local/build/bin/rk-nvr \
  --video examples/cv/pill-counter/data/watermarked_preview.mp4

绘制计数线并查看结果

在同一网络中的浏览器里打开 http://<RK3576_IP>:8010,等待分析完成。在视频画面中拖动鼠标,画一条横跨药片运动方向的线,或选择 Center line,然后选择 Play。青色框表示检测到的药片,琥珀色框表示截至当前播放位置已计数的药片。

每个被跟踪的药片在其中心点从任一方向穿过线段时只计数一次。重画计数线会重新计算整段视频中的穿线事件。跳转或重播时,计数显示截至当前播放位置的累计值。计数结果取决于计数线的位置以及跟踪是否连续。