Overzicht
De demo analyseert bij het opstarten een opgenomen video van een transportband. De C++-engine gebruikt MPP voor decodering, RGA voor voorbewerking en RKNN om de YOLO26n INT8-tabletdetector op de NPU van de RK3576 uit te voeren. Tijdens het afspelen toont de browser de gevolgde detecties op basis van de tijdstempels van de video.

Uitvoeren op reComputer RK3576
Gebruik een systeemimage met werkende MPP-, RGA- en RKNPU-stuurprogramma’s. Installeer Python met ondersteuning voor virtuele omgevingen en FFmpeg met ffprobe. De demo gebruikt ffprobe om tijdstempels te herstellen als MPP het tijdstempel van het laatste frame herhaalt.
Plaats de lokale kopieën van rk3576-ai-demos en rockchip-yolo-cpp in dezelfde bovenliggende map. Gebruik vanuit de hoofdmap van rockchip-yolo-cpp commit 2b30157 of een latere revisie die de correctie voor het decoderen van ruimtelijke classificatielogits bevat. Bouw de opdrachtregelversie van de engine.
./nvr build --cli-onlyGa naar de hoofdmap van rk3576-ai-demos. Controleer of examples/cv/pill-counter/run.py aanwezig is en of models/pills-rk3576-int8/ zowel best-rk3576.rknn als het bijbehorende bestand metadata.yaml bevat. Plaats je lokale H.264 MP4-bestand op examples/cv/pill-counter/data/watermarked_preview.mp4 of geef met --video het pad naar je eigen video op.
python3 -m venv .venv
source .venv/bin/activate
python -m pip install fastapi==0.115.6 'uvicorn[standard]==0.34.0'Als je de engine met de meegeleverde lokale SDK hebt gebouwd, voeg je de runtimebibliotheken toe aan het zoekpad voor bibliotheken van je shell.
engine_repo="$(cd ../rockchip-yolo-cpp && pwd)"
export LD_LIBRARY_PATH="$engine_repo/.local/deps/rknn/lib:$engine_repo/.local/deps/rga/lib:$engine_repo/.local/deps/mpp/lib${LD_LIBRARY_PATH:+:$LD_LIBRARY_PATH}"Start de demo vanuit dezelfde shell.
python examples/cv/pill-counter/run.py \
--engine ../rockchip-yolo-cpp/.local/build/bin/rk-nvr \
--video examples/cv/pill-counter/data/watermarked_preview.mp4Een tellijn tekenen en de telling bekijken
Open http://<RK3576_IP>:8010 in een browser op hetzelfde netwerk en wacht tot de analyse klaar is. Sleep over de video om een lijn dwars op de bewegingsrichting van de tabletten te tekenen of kies Center line. Kies daarna Play. Blauwgroene kaders markeren detecties en amberkleurige kaders markeren tabletten die tot de huidige afspeelpositie al zijn geteld.
Elke gevolgde tablet telt één keer zodra het middelpunt de lijn in een van beide richtingen passeert. Als je de lijn opnieuw tekent, berekent de demo alle passages in de video opnieuw. Als je naar een ander moment springt of de video opnieuw afspeelt, toont de demo het totaal tot de huidige afspeelpositie. De positie van de lijn en de continuïteit van de tracking beïnvloeden de telling.