CV / ByteTrack

ByteTrack

reComputer R Series (CM5 + Hailo-8)

MOT17-persoonstracking met de ByteTrack-serie op reComputer R Series met Hailo-8 (S/Tiny/Nano/M) of Hailo-10H (S/Tiny).

20 downloads
Grootte
14.8 MB
Geheugen
4GB+
Precisie
Hailo HEF

Kies het apparaat dat je gebruikt. De installatiehandleiding en documentatie worden dienovereenkomstig bijgewerkt.

Aan de slag

Implementeren
sudo docker run --rm \
  --name pi5-hailo8-bytetrack-s \
  --privileged \
  --net=host \
  -e PYTHONUNBUFFERED=1 \
  --device /dev/hailo0:/dev/hailo0 \
  -v /usr/lib/libhailort.so.4.23.0:/usr/lib/libhailort.so.4.23.0:ro \
  -v /usr/lib/libhailort.so:/usr/lib/libhailort.so:ro \
  ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack_s_mot17:latest \
  python web_detection.py --model_path model/bytetrack_s_mot17.hef --video_path video/test.mp4

Modeldetails

reComputer R Series (CM5 + Hailo-8)

MOT17-tracking met ByteTrack-S / ByteTrack-Tiny op reComputer R Series (CM5 + Hailo-8)

ByteTrack-S, ByteTrack-Tiny, ByteTrack-Nano en ByteTrack-M volgen personen in MOT17-video op Hailo-8 via HailoRT 4.23.x. De HEFs zijn YOLOX-persoonsdetectoren; de host decodeert negen heads, voert NMS en ByteTrack-associatie uit (Kalman + IoU voor hoge/lage scores) en tekent een stabiele track-ID in de MJPEG-preview.

Modelinformatie

VariantInvoerMeegeleverd HEFMOTA float / Hailo-8FPS (batch 1)Parameters / bewerkingenContainer
ByteTrack-S608×1088×314.8 MB79.5 / 77.788.38.94M / 43.21Gbytetrack_s_mot17
ByteTrack-Tiny608×1088×39.7 MB77.2 / 76.01265.03M / 24.60Gbytetrack_tiny_mot17
ByteTrack-Nano608×1088×39.8 MB70.1 / 69.063.70.90M / 4.12Gbytetrack_nano_mot17
ByteTrack-M608×1088×381.4 MB86.2 / 86.111.125.28M / 206.12Gbytetrack_m_mot17

Hardware- en hostconfiguratie

| Bord | Accelerator | Runtime | Python in container | |---|---| | Bord | reComputer R Series met Raspberry Pi CM5 | | Accelerator | Hailo-8 via PCIe, beschikbaar als /dev/hailo0 | | Runtime | HailoRT 4.23.x (host en container moeten major.minor delen) | | Python in container | 3.11, aarch64 |

bash
sudo apt update
sudo apt install hailo-all -y
sudo reboot

# Na herstart
hailortcli fw-control identify
ls /dev/hailo0

# Docker
curl -fsSL https://get.docker.com -o get-docker.sh
sudo sh get-docker.sh --mirror Aliyun
sudo systemctl enable docker
sudo systemctl start docker

Uitvoeren met demovideo

Kies de opdracht die bij de variant hoort.

ByteTrack-S

bash
sudo docker run --rm \
  --name pi5-hailo8-bytetrack-s \
  --privileged \
  --net=host \
  -e PYTHONUNBUFFERED=1 \
  --device /dev/hailo0:/dev/hailo0 \
  -v /usr/lib/libhailort.so.4.23.0:/usr/lib/libhailort.so.4.23.0:ro \
  -v /usr/lib/libhailort.so:/usr/lib/libhailort.so:ro \
  ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack_s_mot17:latest \
  python web_detection.py --model_path model/bytetrack_s_mot17.hef --video_path video/test.mp4

ByteTrack-Tiny

bash
sudo docker run --rm \
  --name pi5-hailo8-bytetrack-tiny \
  --privileged \
  --net=host \
  -e PYTHONUNBUFFERED=1 \
  --device /dev/hailo0:/dev/hailo0 \
  -v /usr/lib/libhailort.so.4.23.0:/usr/lib/libhailort.so.4.23.0:ro \
  -v /usr/lib/libhailort.so:/usr/lib/libhailort.so:ro \
  ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack_tiny_mot17:latest \
  python web_detection.py --model_path model/bytetrack_tiny_mot17.hef --video_path video/test.mp4

Open http://<Board_IP>:8000 voor de preview met track-ID’s. Het meegeleverde video/test.mp4 is de Hailo-straatclip.

ByteTrack-Nano

bash
sudo docker run --rm \
  --name pi5-hailo8-bytetrack-nano \
  --privileged \
  --net=host \
  -e PYTHONUNBUFFERED=1 \
  --device /dev/hailo0:/dev/hailo0 \
  -v /usr/lib/libhailort.so.4.23.0:/usr/lib/libhailort.so.4.23.0:ro \
  -v /usr/lib/libhailort.so:/usr/lib/libhailort.so:ro \
  ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack_nano_mot17:latest \
  python web_detection.py --model_path model/bytetrack_nano_mot17.hef --video_path video/test.mp4

ByteTrack-M

bash
sudo docker run --rm \
  --name pi5-hailo8-bytetrack-m \
  --privileged \
  --net=host \
  -e PYTHONUNBUFFERED=1 \
  --device /dev/hailo0:/dev/hailo0 \
  -v /usr/lib/libhailort.so.4.23.0:/usr/lib/libhailort.so.4.23.0:ro \
  -v /usr/lib/libhailort.so:/usr/lib/libhailort.so:ro \
  ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack_m_mot17:latest \
  python web_detection.py --model_path model/bytetrack_m_mot17.hef --video_path video/test.mp4

USB-cameramodus

bash
sudo docker run --rm \
  --name pi5-hailo8-bytetrack-s \
  --privileged \
  --net=host \
  -e PYTHONUNBUFFERED=1 \
  --device /dev/hailo0:/dev/hailo0 \
  --device /dev/video0:/dev/video0 \
  -v /usr/lib/libhailort.so.4.23.0:/usr/lib/libhailort.so.4.23.0:ro \
  -v /usr/lib/libhailort.so:/usr/lib/libhailort.so:ro \
  ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack_s_mot17:latest \
  python web_detection.py --model_path model/bytetrack_s_mot17.hef --camera_id 0

Vervang bytetrack_s_mot17 door bytetrack_tiny_mot17 om de Tiny-variant te draaien.

REST API

EndpointMethode
ByteTrack-SPOST /api/models/bytetrack_s_mot17/predict
ByteTrack-TinyPOST /api/models/bytetrack_tiny_mot17/predict
ByteTrack-NanoPOST /api/models/bytetrack_nano_mot17/predict
ByteTrack-MPOST /api/models/bytetrack_m_mot17/predict
bash
curl -X POST "http://<Board_IP>:8000/api/models/bytetrack_s_mot17/predict" \
  -F "file=@test.jpg"

De predictions-items bevatten track_id, class, confidence en box.

Implementatieopmerkingen

  • De HEFs leveren negen YOLOX-heads (box/objectness/class) voor strides 32/16/8, zonder on-chip NMS.
  • De host decodeert center/size, berekent score=obj*class, voert NMS 0.7 en ByteTrack-associatie uit.
  • De voorbewerking gebruikt letterbox 608×1088 (padding 114) en BGR→RGB; ImageNet-normalisatie zit in het HEF. Alleen voor personen.

Ontwikkelingsopmerkingen

  • Bronnen: src/rpi5_hailo8_bytetrack{_s,_tiny,_nano,_m}_mot17/
  • Dockerfiles: docker/hailo8/bytetrack{_s,_tiny,_nano,_m}_mot17.dockerfile
  • Containers: ghcr.io/seeed-projects/recomputer-hailo8-cv/bytetrack{_s,_tiny,_nano,_m}_mot17:latest
  • HEF: Hailo Model Zoo v2.20.0 (hailo8), sizes and SHA256 in each module's model/README.md

Invoer en uitvoer

Invoer: afbeelding, video of USB-cameraframe. Uitvoer: person-boxen met track-ID, betrouwbaarheid en MJPEG-preview.