iOS 실시간 객체 감지 앱에 VLM 이식하기: 삽질과 구현 기록
YOLO 기반 실시간 감지 앱에 온디바이스 VLM을 추가하며 고민했던 점들과 구현 과정을 가볍게 정리했습니다.
YOLO 기반 실시간 감지 앱에 온디바이스 VLM을 추가하며 고민했던 점들과 구현 과정을 가볍게 정리했습니다.
아이폰 카메라 입력에서 객체를 인식하고 추적한 뒤, 바닥 평면 기준 월드 좌표로 변환해 시각화하는 애플리케이션.
YOLOv8 n/s/m/l/x 모델에서 pruning과 distillation의 효과를 비교하고, 모델 크기에 따른 경향을 분석했다.
Pruning으로 성능이 떨어진 YOLOv8m을 Knowledge Distillation으로 복구하고, 오히려 Teacher를 능가한 실험 기록.
NVIDIA ModelOpt의 FastNAS를 활용해 YOLOv8m을 구조적으로 경량화하고, 정확도와 추론 속도 사이의 트레이드오프를 분석한 실험 기록.