항공 영상에서 각진 상자 예측으로 객체 위치 파악 개선
원제 OBB-PBD: Extending Parallel Box Decoding to Oriented Bounding Boxes for Referring Expression Grounding in Aerial Imagery
추천 10댓글 2
Key Point
항공 영상에서 임의 각도로 나타나는 객체를 정확히 찾는 것이 실제 필요한데, 기존 기법은 수평 상자만 지원해 성능이 크게 떨어진다는 문제를 해결했다.
핵심 요약
- 항공 촬영 영상에서 객체를 찾기 위해 기존의 수평 직사각형 대신 회전된 방향의 상자(oriented bounding box)를 예측하는 모델을 제안했다.
- Parallel Box Decoding(PBD) 방식을 확장해 4개 좌표 대신 6개 슬롯의 각진 표현을 사용했으며, 이중각도 매개변수화(double-angle parameterization) 기법을 적용했다.
- 이미지와 프롬프트를 섞는 제어실험, 가시성·누수 프로브를 통해 모델이 손실 곡선이 아니라 실제로 이미지와 텍스트 프롬프트 모두에 의존하는지 검증했다.
- 항공 차량 시각 근거화(AVVG) 벤치마크에서 zero-shot 기준치의 rotated IoU 0.1253에서 0.303±0.012로 개선됐으며, 이는 6139개 레코드 전체 120장 이미지에서 측정한 결과다.
- 방향성 상자 학습은 축 정렬 포함 상자 대비 0.055±0.008의 추가 rotIoU 이득을 낸 반면, 블록 확장만으로는 통계적으로 구별 가능한 성능 향상이 없었다.