Paper Review. AO2 DETR_Arbitrary Oriented Object Detection Transformer@TCSVT’ 2022

• Paper link

Introduction

2-stage Deformable DETR

AO2 DETR

Experiments

Conclusions & Reviews

• 항공 도메인에 transformer 구조의 deformable detr 구조를 적용함.

• 트랜스포머 구조에 spatial한 정보를 넣어주어 성능 향상을 이끌어냄.

• Oriented proposal을 정의하고, re-encoding을 통해 refine된 feature를 사용함으로써 cnn SOTA인 Oriented-RCNN과 비교해 준수한 성능을 달성.

• FRM을 개인 연구에 적용 후 성능 분석을 진행하고 dynamic anchor box generation과 query selection 부분의 상관 관계를 파악해볼 예정.

• 제안한 방법의 완벽한 open code를 배포하지 않아 FRM 구현은 가능했지만, reference point(decoder)에 각도를 고려하는 방법을 이식할 수 없음.

• Deformable DETR에서 xywh를 이용해 xy는 reference point로 wh는 deformable attention을 고려하는 구역을 정하는 scale로 사용하지만, angle의 경우 실질적으로 구역을 어떻게 scale 하는지가 불분명함.

Reference