EfficientLoFTR
EfficientLoFTR는 LoFTR의 detector-free matching 성능을 유지하면서 연산량을 줄이고 semi-dense correspondence를 빠르게 생성하도록 설계된 CVPR 2024 matcher다. Cross-modal 전용은 아니지만 제품화 benchmark의 속도 기준점으로 중요하다.
개요
Aggregated attention과 adaptive token selection을 도입하고 fine correlation을 개선했다. 논문은 LoFTR 대비 약 2.5배 빠른 결과를 보고한다. 공식 zju3dv/EfficientLoFTR 저장소는 Apache-2.0 라이선스를 표시하며 pretrained model과 재현 스크립트를 제공한다.
핵심 구조
Semi-dense matching은 sparse feature보다 많은 correspondence를 주면서 완전 dense warp보다 계산을 줄이는 중간 지점이다. 입력 크기, token 수, coarse/fine 단계별 GPU memory를 profile해 실시간 또는 batch 요구와 맞춰야 한다.
활용
EO↔EO baseline, EO↔Drone, 사전 변환된 cross-modal 영상의 후단 matcher로 사용할 수 있다. MINIMA-EfficientLoFTR나 MatchAnything과 비교하면 동일 계열 backbone에 multimodal pretraining을 추가한 효과를 분석하기 좋다.
한계 및 주의점
기본 pretrained model이 EO↔SAR나 Map↔SAR에서 바로 좋은 결과를 보장하지 않는다. 속도 비교는 동일 GPU, 입력 크기, precision, warm-up 조건에서 해야 하며 TensorRT·ONNX 변환 시 수치 차이도 별도 검증한다.