DA-Flow: 열화 인식 확산 모델을 이용한 광학 흐름 추정
DA-Flow는 실제 환경에서 발생하는 블러, 노이즈, 압축 아티팩트 등 영상 열화에 강인한 광류(Optical Flow) 추정을 목표로 하는 새로운 접근법입니다.
핵심 기술은 이미지 복원용 확산 모델(diffusion models)의 중간 표현이 열화에 민감한 특성을 가지나 시간적 인식은 부족하다는 점에 착안하여, 인접 프레임 간의 정보를 모두 활용하는 시공간 주의(attention) 메커니즘을 도입한 것입니다.
이로써 확산 모델의 특성을 살린 제로샷 대응 능력(zero-shot correspondence)을 확보하고, 이를 컨볼루션 특징과 결합한 하이브리드 구조와 반복적 정제(iterative refinement) 과정에 통합하여 기존 방법들보다 열화가 심한 상황에서도 뛰어난 성능을 보입니다.
따라서 DA-Flow는 실제 열화된 영상에서의 정확한 밀집 대응 추정이 필요한 자율주행, 영상 분석 등 다양한 실용 분야에 유용한 기술적 진전을 제시합니다.
