논문 제목: 라이다-카메라 오정렬에 강건한 BEV 기반 3D 객체 탐지
논문 요약: 최근 자율주행 인식의 신뢰성 요구가 높아지면서, 라이다와 카메라의 상호 보완적인 특성을 결합하여 조감도(Bird's-Eye View) 공간에서 3차원 객체를 검출하는 융합 기법이 주목받고 있다. 그러나 융합 검출의 수행 과정에는 검출 결과의 품질을 저해하는 여러 요인이 존재한다. 예를 들어 영상 특징을 3차원 공간으로 올리는 리프팅 단계에서는 두 센서의 외부 파라미터 오차로 인해 특징이 잘못된 공간 위치에 누적될 수 있으며, 융합 단계에서는 두 모달리티 간 공간적 불일치로 인해 상호 보완적인 정보의 결합이 어려워진다. 이러한 오류는 검출 단계까지 전파되어 전반적인 3차원 객체 검출 성능을 저하시킨다. 이러한 문제는 수행 중에 외부 파라미터를 다시 추정하는 온라인 재보정을 활용하여 완화할 수 있다. 두 센서의 관측으로부터 구성한 깊이 영상 사이의 대응 관계를 추정하고 기하학적 방법으로 외부 파라미터를 복원함으로써, 검출기를 재학습하지 않고도 융합 검출의 성능 저하를 줄일 수 있다. 그러나 온라인 재보정을 기반으로 융합 검출을 수행할 때 다음과 같은 문제가 남는다. 첫째, 융합 검출이 만족해야 할 정렬 품질 요구사항이 명확하지 않다. 둘째, 재보정 이후에도 남는 잔차가 검출 품질에 미치는 영향을 파악하고 이를 완화할 방법이 필요하다. 셋째, 재보정 단계와 검출 단계에 걸쳐 나타나는 품질 변화를 통합적으로 추적할 수 있어야 한다. 본 논문에서는 온라인 외부 파라미터 재보정 기반 라이다?카메라 융합 검출 품질 보증 기법을 제안한다. 제안 기법은 투영 깊이 영상과 단안 깊이 영상 사이의 밀집 대응 관계와 화소별 신뢰도를 추정하여 외부 파라미터를 복원하고, 잔차 크기와 검출 성능의 관계를 바탕으로 정렬 품질 요구사항을 정의하며, 재보정 결과와 검출 품질을 연계하여 평가한다. 제안 기법을 통해 외부 파라미터 드리프트로 인한 전반적인 검출 성능 저하를 완화하고, 재보정 이후의 잔차와 검출 품질을 통합적으로 관리함으로써 융합 검출의 신뢰성을 높일 수 있을 것으로 기대된다.
학위연월: 2027년 2월
E-mail: gksdjf9200@pusan.ac.kr
지도교수: 박진선 교수님
키워드: 라이다–카메라 융합, 3차원 객체 검출, 센서 오정렬, 온라인 외부 파라미터 재보정