롤링 셔터란 무엇이며, 언제 홈 카메라 감지를 왜곡할까요?

에바 왕

IceWhale author

에바 왕 는 기술 작가 그리고 이자 ZimaSpace의 상주 장인입니다. 평생을 기술에 열정을 가진 사람으로서 홈랩과 오픈소스 소프트웨어에 열정을 가지고 있으며,복잡한 기술 개념을 쉽게 이해할 수 있는 실습 가이드로 번역하는 데 전문성을 가지고 있습니다.에바는 셀프 호스팅이 어렵지 않고 재미있어야 한다고 믿습니다. 그녀의 튜토리얼을 통해 커뮤니티가 하드웨어 설정의 신비를 풀도록돕고 있습니다. 첫 NAS 구축부터 Docker 컨테이너 마스터링까지.

What Is Rolling Shutter, and When Does It Distort Home Camera Detection? - Zima Store Online

롤링 셔터는 센서의 각 행을 서로 다른 순간에 캡처하므로, 판독 중 움직임이 한 프레임을 시간적으로 왜곡된 기하학적 측정값으로 바꿀 수 있습니다.

조용한 현관을 가로지르는 사람은 정상적으로 보일 수 있지만, 빠르게 달리는 자전거, 진동하는 마운트 또는 빠른 패닝은 한 프레임 안에서 기울어지거나 늘어나거나 전단될 수 있습니다. 감지기는 한순간의 물체가 아니라 왜곡된 픽셀 기하를 인식합니다. 이 효과는 행 판독 시간, 노출, 움직임의 방향, 렌즈, 조명, 모델의 학습 분포에 따라 달라집니다.

한 프레임에는 여러 노출 시점의 연속이 담깁니다

많은 CMOS 센서는 전체 이미지를 동시에 캡처하는 대신 행을 순차적으로 노출하거나 판독합니다. 따라서 표시된 프레임의 상단과 하단은 서로 다른 순간을 나타내며, 전체 왜곡은 명목상 프레임 속도만이 아니라 센서 판독에 의해 결정됩니다.

종합적인 롤링 셔터 모델은 롤링 셔터의 움직임 모델과 보정 방법을 검토합니다. 이 자료는 행 단위 획득 과정에서 카메라 또는 장면이 상대적으로 움직인 결과로 기하학적 왜곡이 발생한다고 설명합니다. 이러한 차이는 이후 가정용 환경 테스트에서도 확인됩니다.

느린 움직임과 짧은 판독 시간에서는 차이가 무시할 만할 수 있습니다. 빠른 측면 움직임, 회전하는 선풍기 날개, 카메라 진동 또는 움직이는 차량은 노출 시간이 짧아 블러가 제한되는 경우에도 뚜렷한 왜곡을 만들 수 있습니다.

왜곡은 박스, 특징, 겉보기 궤적을 바꿉니다

객체 감지기는 학습 이미지에서 익힌 형태와 질감에 의존합니다. 행에 따라 달라지는 전단은 종횡비를 바꾸거나 움직이는 가장자리를 여러 위치에 걸쳐 분리할 수 있으며, 트래커는 왜곡된 중심점을 갑작스러운 속도 변화로 해석할 수 있습니다. 모션 블러가 동시에 발생할 수 있지만, 이는 별개의 노출 효과입니다.

링셰핑대학교의 비전 기하 자료는 롤링 셔터가 기존 카메라 기하를 어떻게 바꾸고, 움직임으로부터의 구조 복원과 안정화 같은 컴퓨터 비전 작업에 어떤 영향을 미치는지 설명합니다. 가정용 카메라 추적도 더 작은 규모로 동일한 측정 불일치를 겪습니다.

렌즈 보정만으로는 시간적 왜곡이 자동으로 제거되지 않습니다. 렌즈 왜곡은 공간적이며 대부분 고정되어 있는 반면, 롤링 셔터 왜곡은 움직임에 따라 달라지기 때문입니다. 일반적인 기하학적 왜곡을 적용하면 이미 기울어진 픽셀이 새로운 좌표계로 이동하면서 문제가 오히려 커질 수도 있습니다.

판독 방향에 따라 움직임의 방향이 중요해집니다

행 판독과 평행한 움직임은 형태를 압축하거나 확장할 수 있고, 수직인 움직임은 기울어짐과 측면 변위를 만들 수 있습니다. 글로벌 셔터 센서는 프레임 내부의 시간적 왜곡을 피하지만, 비용, 감도, 노이즈 또는 해상도가 다를 수 있으므로 무조건적인 상위 업그레이드는 아닙니다.

CVPR의 판독 기하 연구는 롤링 셔터 카메라를 위한 형식적 모델을 개발하고, 판독 기하가 장면의 점들이 관측되는 방식을 제한한다는 사실을 보여줍니다. 이는 하나의 왜곡 보정으로 모든 움직임과 센서 구성을 처리할 수 없는 이유를 뒷받침합니다.

정적인 주간 영상만으로 감지를 평가하는 경우에는 실패 경계가 드러나지 않습니다. 야간 노출, 빠르게 움직이는 물체, 유연한 마운트, 전자식 안정화가 결합하면 테스트 세트에 없는 방식으로 블러와 왜곡이 함께 발생할 수 있어, 특정 움직임 방향에서만 모델이 신뢰할 수 없는 것처럼 보일 수 있습니다.

-15% OFF