Qu’est-ce que l’obturateur roulant, et quand déforme-t-il la détection par caméra domestique ?

Le balayage roulant capture les lignes du capteur à des moments différents. Ainsi, un mouvement pendant la lecture peut transformer une seule image en mesure géométrique déformée par le temps.

Une personne traversant une véranda calme peut sembler normale, tandis qu’un vélo rapide, un support qui vibre ou un panoramique rapide peuvent incliner, étirer ou cisailler l’image dans une seule trame. Un détecteur perçoit la géométrie déformée des pixels plutôt que l’objet à un instant donné. L’effet dépend du temps de lecture des lignes, de l’exposition, de la direction du mouvement, de l’objectif, de l’éclairage et de la distribution des données d’entraînement du modèle.

Une seule image contient une séquence de temps d’exposition

De nombreux capteurs CMOS exposent ou lisent les lignes séquentiellement au lieu de capturer toute l’image simultanément. Le haut et le bas de l’image affichée représentent donc des moments différents, le décalage total étant déterminé par la lecture du capteur plutôt que par la seule fréquence d’images nominale.

Une étude complète des modèles de balayage roulant examine les modèles de mouvement et les méthodes de correction associés au balayage roulant. Elle décrit la déformation géométrique comme une conséquence du mouvement relatif de la caméra ou de la scène pendant l’acquisition ligne par ligne. Cette distinction reste visible lors des essais domestiques ultérieurs.

Un mouvement lent et une lecture rapide peuvent rendre la différence négligeable. Un mouvement latéral rapide, des pales de ventilateur en rotation, les vibrations de la caméra ou un véhicule en mouvement peuvent produire un décalage évident, même lorsque l’exposition est suffisamment courte pour limiter le flou.

La déformation modifie les boîtes, les caractéristiques et les trajectoires apparentes

Les détecteurs d’objets s’appuient sur des formes et des textures apprises à partir d’images d’entraînement. Le cisaillement dépendant des lignes peut modifier les proportions ou fragmenter un bord en mouvement selon différentes positions, tandis que les systèmes de suivi peuvent interpréter le centroïde déformé comme une variation brutale de la vitesse. Un flou de mouvement peut apparaître simultanément, mais il s’agit d’un effet d’exposition distinct.

La géométrie de la vision de l’université de Linköping explique comment le balayage roulant modifie la géométrie classique des caméras et affecte des tâches de vision par ordinateur telles que la structure à partir du mouvement et la stabilisation. Le suivi par caméra domestique subit le même décalage de mesure, à une moindre échelle.

La correction de l’objectif ne supprime pas automatiquement le décalage temporel, car la distorsion de l’objectif est spatiale et essentiellement fixe, tandis que la distorsion due au balayage roulant varie avec le mouvement. L’application d’une déformation géométrique ordinaire peut même déplacer des pixels déjà déformés vers un nouveau système de coordonnées.

La direction de lecture rend l’orientation du mouvement importante

Un mouvement parallèle à la lecture des lignes peut comprimer ou étirer les formes, tandis qu’un mouvement perpendiculaire peut provoquer une inclinaison et un déplacement latéral. Un capteur à obturateur global évite le décalage temporel au sein de l’image, mais peut différer en coût, sensibilité, bruit ou résolution ; il ne constitue donc pas une amélioration systématique.

Une étude de la CVPR sur la géométrie de lecture développe des modèles formels pour les caméras à balayage roulant et montre que la géométrie de lecture détermine la manière dont les points de la scène sont observés. Le résultat confirme qu’une seule correction de distorsion ne peut pas couvrir toutes les configurations de mouvement et de capteur.

La limite d’échec apparaît lorsque la détection est évaluée uniquement sur des séquences statiques tournées de jour. Une exposition nocturne, des objets rapides, des supports flexibles et une stabilisation électronique peuvent combiner flou et décalage de manière absente de l’ensemble de test, donnant l’impression qu’un modèle n’est pas fiable uniquement pour certaines directions de mouvement.

-15% OFF

ZimaBoard 2 - Mini serveur domestique pour votre grande idée

Single board computer zimaboard2

$339.00 - $519.00

Buy Now

Effectuez un test de caméra selon la direction du mouvement

Filmez une cible connue se déplaçant horizontalement, verticalement et en diagonale à plusieurs vitesses, en pleine lumière et en faible luminosité, puis répétez l’expérience avec des vibrations contrôlées de la caméra. Conservez les images natives et mesurez les métadonnées de lecture lorsqu’elles sont disponibles, au lieu d’évaluer uniquement une transcodification NVR.

Comparez le rappel de détection, la forme des boîtes, la continuité du suivi et la position des bords avec le flux de travail à identifiants persistants présenté dans le suivi persistant. Distinguez le décalage dû au balayage roulant du flou de mouvement en faisant varier l’éclairage ou le temps d’obturation tout en maintenant constants le mouvement et la position de la caméra.

Ne considérez le balayage roulant comme significatif que lorsque l’erreur augmente avec le mouvement et les conditions de lecture prévus. Si l’effet est confirmé, comparez le montage, l’exposition, le mode du capteur, l’augmentation des données du modèle et les alternatives à obturateur global avec la même métrique au niveau de la scène.