Publications

Scanner 3D à lumière non structurée non synchronisé

memoire » M.Sc.
Chaima El Asmi
Mots-clés: Computer vision , Active reconstruction , Unstructured light , Unsynchronized camera-projector systems , Subpixel accuracy , 3D scanning
Date : 2018-08

Papyrus

http://hdl.handle.net/1866/22126

Résumé

Ce mémoire s’intéresse au domaine de la vision par ordinateur, et plus spécifiquement aux méthodes de reconstruction actives. Premièrement, il propose une nouvelle approche pour réaliser une correspondance par lumière structurée en résolvant le problème de la synchronisation caméra-projecteur. La carte de correspondances obtenue entre la caméra et le projecteur permet ensuite d'obtenir des modèles 3D denses et de grande qualité. Cette approche est idéale pour effectuer des scans de visages, qui sont difficiles à cause des mouvements involontaires des sujets. Deuxièmement, il propose une amélioration à la précision des correspondances en alignant, à une haute précision sous-pixel, le voisinage respectif de chaque pixel. Troisièmement, ce mémoire propose une application pratique de la méthode. Jusqu’à maintenant, une grande attention était nécessaire pour s'assurer que chaque image de la caméra correspondait exactement au bon patron d'une séquence projetée. Ceci était très difficile à réaliser avec du matériel à faible coût ou dans des systèmes de capture à plus grande échelle. Dans notre méthode, un flux vidéo, constitué d’un nombre choisi de patrons de lumière non structurée, est projeté en boucle à une fréquence élevée (30 à 60 fps pour du matériel ordinaire) et ces patrons sont capturés par une caméra sans aucune forme de synchronisation. La seule contrainte à satisfaire est que la fréquence de capture de la caméra et la fréquence de projection du projecteur soient connues. Le processus de correspondance permet, non seulement, de retrouver la bonne séquence de patrons, mais est aussi robuste aux expositions partielles de deux patrons consécutifs en plus de l’effet d'obturateur déroulant (rolling shutter). Par ces étapes, le problème important de la synchronisation caméra-projecteur est pris en charge. L'amélioration de la précision des correspondances est obtenue par le recours à l'interpolation sous-pixel des intensités des images suivant la mise en correspondance. On obtient ainsi une méthode comparable aux meilleures approches de mise en correspondance sous-pixel, mais avec une plus grande robustesse. Les résultats obtenus illustrent des modèles 3D reconstruits avec une très haute précision dans des conditions difficiles telles que l’illumination indirecte, les scènes discontinues ou l'utilisation d'un matériel non professionnel. La dernière partie de ce mémoire se consacre à la description de la conception et la fabrication d’un casque de réalité virtuelle personnalisé épousant les contours du visage de l’utilisateur. Avec la méthode dense et précise préalablement proposée, la méthode à lumière non structurée non synchronisée sous-pixel, il est possible d’obtenir à très bas coût un casque sur-mesure et confortable.

Documents