Occlusion

Qu'est-ce que l'occlusion ?

L'occlusion se produit lorsqu'un objet plus proche de l'observateur masque une partie d'un objet situé derrière lui. Dans l'essayage virtuel et la réalité augmentée, la gestion de l'occlusion consiste à rendre les produits virtuels avec le bon ordre de profondeur par rapport à la scène réelle : une main devant une chemise doit rester devant la chemise virtuelle également.

Lorsque l'occlusion échoue, l'article virtuel semble collé par-dessus tout le reste : une bague couvrant le doigt qui devrait cacher l'arrière de l'anneau, ou une veste générée recouvrant les cheveux qui tombent sur les épaules. C'est l'un des signes les plus évidents qu'une image est fausse.

Les éléments bloquants fréquents

• Les cheveux tombant sur les épaules et les cols
• Les mains et les bras croisés devant le torse
• Les accessoires tels que les sacs, les écharpes ou les bijoux portés sur les vêtements
• D'autres vêtements, comme une veste ouverte couvrant partiellement le haut en dessous

Comment l'occlusion est-elle gérée ?

Dans la RA en direct, l'ordre de profondeur provient du suivi en temps réel des mains et du corps, ainsi que de l'estimation de la profondeur de la scène. Dans les processus basés sur l'image, la segmentation d'image identifie les éléments bloquants afin que l'inpainting regénère le vêtement derrière eux. Ces éléments sont exclus du masque et préservés à partir de la photo d'origine.

FAQ

Vos questions, nos réponses.

Pourquoi l'occlusion est-elle plus difficile pour les vêtements que pour les objets rigides ?↓

Les articles rigides comme les lunettes ont des éléments bloquants prévisibles (oreilles, nez) à des positions connues. Les vêtements couvrent de vastes zones déformables où les cheveux, les mains et les couches de vêtements peuvent se superposer n'importe où, le masque d'occlusion doit donc être calculé pour chaque image.