Inpainting de Imagem

O que é inpainting de imagem?

O inpainting de imagem é uma técnica de visão computacional que reconstrói ou substitui uma região selecionada de uma imagem, mantendo o restante intacto. Originalmente usado para restaurar fotografias danificadas e remover objetos, hoje é comumente executado por modelos de difusão, que preenchem a região da máscara com um conteúdo novo e coerente com o contexto.

No provador virtual, o inpainting restringe a geração à região da roupa: o rosto, o cabelo e o fundo da foto original são preservados pixel a pixel, e apenas a área da peça de roupa é regenerada.

Como funciona no fluxo do provador

1. Criação da máscara: a segmentação de imagem produz uma máscara com precisão de pixels da roupa a ser substituída.
2. Codificação de contexto: o modelo analisa tudo fora da máscara, como o tom de pele, a direção da luz e o fundo.
3. Regeneração condicionada: a área mascarada é preenchida com a nova peça, guiada pela imagem do produto e pela pose da pessoa.
4. Mesclagem: as bordas da máscara são suavizadas para que a região regenerada se integre perfeitamente aos pixels preservados.

Principais desafios

• Precisão da máscara: uma máscara que não cobre uma manga deixa a roupa antiga visível; uma que é grande demais acaba cortando mãos ou cabelos.
• Oclusão: cabelos ou braços cruzados na frente da roupa devem permanecer no primeiro plano.
• Realismo das bordas: emendas visíveis entre os pixels gerados e os originais quebram a ilusão, especialmente em golas e bainhas.

FAQ

Dúvidas respondidas.

O inpainting é a mesma coisa que preenchimento sensível ao conteúdo?↓

A ideia é semelhante, mas a capacidade é diferente. O preenchimento sensível ao conteúdo copia as texturas ao redor para esconder um objeto; já o inpainting generativo sintetiza um conteúdo novo e semanticamente correto, como uma peça de roupa que não estava na foto original.