影像局部重繪
重新生成影像中的特定遮罩區域，同時保持影像其餘部分原封不動的技術。
什麼是影像局部重繪？
影像局部重繪 (Image inpainting) 是一種電腦視覺技術，用於重建或替換影像的選定區域，同時保持其餘部分原封不動。這項技術最初用於修復受損照片與移除物件，現在則普遍透過擴散模型 (diffusion models) 執行，以具備情境感知能力的新內容來填補遮罩區域。
在虛擬試穿中，局部重繪會將生成範圍限制在服裝區域：原始照片中的臉部、頭髮與背景會逐像素完整保留，僅重新生成服飾部分。
在試穿流程中如何運作
- 建立遮罩：影像分割 (image segmentation) 會針對要替換的服飾產生精確至像素等級的遮罩。
- 情境編碼：模型會分析遮罩外部的所有元素：膚色、光線方向與背景。
- 條件式重繪：在產品圖片與人物姿勢的引導下，使用新服飾填補遮罩區域。
- 融合處理：將遮罩邊緣進行羽化處理，使重繪區域能平滑過渡至保留的原始像素。
主要挑戰
- 遮罩準確度：若遮罩漏掉袖子，將導致舊衣物外露；若遮罩過大，則可能侵蝕手部或頭髮的像素。
- 遮擋 (Occlusion)：擋在衣物前方的頭髮或交叉的雙臂必須維持在前景。
- 邊界真實感：生成像素與原始像素間若出現明顯接縫將破壞真實感，特別是在衣領與下擺處。
常見問答
為您解答疑問。
局部重繪與內容感知填色是一樣的嗎？↓
概念相同，但功能不同。內容感知填色是複製周圍的紋理來隱藏物件；而生成式局部重繪則是合成出具備語意正確性的全新內容，例如生成照片中原本不存在的服飾。
相關術語