画像セグメンテーション
画像を人物、衣服、背景などの領域にピクセル単位で正確に分割するコンピュータビジョンの技術。
画像セグメンテーションとは?
画像セグメンテーションは、デジタル画像をピクセルレベルで個別の領域に分割するコンピュータビジョンのプロセスです。オブジェクト検出が「この写真に人がいる」としか言わないのに対し、セグメンテーションはその人物の正確な境界線をトレースし、背景から切り離し、髪と顔、さらには衣服同士を分離します。
衣服レベルのバリエーションは、よくパーソンパーシングと呼ばれ、すべてのピクセルを肌、髪、トップス、ボトムス、靴、または背景としてラベル付けします。

バーチャル試着における役割
セグメンテーションは、試着パイプラインの最初のステップの1つです。
- 衣服のマスキング: 置き換える衣服の正確なピクセルを特定し、それが画像インペインティングのマスクになります。
- 背景の分離: 生成によって人物の周囲の背景が変更されないようにします。
- オクルージョンの処理: 衣服の前にある髪、手、アクセサリーを検出し、新しい衣服の上に保持されるようにします。
セグメンテーションはシステムにピクセルレベルで「どこに」あるかを伝え、姿勢推定は「体がどのような姿勢か」を伝えます。衣服転送にはその両方が必要です。
FAQ
疑問にお答えします。
セグメンテーションと背景の切り抜きの違いは何ですか?↓
背景の切り抜きはセグメンテーションの1つの応用であり、2つの領域(被写体と背景)に分割するものです。試着パイプラインでは、被写体内の個々の衣服、肌、髪を区別する、より細かい解析が必要です。
関連用語
- 姿勢推定
- 画像や動画内の人体の関節やランドマークの位置を検出するコンピュータビジョン技術です。
- 画像インペインティング
- 画像の特定のマスク領域を再生成し、その他の部分は元の状態のまま維持する画像処理技術のこと。
- 衣服転送 (Garment Transfer)
- 製品写真の衣服を人物画像にレンダリングするAIプロセス。
- オクルージョン
- 視点に近い現実世界の要素の後ろに、バーチャルオブジェクトの適切な部分を隠すこと。