画像セグメンテーション

画像を人物、衣服、背景などの領域にピクセル単位で精密に分割するコンピュータビジョン技術です。

画像セグメンテーションとは?

画像セグメンテーションは、デジタル画像をピクセル単位で個別の領域に分割するコンピュータビジョンのプロセスです。物体検出が「写真に人がいる」ことだけを示すのに対し、セグメンテーションはその人の正確な境界線をトレースし、背景から切り離したり、髪と顔、衣服同士を区別したりします。

衣服レベルのバリアントは、すべてのピクセルを肌、髪、トップス、ボトムス、靴、背景としてラベル付けするため、**パーソンパーシング(人物解析)**と呼ばれることもあります。

色分けされた領域を持つ写真とそのセグメンテーションマップ
色分けされた領域を持つ写真とそのセグメンテーションマップ

バーチャル試着における役割

セグメンテーションは、試着パイプラインの最初のステップの1つです。

  1. 衣服のマスキング:置き換える衣服のピクセルを正確に特定し、画像インペインティングのマスクとして機能します。
  2. 背景の分離:生成プロセスにおいて、人物の周囲の背景が変更されないようにします。
  3. オクルージョンの処理:衣服の前にある髪、手、またはアクセサリーを検出し、新しい衣服の上に自然に重なるように保持します。

セグメンテーションはシステムにピクセルレベルで「どこに」何があるかを伝え、姿勢推定は「体がどのような姿勢か」を伝えます。衣服転送には、この両方が必要不可欠です。

FAQ

疑問にお答えします。

セグメンテーションと背景透過の違いは何ですか?

背景の透過はセグメンテーションの応用の一つであり、被写体と背景の2つの領域に分割するものです。バーチャル試着のパイプラインでは、被写体内の個々の衣服、肌、髪を区別する、よりきめ細かい解析が必要になります。

The 30-second version

関連用語

姿勢推定
画像や動画から、人物の関節や身体的特徴点の位置を検出するコンピュータビジョン技術。
画像インペインティング
画像の指定された(マスクされた)領域だけを再生成し、その他の部分はそのまま保持する技術。
衣服転送(ガーメントトランスファー)
商品写真の衣服を人物画像上にレンダリングし、自然に着用しているように見せるAI技術のプロセス。
オクルージョン
手前にある現実世界の要素の背後に、バーチャルなオブジェクトの適切な部分を隠して描画すること。

自社の商品で試してみる。

数分でShopifyにGenlookをインストールし、顧客が購入前に商品をプレビューできるようにしましょう。