オクルージョン(遮蔽処理)

手前にある実世界の要素の背後に、バーチャルアイテムの該当部分を正しく隠す処理。

オクルージョンとは?

**オクルージョン(遮蔽)**とは、手前にある物体が背後にある物体を部分的に覆い隠す現象のことです。バーチャル試着や拡張現実(AR)において、オクルージョン処理は現実のシーンに対してバーチャルな商品を正しい奥行き関係で描画することを意味します。たとえば、胸の前にある手は、試着したバーチャルシャツの手前にもそのまま留まっていなければなりません。

オクルージョンの処理に失敗すると、バーチャルアイテムがあらゆるものの上に「貼り付いた」ように見えてしまいます。指の裏側に回り込むべき指輪が指全体を覆ってしまったり、生成されたジャケットが肩に垂れる髪を塗りつぶしてしまったりする現象です。これは、合成画像だと一目でバレてしまう最大の要因の一つです。

試着画像における正しいオクルージョン処理と誤ったオクルージョン処理の比較
試着画像における正しいオクルージョン処理と誤ったオクルージョン処理の比較

試着時によくある遮蔽要素(オクルーダー)

  • 肩や襟にかかる髪の毛
  • 胴体の前で組まれた手や腕
  • 服の上から身につけているバッグ、スカーフ、ジュエリーなどのアクセサリー
  • 前開きのジャケットのように、インナーを部分的に隠す他の衣服

どのように処理されるのか

リアルタイムARでは、手や身体のトラッキングに加え、シーンの深度推定を行うことで奥行きの前後関係を割り出します。一方、静止画ベースの処理パイプラインでは、画像セグメンテーションによって遮蔽要素を識別し、その「背後」に衣服が回り込むようインペインティング(画像補完)で再生成します。手前にある要素はマスクから除外され、元の写真のディテールがそのまま保持されます。

FAQ

疑問にお答えします。

なぜアパレルは硬質な商品よりもオクルージョンが難しいのですか?↓

メガネのような硬質なアイテムは、遮蔽する部位(耳や鼻など)の位置があらかじめ決まっています。一方、衣服は広い面積かつ柔軟に変形する領域をカバーするため、髪、手、重ね着した服などがどこにでも重なり合う可能性があります。そのため、オクルージョンマスクを画像ごとに個別に算出する必要があるからです。

The 30-second version

自社の商品で試してみる。

数分でShopifyにGenlookをインストールし、顧客が購入前に商品をプレビューできるようにしましょう。