オクルージョン
視点に近い現実世界の要素の後ろに、バーチャルオブジェクトの適切な部分を隠すこと。
オクルージョンとは？
オクルージョンとは、視点に近いオブジェクトが、その後ろにあるオブジェクトの一部を隠す状態のことです。バーチャル試着や拡張現実（AR）において、オクルージョン処理とは、現実のシーンに対して正しい深度の順序でバーチャル商品をレンダリングすることを意味します。例えば、シャツの前にある手は、バーチャルなシャツの前にも配置されなければなりません。
オクルージョンが機能しない場合、バーチャルアイテムはすべてのものの上に描画されているように見えます。指の裏側を隠すべきリングが指を覆ってしまったり、生成されたジャケットがその上に垂れる髪を上書きしてしまったりします。これは、画像が合成であることを最も露呈してしまう要素の1つです。
試着における一般的なオクルージョン要因（オクルーダー）
- 肩や襟にかかる髪
- 胴体の前で交差した手や腕
- 衣服の上に着用したバッグ、スカーフ、ジュエリーなどのアクセサリー
- 下のトップスを部分的に隠している開いたジャケットなどの他の衣類
処理方法
ライブARでは、リアルタイムの手や体のトラッキングに加え、シーンの深度推定から深度の順序付けが行われます。画像ベースのパイプラインでは、画像セグメンテーションによって遮蔽要素（オクルーダー）を特定し、インペインティングによってそれらの後ろに衣服を再生成します。オクルーダーはマスクから除外され、元の写真からそのまま保持されます。
FAQ
疑問にお答えします。
アパレル製品のオクルージョンが、硬い製品よりも難しいのはなぜですか？↓
メガネのような硬いアイテムは、耳や鼻など、予測可能な位置にオクルーダーがあります。一方、衣服は広くて変形しやすい領域を覆うため、髪、手、重ね着した衣類などがどこでも重なる可能性があり、画像ごとにオクルージョンマスクを計算する必要があるからです。
関連用語
- 画像セグメンテーション
- 画像を人物、衣服、背景などの領域にピクセル単位で正確に分割するコンピュータビジョンの技術。
- 拡張現実 (AR)
- デジタルコンテンツ（3Dモデル、画像、情報）を現実世界のライブビューに重ね合わせる技術。
- 衣服転送 (Garment Transfer)
- 製品写真の衣服を人物画像にレンダリングするAIプロセス。
- 画像インペインティング
- 画像の特定のマスク領域を再生成し、その他の部分は元の状態のまま維持する画像処理技術のこと。