壁の向こうから見つけ出される Stanford Bunny
平面の中継壁で観測範囲やサンプリングを制限した場合のStanford Bunny復元シミュレーションです。出典: Y. Wang et al., “Non-line-of-sight imaging with arbitrary relay surface geometries via 3D Gaussian Transient Rendering”, Figure 7, arXiv:2606.21270 / SIGGRAPH 2026.
今回のStanford bunny
Stanford bunnyは、直接見えない物体を、壁で反射した間接光から復元するNon-Line-of-Sight imagingのシミュレーションに使われています。Figure 7では、平面の中継壁で観測範囲やサンプリングを制限し、復元精度を調べています。
光源からrelay surface、隠れた物体、再びrelay surface、sensorへ戻る多重反射のtransient signalを利用します。提案法では3D Gaussianによるscene representationとtransient renderingを組み合わせ、relay surfaceが単純な平面でない場合にも対応します。
今回は壁の向こうへ隠されたものの、時間分解された光の往復から見つけ出されます。
今回の扱い：直接視界から隠され、間接transient lightから3D形状を復元される
状態：無傷
論文の内容
NLOS imaging
Non-Line-of-Sight imagingでは、sensorから直接見えないsceneを間接反射光から推定します。pulsed lightをrelay surfaceへ照射し、戻ってくる光のtime-of-flightを測ることでhidden geometryの情報を得ます。
従来手法の多くはrelay surfaceが平面であることを強く仮定しますが、実環境では壁や中継面が曲がっている場合があります。
3D Gaussian representation
提案法はhidden sceneを3D Gaussian primitiveの集合として表現します。各primitiveの位置、scale、orientation、albedo（散乱強度）を最適化し、transient measurementを説明できる表現を求めます。
明示meshを直接最適化するより、連続的でdifferentiableなrenderingへ組み込みやすい表現です。
Transient rendering
通常のimage renderingではpixel intensityを積分しますが、NLOSでは光が到達する時刻ごとのresponseを計算する必要があります。
relay surfaceのgeometryを含めたpath lengthからtransient binを求め、predicted transientとmeasurementの差をlossとして最適化します。
Arbitrary relay surface
LOS計測から得た中継面の位置と法線をrendering modelへ含め、curved / non-planarな面にも対応します。最適化後は仮想的な平面上のtransientを合成し、従来のNLOS solverで最終的なvolumeを復元します。
評価と制約
synthetic / measured transient dataで既存法と比較し、複雑なhidden geometryの復元結果を示します。
一方、transient sensorのtemporal resolution、relay geometry calibration、indirect light noiseは精度に影響します。非常に弱いsignalや複雑なmulti-bounceではoptimizationも難しくなります。
論文情報
Non-line-of-sight imaging with arbitrary relay surface geometries via 3D Gaussian Transient Rendering
- arXiv: https://arxiv.org/abs/2606.21270
- Venue: SIGGRAPH 2026
- 分野: Computational Imaging / Inverse Rendering / NLOS
- 使用モデル: Stanford bunny
- 使用箇所: Figure 7
- 用途: 平面の中継壁で観測条件を制限したNLOS 3D reconstruction評価