Appleは、人工知能を活用して高速かつ効率的に3日間のシーンを作成する方法を公開しました

Appleと香港大学は、LGTM（Less Gaussians, Texture More）という技術を発表しました。これは、高解像度の3Dシーンをより効率的に描画する方法です。

LGTMの仕組み

1. 複雑さの分離
伝統的な3Dレンダリングは、ガウス関数やその他の手法に基づき、解像度が上がるとコストが二次的に増加します。LGTMはシーンの幾何学構造を視覚的ディテールから分離します。

2. 二段階トレーニング
- 最初のステップでは、低解像度画像で簡単なジオメトリ（フレームワーク）を構築します。
- 次に、そのフレームワークと高品質の元画像を比較し、詳細テクスチャを生成するよう学習させます。このテクスチャはシンプルなフレームワークの上に重ねられます。

3. 結果
2K・4K解像度でレンダリングすると、アーティファクトや「空白」領域がなく正確な結果が得られます。しかもリソースは二次的に増加しません。

実用価値

- VR/AR
Apple Vision Proは合計23メガピクセルのディスプレイ解像度を持ち、通常は膨大な計算資源が必要です。LGTMは4Kで詳細シーンを再現しつつリソース増加を抑え、滑らかで高品質な体験を可能にします。

したがって、LGTMは高品質3Dシーンのレンダリングにおける重要な進歩であり、計算効率を維持しながら実現されます。