Gaussian Splatting for After Effectsがリリースされました。.ply ファイルを読み込んでAfter Effects内でレンダリングできます。
Gaussian Splattingは複数の画像や動画から3D空間を再現できる技術です。フォトグラメトリと似た技術に見えますが、精度や描画速度が速いというメリットガあるようで、ここ最近注目の技術となっているようです。見た目としては点群の進化版みたいな印象ですね。
ちなみにPostShotにもAEに.ply ファイルを読み込むプラグインが付属しています。
https://aescripts.com/gaussian-splatting/
https://aescripts.com/gaussian-splatting-for-davinci-resolve/
Gaussian Splatting
AfterEffects内の3Dガウススプラット（.ply）ファイルをGPUでリアルタイムに読み込み、操作、レンダリングできます。
- スプラット(.ply)のインポート
- あらゆるソフトウェアでトレーニング
特徴
- AfterEffectsで.plyファイルを読み込みます
- 球形またはボックスシェイプでクロップ
- Yプレーンでクロップ
- シーン内で最大10モデルを結合
- 球体またはボックスシェイプを使ってランプでカラーライズ
- 不透明度ランプを使ってモデルを表示
- 球体またはボックスシェイプを使ってスプラットスケールをアニメート
- 各モデルはノイズで歪ませることができます
- 3D合成用のデプスパスをレンダリング
- GPUによるリアルタイム
- 各モデルのカラーグレーディング
- シーンを.plyにエクスポート
モデルの位置合わせ
モデルをシーンの中心に合わせ、水平に配置します。
クロップ
球またはボックスとYプレーンでシーンをクロップする。
ノイズ
ノイズを使ってモデルを歪ませ、エフェクトを明らかにする。
エフェクト
内蔵ツールでシーンをアニメート。
スプラットのカラー化
球形マップをランプで色付けする。
スプラッツスケール
スプラッツの大きさをランプと球形またはボックスマップでアニメーション化し、壮大なショーを作りましょう。
スプラッツの不透明度
スプラッツの不透明度をランプで設定する。
スプラッツの変位
スプラッツの大きさをランプと球形またはボックスマップを使ってアニメーション化し、壮大なショーを作りましょう。
複数のプライスキャンを組み合わせる
シーン内で最大10モデルを使用
FAQ
ガウススプラッティングとは何ですか？
ガウススプラッティングは、画像の小さなサンプルからフォトリアリスティックなシーンをリアルタイムでレンダリングできるラスタライズ技術です。
ガウシアン・スプラッツの作り方
携帯電話やカメラで録画したビデオからスプラッツを作成することができます。ビデオ撮影をオンにして、対象物やシーンの周りをさまざまな高さや角度から歩き回ります。
- PolycamやLumaのようなモバイルアプリを使用して、ガウススプラットを作成します。
- PostShotやNerfStudioを使って、GPU上のPCでガウススプラッティングを作成する。
- Scaniverseというアプリを使って、ライダーでデバイス上にガウス型スプラッティングを作成する。
デスクトップからLumaAIでスプラットを作成し、エクスポートする方法
携帯電話やカメラで録画したビデオからスプラットを作成することができます。ビデオ撮影をオンにして、オブジェクトやシーンの周りを様々な高さや角度から歩き回ります。
- lumalabs.aiを開く
- キャプチャに移動し、作成をクリックします。
- 録画したビデオをアップロードし、トレーニングが終わるまで約30分待ちます。
- トレーニングプロセスが終了したら、スキャンを開き、「ダウンロード 」アイコンをクリックします。
- ダイアログメニューで 「Gaussian Splat 」を選択します。
注意
- アップロードできる動画は、ノーマル/フィッシュアイ/エクレクタンギュラー動画、または動画のZIPファイルです。
- 画像はzipファイルでアップロードできます。
- 動画またはzipファイルの最大サイズは5GBです。