MetaHuman Animator Markerless Motion Capture Plugin

Epicが動画からマーカーレスでモーションキャプチャを行うプラグイン「MetaHuman Animator Markerless Motion Capture Plugin」をリリースしました。

現在動画からモーションキャプチャするサービスは、サーバー上で処理する物が多いです。このプラグインはローカルPC内で処理するのが特長です。カメラ固定の場合に精度高くキャプチャできるらしいです。

https://www.fab.com/listings/4095b8e0-3eff-44f1-acb4-cb40b99228b9
https://dev.epicgames.com/documentation/metahuman/metahuman-animation-from-mono-video-capture-in-unreal-engine

MetaHuman Animator Markerless Motion Capture Plugin

Unreal Engine の MetaHuman Animator を拡張するために設計されたこのプラグインは、一般的な動画映像からボディアニメーションを生成します。自宅でスマートフォンを使って撮影した映像でも、スタジオでのハイエンドな撮影環境でも、動画をそのままアニメーションに変換し、制作物へ直接取り込むことができます。マーカー、モーションキャプチャースーツ、専用のモーションキャプチャーステージは不要です。フルパフォーマンスキャプチャーが Unreal Engine 内で誰でも利用できるようになりました。

すべての処理はお使いのマシン上で実行されます。映像データがワークステーション外へ送信されることはなく、生成されたテイクは他のアニメーションと同様に Sequencer 内で調整や編集が可能です。さらに、MetaHuman Animator の既存のフェイシャルソルブ機能を活用し、顔と身体を同時にキャプチャすることもできます。

主な機能

マーカーレス・ボディキャプチャー

動画映像から手の動きまで含む全身アニメーションを生成します。MetaHuman スケルトンを直接駆動できるほか、他のキャラクタータイプへリターゲットすることも可能です。

ローカル処理

すべてお使いのマシン上で実行されます。クラウド不要、クレジット消費なし、面倒な手続きもありません。

柔軟な顔・身体キャプチャー

単一の動画ソースから MetaHuman Animator の既存フェイシャルソルブにボディアニメーションを追加できるほか、別のスマートフォンやヘッドマウントカメラで撮影した顔映像とボディキャプチャーを組み合わせることもできます。

スクリプトによる自動化

MetaHuman Animator の他の機能と同じアセットおよび処理フローを使用し、Python や Blueprint による自動化にも対応しています。