世界中で話題になったTVCM「Orange - la Compil des Bleues」のメイキング記事が公開されています。サッカー興味ないのでまったく知りませんでしたが、AIは使わずFlameで手作業による合成らしいです。
https://www.fxguide.com/fxfeatured/how-they-did-that-brilliant-womens-football-tvc/
女子サッカーTVCMはどのように作られたか？
フランスのProdigious社でシニアフレイムアーティスト兼VFXスーパーバイザーを務めるニコラ・ヴォーゲルは、世界中で大流行した「Orange - la Compil des Bleues」のTVCMを担当した。ストーリーテリングのためのVFXとしては、ここ数年で最も印象的な作品のひとつです。しかも、その映像はすべてストック映像であり、コンポジットのほとんどはFlameでAIを使わずに行われている。私たちはフランスのニコラに、この信じられないほど効果的なコミュニケーション作品と、同様に印象的なコンポジットについて話を聞いた。
FXGUIDE：あなたとチームは何本のシュートを打ちましたか？
Nicolas：最初は、5つのゲームアクションを3つのショットに分けてやることになっていました。つまり15ショットです。しかしエージェンシーからは、非常にダイナミックな編集をするために、できるだけ多くのショットをフェイクするようにと言われました。最終的には35ショットをこなしました。
FXGUIDE： VFXはFlameで行われたのですね？
Nicolas：ショットの90％はFlameを使っています。顔の置き換え」はすべてFlameで行いました。女性の髪の毛はすべてFlame上で「ペイント」ツールを使って1フレームずつ消していきました。
Reveal」シーケンスのモーションデザインはAfterFxで行ったので、「Before/After」ショットを行うために偽のソフトウェアインターフェイスを作らなければならなかった。
多くの人が信じていることに反して、これはDeepfakeのソリューションではありません。とはいえ、AIがこの種のエフェクトでどんなことができるのか、興味津々です。
FXGUIDE： ディープフェイクやMLソリューションの検討はしましたか？もしそうなら、なぜFlameを選んだのですか？
Nicolas：このプロジェクトは1年前に始まりました。マルセルの代理店から、女子サッカー選手をフランス代表の選手に置き換えるというアイデアが持ち込まれたのです。当時、Podigiousポストプロダクションの責任者だったクエンティン・マルタンが、このプロジェクトが実現可能かどうか私に相談に来ました。私はすぐに素晴らしいアイデアだと思いました。このプロジェクトを絶対に成功させなければならないと。
私たちはすぐに3つの異なる技術を検討した：
- DeepdFake、
- 3Dマッピング
- Flameでの合成です。
私は数カ月前に他のプロジェクトで顔の置き換えに取り組んでいたので、これらの異なる技術を比較することができましたが、その限界は十分承知していました。
ディープフェイクは、MLにたくさんの画像を送り込まなければならないので、制作にとても時間がかかります。また、Deepfakeのレンダリング画像をレタッチする必要があり、特に複雑な動きについては、必ずしもうまく機能するとは限りません。そのため、この手法を選択するのは危険でした。
2つ目の選択肢は3Dマッピングでした。しかし、ここでも制作時間が長すぎました。また、選手の3Dスキャンも必要だったため、制作コストも高すぎました。
Flameで顔を変えるのは、私がすでにやったことのあるトリックで、適切な画像ソースさえあれば不可能だとは思いませんでした。
私たちはマルセルにこのテクニックを提案しました。そして、十分にリアルな結果が得られるかどうか、2つのショットでテストを行うよう依頼されました。週間後、エージェンシーはテストを検証しました。
FXGUIDE： 典型的なショットのFlameでのプロセスを概説できますか？
Nicolas：各プランは、複数のアクション・ノードからなる1つのバッチに対応しています。複数のグラフィックデザイナーが、ショットの異なる部分を同時に作業することができます。
まず、背景（ピッチや観客のいるスタンドなど）を再現することで、選手の頭を完全に消す必要がありました。
それから、男子の頭部をロトスコープし、スタビライズし、女子の動きをトラッキングした。男性の映像のリタイミングも必要だった。それから、首とシャツの襟のつなぎ目をワーピング（歪みツール）を使って調整しました。
次に、選手のモルフォロジーに取り組みました：
- 胸を消す（変形作業とシャツの影の除去）
- 腕、胸、太ももを拡大
- 筋肉を再設計し（ペイント＋トラッキング）、肌の色を調整した（キーヤ＋ロト＋カラーワーパー）
最後に、服の色を変え、シャツの名前と背番号を変え、ジャージとショーツの見えるところに2つの星を追加しました。
すべてのワイドショットで、選手の長い髪をフレームごとに消しました。特にゴールネット裏のアクションは厄介でした。また、ワイドショットで選手が多すぎる場合も消しました。
FXGUIDE： 各ショットについて、男子の映像の中からどうやって一致する映像を見つけたのか話してもらえますか？試合映像からですか、それともこのためだけに新たに撮影した映像ですか？
Nicolas：最初のテストの後、男子選手との撮影を企画することが重要だと考えました。複数のカメラでスピナーを使って、あらゆる角度から撮影したかったです。しかし、全選手を集めて撮影することは不可能だったので、このアイデアはすぐに頓挫し、実際の試合映像、つまりアーカイブ映像のみを使用することになりました。
私たちはFFFの画像バンクを利用することができました。Les Artisans du Film が画像検索を担当し、過去3年間の全試合における選手のベストアクションをプリ・エディットしてくれました。3週間かかりました。その後、私はフェイクするには複雑すぎるショットを除外し、編集者が最終カットを始める間に、彼らは男子の試合で対応する画像を探し始めました。
FXGUIDE: 現場でどのくらい働きましたか？
Nicolas：1年前に1回目のテストを行いました。
Les Artisans du Film によるイメージ・リサーチは3週間続きました。
Prodigiousのグラフィック・アーティスト、セバスチャン・ドゥルクールとエミリア・ルドンディが6週間私と一緒にFlameを使い、ほとんどのショットのリギングを行いました。
最後の2週間は、Prodigiousの他の多くのグラフィックデザイナーとアシスタント・グラフィックデザイナーに手伝ってもらい、予定通りに完成させることができました。
最終的に、編集に2週間、Flameに70日、After FXに20日かかりました。
スポットの制作には7週間を要しました。
FXGUIDE：「コンポジットを売る」ためのグレーディングはどの程度複雑でしたか？
Nicolas：一般的に言って、2つのショットをうまく合成するには、同じ光の方向、カメラ軸、焦点距離が必要です。これを達成できれば、仕事の50％は終わったことになります。
公式戦だけを使うことで、ようやくこの条件を満たすことができました。
サッカーの試合をテレビで見ることに慣れている人なら、カメラがいつも同じ場所にあることに気づくでしょう。試合は夕方に行われることが多く、スタジアムはいつも同じように照らされ、四方から光が差し込みます。ピッチ上の選手の影を見てください。グラウンドには常に4つの影があります。光はほぼ毎回一致します。
正直言って、これは予想していなかったことで、本当に嬉しい驚きでした。時には運も必要です！
FXGUIDE： 検討して削除されたりしたショットはたくさんありましたか? それとも、すべてのショットがオリジナルの編集だったのですか？
Nicolas：長すぎたり、多くの選手が写っていたり、動きを合わせるのが不可能だったりと、複雑すぎるショットはすべて選考から外しました。
FFFの画像バンクでショットを探している間に、ポストプロデューサーのジョナサン・ケイタが、もっとフェイクとして面白いショットを見つけてくれました。他のカメラ軸でアクションを切り取ることができました。だから、モンタージュのショットを自分の都合のいいように変えることができた。一方、カルチャウイの最初のドリブル、ル・ソンマーの最後の祝賀、カスカリーノの驚異的な走りなど、特定の重要なショットは編集で絶対にリギングすることに代理店と合意していました。
FXGUIDE： これはどのような解像度で仕上げられたのですか？ベースとなる女性の映像はHDだったと思いますが？
Nicolas： 画像ソースはHD（1920×1080）です。
FXGUIDE: 特に誇りに思っているショットはありますか？
Nicolas：最後のショットはかなり誇りに思っています。アントワーヌ・グリーズマンがいつも長袖を着てプレーするので、シャツに長袖を追加してほしいというものです。ここでもFlameのMotion Warpを使い、わずか数時間で仕上げました。
そして何よりも、私たちがこのチャレンジに立ち向かい、このプロジェクトの実現に貢献できたことを誇りに思います。
素晴らしいアイデアから始まり、私たちはこの素晴らしいコンセプトに絶対に応えなければなりませんでした。
マルセルエージェンシーは常に私たちを信頼し、疑うようなことはありませんでした。このプロジェクトに取り組む機会を与えてくれた彼らに心から感謝しています。
このスポットは世界中で話題を呼び、人々が評価してくれるだろうという予感はありましたが、これほど大きな反響があるとは予想できませんでした。
このアイデアを思いついたマルセルのアントナン・ジャコとヴァンサン・テフェーヌを本当にうれしく思っている。この成功は本当に当然の報いです。
FXGUIDE：本当にありがとうございます。