Adeobe の生成AI「Firefly Video Model」のパブリックベータがリリースされました。長い記事ですが、新規に「AI動画生成」や「ビデオ/オーディオ翻訳」が追加されたという内容です。20言語の翻訳は便利そうですね。また、Firefly は商業利用でも安全性を保証しますという内容が繰り返されています。
https://firefly.adobe.com/?media=video
https://blog.adobe.com/en/publish/2025/02/12/meet-firefly-video-model-ai-powered-creation-with-unparalleled-creative-control
Firefly Video Modelのご紹介： 圧倒的なクリエイティブコントロールでAIを駆使したクリエイション
アドビの使命は、誰もが自分のアイデアを表現し、ストーリーを語ることができるツールを通じて、創造性を高めることです。今日、私たちは、IPフレンドリーかつ商業的に安全な唯一のジェネレーティブAIモデルであるAdobe Firefly Video Modelの発表と、Firefly web app におけるクリエイティブコントロールの拡大により、このビジョンを拡大しています。
ベータ版ではFirefly Video Modelが追加され、私たちはマルチモーダルなクリエイションのためにFireflyを構築し、クリエイティブなフローを合理化するために、ビデオ、画像、ベクター生成のすべてを1つのアプリケーションにまとめました。画像を生成して魅力的なビデオにしたり、音声を複数の新しい言語に素早く翻訳したり、テキストプロンプトを書き込んで思い通りのスタイルやカメラアングルのビデオクリップを作成したり、これらすべてをFirefly内で行うことができます。
新しい Firefly Video および Audio モデルと、既存の Image、Vector、Design モデルを組み合わせることで、Firefly は、プロのクリエイターがクリエイティブ ライフサイクル全体（アイデア出しから制作まで）で必要とする品質、管理、商業的な安全性を提供します。Photoshop web や Adobe Premiere Pro などのプロフェッショナルなツールとの統合や、世代履歴への永続的なアクセスにより、お気に入りの Creative Cloud アプリケーション全体で、コンセプトを完成したアセットに効率的に変換できます。
また、Fireflyのプレミアムビデオおよびオーディオ機能をご利用いただける、Firefly StandardとFirefly Proの2つの新サービスも発表しました。すべてのFireflyプランには、Fireflyの画像やベクター機能への無制限のアクセスと、プレミアムビデオおよびオーディオ機能のための段階的な容量が含まれているため、クリエイティブなプロジェクトを実現するために必要な適切な容量を選択することができます。さらに、Fireflyプレミアムでは、可能性の限界に挑戦したい大容量のクリエイターやチームのために、さらに多くのオーディオおよびビデオ機能を提供する予定です。
Firefly Video Modelでアイデアを形にしましょう。
Firefly Video Modelを使ったベータ版ユーザーの皆様は、Fireflyウェブアプリでの制作だけでなく、Photoshop、Illustrator、Premiere Proを使った画像や動画の制作にも取り組んでいます。Fireflyは前例のないクリエイター保護機能を備えているだけでなく、クリエイティブなビジョンを実現する方法を変えます。クリエイティブなワークフローに革命を起こし、私たちのコミュニティが、クリエイティブを完全にコントロールしながら、ビジョンにぴったり合ったカスタムBロールを作成し、ダイナミックなビジュアルエフェクトを作り、モーションエレメントをデザインするのを見てきました。さらに、タイムライン上のコンテンツのギャップを埋める必要がある場合でも、新しい要素で既存の映像を強化する必要がある場合でも、Firefly Video Modelは、効率的かつ正確にクリエイティブなビジョンを達成する力を与えてくれます。
Fireflyは、広大な自然景観から詳細な都市環境まで、ダイナミックな景観の生成に優れています。また、動物の動きや行動、天候パターンやパーティクル効果などの大気の要素、2Dと3Dの両方のアニメーションを使いこなし、モーションデザインやビジュアルストーリーテリングに新たな可能性を提供します。多くのAIモデルがそうであるように、ホタルも人間中心のコンテンツでその能力を磨き続けており、私たちはこの分野での迅速な改善に積極的に取り組んでいます。私たちのモデルの進化に伴うベストプラクティスやヒントは、Firefly内でアクセス可能な学習コンテンツやヘルプリソースで見つけることができます。
以下に示すすべての世代は、AdobeのFirefly Video Modelで作成され、90秒以内に生成されました。
風景
静寂に包まれた山々から活気あふれる街並みまで、多様な風景の息をのむような美しさを、ジェネレーティブAIビデオモデルでキャプチャしましょう。
Prompt: aerial footage of a majestic snow-capped mountain reflected in a calm lake.
大気エレメント
霧に包まれた朝、揺らめく炎、ドラマチックな嵐雲など、すべて精密に生成された美しい大気エレメントでビデオをさらに美しく。
Prompt: a flickering flame on a black background only, camera is steady and there are no objects in the video other than the flame
Prompt: cloudy mist on a green screen background only, camera is steady and there are no objects in the video other than the mist
動物
リアルで魅惑的な動物の映像で野生に命を吹き込み、自然の生息地における自然の生き物の威厳を紹介します。
Prompt: “A majestic male lion yawns while surveying his domain from a rocky outcrop at sunrise, golden light illuminating his mane. Shot with a Nikon D850, 600mm f/4 telephoto lens, capturing the intricate details of his fur and expression, photorealistic, National Geographic quality, dramatic composition.”
Prompt: “We are underwater in the deep sea, cinematic underwater footage, slightly below the ocean surface we can see a blue whale gently swimming through the water towards us, with a second whale slightly behind, warm sun beams are shining into the void from the surface, static camera and slow motion.”
2D＆3Dアニメーション
魅力的なアニメーションを簡単に作成し、高度なAIツールでアイデアをダイナミックで視覚的に魅力的なストーリーに変換します。
Prompt: a car on a windy road that is driving towards the sunset made of clay, claymation. On the horizon you can see a rocket taking off, leaving a train of white smoke.
Prompt: 3D chibi style orange cat, subtle head turns, walks away
Adobeの責任あるAI開発へのコミットメントに従い、Firefly VideoモデルはImaging、Design、Vector Fireflyモデルと同じ商業的安全基準を維持しています。このモデルは、適切にライセンスされたコンテンツ（決してアドビユーザーのコンテンツではありません）のみを対象として学習されるため、クリエイターは安心して作業を行うことができます。このモデルは現在、制作用の出力として1080pの解像度をサポートしており、将来のリリースではより高速なアイデアモデルも予定しています。
完全なクリエイティブコントロールでビデオワークフローを刷新
カメラアングル、ショットアングル、モーションなど、高度なカメラ設定でさらに細部までコントロールできます。アスペクト比は縦長、横長から選べます。ビデオの生成をより適切にガイドするために、開始と終了時にキーフレームを追加したり、テキストから画像へで画像を生成して、ビデオの生成で開始キーフレームとして簡単に開くことができます。また、Photoshop の Generative Fill や Lightroom の Generative Remove など、Adobe Creative Cloud の Firefly 機能を活用して写真を編集し、動画モデルに簡単に命を吹き込むこともできます。
Image to Videoで画像を高品質のビデオクリップにシームレスに変換し、タイムラインのギャップを埋めるBロールを生成して、スムーズでプロフェッショナルなワークフローを実現しましょう。
「Text to Image」の「編集」メニューにある「ビデオを生成」を使って、クリエイティブなアイデアをシームレスに視覚化し、洗練させることで、説得力のあるストーリーボードやピッチコンセプトを簡単に開発できます。
開始と終了のキーフレームを正確に設定することで、ビデオ作成プロセスをガイドし、一貫性のある、視覚的にまとまりのある結果を保証します。
画像生成のクリエイティブコントロールがさらに進化
Fireflyでは、想像力に合った画像を作成するために細部を微調整したり、構図を調整したり、フォトリアリスティックなスタイルを使用したり、ムードや照明を変更したり、これまでにない高度なクリエイティブコントロールで高品質な画像を作成できます。
FireflyのText to Imageインターフェイスは、クリエイティブなプロセスを効率化するために再設計されました。テキストを画像に変換するモジュール内で、過去の作品の生成、改良、レビューができるようになりました。
新しいScene to Imageモジュールを使えば、Text to Image内で直接構造参照を構築し、直感的な3Dツールを使って正確なビジュアルガイドを作成することで、クリエイティブなワークフローに3D形状をシームレスにブレンドすることができます。
オーディオでグローバルに
Translate and Lip Syncは、世界中の視聴者に向けて言語の壁を取り除く新しい方法です。オリジナルスピーカーのボーカルスタイルを維持したまま、ビデオを多言語に翻訳・ダビングできるようになりました。このテクノロジーは、翻訳された音声に合わせて口の動きを自動的に調整し、言語を超えて本物の表現とタイミングを維持します。マーケティングコンテンツ、教材、エンターテイメントメディアをローカライズする場合でも、品質や信憑性を犠牲にすることなく、多言語バージョンのコンテンツを効率的に作成できます。Translate AudioとTranslate Videoは、現在20以上の言語に対応しており、リップシンク機能は企業顧客のみが利用できます。
Fireflyはお気に入りのすべてのアプリケーションに対応しており、アイデア出しから制作まで、これまで以上に簡単かつ迅速に行えます。
どこでプロジェクトを開始しても、Fireflyはどこにいても接続され、アクセスできるので、アイデア出しから本番まで迅速に進めることができます。Firefly のジェネレーション履歴に簡単にアクセスして、中断したところから再開したり、Photoshop Web や Express に直接書き出したりできます。ダイナミックな要素でプレゼンテーションを強化したり、魅力的なソーシャルメディアコンテンツを作成したり、複数のプラットフォームでクリエイティブワークフローを効率化するのに最適です。
プレミアムなオーディオとビデオのジェネレーティブ機能を提供する新しいFireflyプラン
プレミアムAI機能の世界を開く新しいFireflyプランをご紹介できることを嬉しく思います。Fireflyのウェブアプリから、動画生成や音声翻訳ができるようになりました。これはほんの始まりにすぎません。私たちは、クリエイティブ・アプリケーション全体で、さらにプレミアムな機能を年間を通して展開していく予定です。
さらに、画像やベクターの標準機能への無制限アクセスや、ビデオやオーディオのプレミアム生成機能への段階的なアクセス権を含む、特別な早期アクセス価格もご用意しています。Adobe IDでサインインして、プレミアムビデオおよびオーディオ機能をお試しください。まずはFireflyの機能をお試しいただき、その後プランをお選びいただくか、直接こちらで最適なプランをお選びください。
Firefly StandardとProの2つのエキサイティングなオプションをご用意しました。情熱的なプロジェクトに取り組んでいる方も、大規模なコンテンツ制作を管理している方も、私たちはあなたの野心に合わせて拡張できるようにプランを設計しています。クリエイティブの燃料タンクとお考えください。毎月、プレミアム機能に必要な新しいクレジットをご利用いただけます。
IPフレンドリー、プロダクションレディ
Adobeの生成AIモデルであるAdobe Fireflyは、Adobe Stockや著作権の切れたパブリックドメインコンテンツなどのライセンスコンテンツに基づいて構築されており、お客様の創作物の商業的な安全性を保証します。私たちは、基本的なFireflyモデルをお客様のコンテンツでトレーニングすることはありません。
私たちは、クリエイターの権利が保護され、コンテンツがどのように作られ、編集されるのかが透明化され、お客様がIPフレンドリーで商業的に安全な弊社のFireflyモデルを使用したり、弊社のツールやサービスでサードパーティのモデルを安全に活用したりする選択肢を持てるような未来を実現するために取り組んでいます。
私たちはクリエイターにとって信頼できるパートナーであることを約束し、クリエイティブ・コミュニティを尊重しサポートする方法でテクノロジーをツールに統合しています。私たちは、クリエイターファーストのアプローチでAIイノベーションに取り組み、当社のAI機能が、説明責任、責任、透明性という当社のAI倫理原則に従って構築されていることを保証します。
クリエイティブAIをより良いものに、共に
私たちは、私たちのモデルを最適に強化し、クリエイティブ・コミュニティに新たなイノベーションを導入する方法について、皆さんからのご意見をお待ちしています。Discordで私たちとつながり、情報を入手し、作品を共有し、クリエイティブAIの未来を形作る手助けをしてください。私たちのDiscordコミュニティ・メンバーは、新しい機能やベータ機能をテストする機会に関する最新情報を定期的に受け取ることができます。