参考資料

参考資料

Real ESRGAN Bat

中国の開発者が公開しているアニメやイラストに特化したアップスケールAIツール「Real-ESRGAN」を簡単に使用できるようにした.batファイルが公開されています。画像を.batにドラッグすると4倍にアップスケールできます。
サンプルの写真を拡大するとイラストをベクター化して拡大したような見た目になって面白いですね。ワンピースのサンプルビデオ入ってる。。。

https://cgpiece.gumroad.com/l/odwfq

 

 

 

Real-ESRGAN

 

Real ESRGAN Bat

今日はフリーでオープンソースのAI画像拡大ツールを紹介します。ベクターやイラストの写真を扱うときに、とても素晴らしい結果を得ることができます。モザイクから高画質まで、完全無料ですぐに使えるように、簡単な.batファイルを書きました。XnViewでも使えるので、とても便利です。

 

インストール方法

  1. Real-ESRGANのWindows版を https://github.com/xinntao/Real-ESRGAN/releases からダウンロードし、フォルダに解凍する。
  2. Real-ESRGAN.batファイルをここから解凍し、上記のフォルダに入れる。
  3. 拡大したい画像をReal-ESRGAN.batにドラッグ&ドロップします。Real-ESRGAN.bat のショートカットアイコンをデスクトップに送信することもできます。

Real-ESRGAN.bat を XnView に追加するには、「ファイル/プログラムを開く/プログラムの追加」を実行します。すると、XnView から Real-ESRGAN.bat を素早く呼び出せるショートカットキー(通常は Alt + 1)が表示されます。

 

その他

デフォルトはrealesrgan-x4plus-animeモードで、ベクターやイラストの画像処理に適しており、2行目の末尾にあるbatファイルを開いて修正することが可能です。
処理後の画像はデフォルトで自動的に開かれますが、3行目を削除することで無効化できます。

参考資料

PBRマテリアルデータベース「Physically Based」

ゲーム アーティストのAnton Palmqvistさんが作成した、PBRマテリアルデータベース「Physically Based」が公開されています。
データベースには100 を超える実世界のマテリアル、ライトソース、カメラ センサーの物理的特性が公開されています。

https://physicallybased.info/

 

リスト上部にあるドロップダウンを使用して設定を切り替えできます。 レンダラーを指定できるのは面白いですね。

  • Engine :Arnold、Blender、OctaneRender、Omniverse、Redshift、Unity、Unreal Engine、V-Ray
  • Color Space : sRGB Linear、ACEScg
  • Color Representation : 数値、 16 進数
  • Light Units :フォトメトリック、ラジオメトリック

参考資料

VW Amarok - Reveal

PVとして効果的かはわからないけど、CGの雰囲気がいいからヨシ!

参考資料

Amazon Books ‘That Reading Feeling’

Amazon Booksのプロモーションビデオかな?本読んでるときの感覚がよく表現できてる映像になってます。

参考資料

CARS | City Sample UE5

UE5を使用してレンダリングした車の動画が公開されていました。背景はマトリクスのデモ用に作成されたCity Sampleを使用しているようです。

反射やシェーディングが安定してるのでPath Tracer使ってるのかな?UnityもUE5もPath Tracer搭載してるので、ゲームエンジンと言ってもプリレンダリング向けのレンダラーと変わらない品質になってきましたね。

参考資料

Deep Fx WorldがすべてのLightWaveプラグインの販売を終了

Deep Fx Worldが、Deep FX StudioとすべてのLightWaveプラグインの販売を終了をアナウンスしました。LightWaveが更新されなくなりユーザーが減ってしまったのが原因とのことです。意欲的に開発してたのに軌道に乗らなかったのは残念ですね。

https://www.deepfxworld.com/news_article.php?id=171

 

End Of the Road

2022年6月17日

大変悲しいことですが、これを書かせていただきます。Deep Fx Worldは、Deep FX StudioとすべてのLightwaveプラグインの販売を終了することになりました。理由は簡単で、現在の経済情勢と、いくつかの製品が人気を得られなかったことが、この決定の原因です。
このベンチャーはLightwave 3Dから始まりましたが、それは追って通知があるまで販売中止となったようです。その顧客層が減ってしまったということです。Deep FX Studioに関しては、そのアイデアが伝わらず、販売が軌道に乗らなかったのでしょう。

この決定は急いだものではなく、1年以上状況を見守り続けてきましたが、何も改善されていません。これは最終的な決起集会でもなければ、直前の購入の呼びかけでもありません。Deep Rising FXは200人近い顧客を抱え、その多くが複数回アップグレードするなど、本当によくやったと思います。しかし、残念ながらそのプラグインも終焉を迎え、どのような方向に進んでいくのか、私には本当に見えません。最後のバージョンは堅実であり、作られたすべての約束を果たしました。

ウェブサイトは未定で機能し続ける予定です。私はまだこの分野と仕事に情熱を持っています。結局のところ、それは私の趣味であり、それはおそらくしばらくの間続きます。Deep FX Studioの試用版は、まだどうするか決めていないため、そのままにしておきます。部分的にはオープンソースにするかもしれませんが、残念ながら、毎日使っている私の個人的なコードベースとつながっているため、全体をオープンソースにすることはできません。
しかし、今日から現在の製品の販売は一切行いません。できれば他のことに移行するつもりですし、もう力を入れていない製品でお金を取り続けるのは無責任なことです。

これまで楽しく、エキサイティングな時間を過ごさせていただきました。

参考資料

Anime4K Player

リアルタイムアニメ高解像度化AI「Anime4K」を組み込んだ動画プレイヤーが発売されています。体験版がないので品質はわかりませんが、価格が980円とお安いです。

https://ja.cre8tiveai.com/anime4k

 

 

Anime4K Player とは?

リアルタイムアニメ高解像度化AI「Anime4K」を組み込んだ動画プレイヤーです。
動画プレイヤー mpv を利用しており、お手持ちのアニメをリアルタイムで高解像化しながら視聴することができます。通常、 Anime4K を利用するには特殊なセットアップが必要となります。Anime4K Player ではこのセットアップがワンクリックで完了します。

またAnime4K Player では、ご利用になるPC環境や高解像度化する動画サイズに合わせて、Regular、Middle、Ultra の3つの高解像度化モードを用意しています。
Regular は最も軽量な高解像度化モードでご家庭の一般的なPCで動作します。UltraはGPUが搭載されているPC環境を前提としており、
より高品質な高解像度化を行います。UI画面から直感的に高解像度化モードを切り替えることが可能です。

 

仕様

  • 提供物:動画プレイヤー(avi, mov, mp4, mkf 対応)
  • 対応OS:Windows10 64ビット版, Windows11 64ビット版 / MacOS 10.15以降

 

動作環境

以下の動作環境は、Regular, Superモードを想定した環境のため、Ultra を利用する場合は外付けGPUの利用を推奨します。なお、元ファイルのサイズがFullHD 以上の動画を高解像度化する場合は、動作環境に限らず外付けGPU が必須となります。

Windows

CPU:Intel Core i5(第11世代〜)以上
メモリ:8GB以上
GPU:GeForce GTX1070以上 / ビデオメモリ4GB以上

Mac

CPU:Intel Core i5(第11世代〜)以上
メモリ:8GB以上
GPU:Radeon5300M以上 / ビデオメモリ4GB以上

 

価格

  • Anime4K Player 980円 / 1ライセンス

1つのライセンスで1台のマシンにインストールすることができます。複数のマシンにインストールしたい場合は、追加でライセンスをご購入ください。

参考資料

Xbox Design Lab

日本マイクロソフトが「Xbox Design Lab」の日本国内展開を発表しました。Xbox Design Labはパーツごとにカラーリングを選んでオリジナルのXbox Wireless Controllerを購入できるサービスです。カスタマイズコントローラーの価格は基本¥7,678+アドオン。

北米や西欧では2016年からXbox One用のサービスが行われてましたが、今回日本をはじめ、オーストラリア、ニュージーランド、韓国、シンガポール、チェコ、ギリシャ、ハンガリー、ノルウェー、スロヴァキア、スイスでのサービス展開が発表されました。

Xbox Wireless Controllerは持ちやすい形状とFPSゲームでも使いやすいアナログスティックが特長で、PC用のゲームコントローラーとして鉄板アイテムです。品薄状態が続いていたので、コントローラーが安定供給されるのはうれしいですね。

https://xboxdesignlab.xbox.com/ja-jp/

 


 

 

自分のものにしよう

Xbox ワイヤレス コントローラーを、スタイリッシュなパステルカラー、エキサイティングなカムフラージュパターン、独特な仕上がり、ゴム製のグリップなどを特徴とする Xbox Design Lab でカスタマイズしてください。

 

カスタマイズする

好きなカラーを選んで

パステルカラーやカムフラージュパターンが加わった、29 色のパレットから選んでください。

ボタンのスタイルを選択

配色に合わせてさまざまなスタイルから選択してください。

カスタマイズする

オプションのメタリック仕上げ、ゴム被覆グリップ、刻印で自分だけのデザインに。

コントローラーを作る

ご注文いただくと、Xbox がカスタム コントローラーを製造し、ご購入から 28 日以内にお届けします。

 

インスピレーションソース

参考資料

Apple RoomPlan

Appleが「ARKit 6」の新しいAPIとして「RoomPlan」が発表されています。
iPhoneを使用して部屋の間取りをリアルタイムスキャンし、モデルをUSDZでエクスポートできるようです。アタリ用のモデルとして便利そうです。

https://developer.apple.com/augmented-reality/roomplan/

 

RoomPlanであなたのアプリに周囲を取り込んでください。

顧客の関心を引き、ワークフローを合理化

RoomPlan を使用して、不動産、E コマース、ホスピタリティなどのアプリで直接部屋のフロアプランを作成することで、顧客がより多くの情報に基づいた意思決定を行えるようにします。また、これらのスキャンは、建築やインテリアデザインのワークフローにおける最初のステップとなり、コンセプトの探求やプランニングを合理化するのに役立ちます。

 

LiDARによるリアルタイムスキャン

アプリのユーザーエクスペリエンスとスキャンガイダンスを完全にカスタマイズしたり、内蔵のコーチングUIを利用して最適なスキャン、リアルタイムのスキャン進捗を示すビジュアルフィードバック、認識された部屋のすべてを示すドールハウス可視化などを行うことができます。

 

パラメトリック表示

RoomPlan は、壁やキャビネットなど、部屋の中で認識された各コンポーネントの寸法と、検出された家具の種類を含む USD または USDZ ファイル形式で出力します。個々のコンポーネントの寸法と配置は、Cinema 4D、Shapr3D、AutoCADなど、さまざまなUSDZ互換ツールにエクスポートする際にさらに調整することができます。

参考資料

ChurCHILL - Slide

犬わいい。実写で滑り台を撮影してからCGおこしてるのが面白いですね。

参考資料

Verizon Fios Refresh

ネットとビデオオンデマンドサービスを展開するVerizon Fiosの映画をイメージした動画のようです。レンダリング綺麗で雰囲気もいいですね。

参考資料

写真から人やオブジェクトを消すサービス「Cleanup.Pictures」

AIを使用して写真から人やオブジェクトをペイントするだけで削除するサービス「Cleanup.Pictures」が話題になってたのでメモ。

https://cleanup.pictures/

 

信じられないほどの品質で数秒で画像をレタッチ

 

ユースケース

フォトグラファー

写真家は印刷する前に写真からタイムスタンプを削除するためにCleanup.picturesを使用しています。Cleanup.picturesを使用すると、任意の不要なものを削除し、写真をきれいにすることができます。

 

クリエイティブ・エージェンシー

クリエイターはCleanupを使って完璧なビジュアルを瞬時に作り上げます。
どんな既存の写真でも、簡単にリミックスして、パーツを自分のものに置き換えることができます。邪魔にならないツールを使って、クリエイティブなフローを維持しましょう。

 

不動産

不動産業者は、写真から不要なオブジェクトを削除するためにCleanUp.picturesを使用しています。

 

Eコマース

製品を輝かせる。聴衆を感動させる、雑念を取り除く。

 

透かしを削除

Cleanup.pictureは、不要なウォーターマーク、日付スタンプ、テキストを削除するのにも便利です。

 

Developers API

あなたの製品に高品質なインペインティングが必要ですか?APIドキュメントをご覧ください(特別価格が適用されます)

 

 

FAQ

インペインティングとは何ですか?

インペインティングとは、写真から不要なものを取り除く(オブジェクトリムーブ)ための特殊技術です。不要な人物を削除する場合にも使用できます。それはインペイントのようなクローンツールで動作していたが、人工知能を使用すると、今日はるかに良い結果を与えます。

 

なぜCleanup.Pictureは他のインペイントツールより優れているのですか?

Cleanup.pictureは人工知能に基づいた高度な編集ツールで、他のクローンスタンプツールよりはるかに優れています。adobe photoshop fixのようなクローンツールは背景を参照する必要がありますが、私たちのAIはほんの数クリックで不要なテキスト、不要な人、不要なオブジェクトの背後にあったものを本当に推測することができるのです。

 

cleanup.picturesはどのような解像度の画像を扱うことができますか?

Cleanup.picturesでは、どのようなサイズの画像でもインポートすることができます。エクスポートは無料版では720pxに制限されます。Pro版ではサイズ制限はありません。Cleanup.picturesでエクスポートされる画像の品質は継続的に改善されています。

 

私の画像はどうなりますか?保存されますか?

いいえ、画像はクリーンアップされた後、すぐに削除されます。私たちのサーバーには、画像に関連するデータは保存されません。

 

Cleanup.pictureの料金はいくらですか?

  • Cleanup.Pictureは、より良い品質と処理高解像度の画像を必要としない限り、無料です。
  • 価格は任意のサイズの画像を処理するために、その後、月額$5または年間$48(月額$4)です。
  • トライアルは、無料でHD品質をテストすることができます。エディションを緩和するために、画像にズームすることができるようになります。

サブスクリプションは、モバイルとデスクトップの両方で動作します。

  • 8月15日まで、Cleanup Proは-50%オフの年間24ドル(月々2ドル)です。
    クーポンの入力は不要です。

 

iOSやAndroidでCleanup picturesを使うには?

ClipDrop iOSアプリをダウンロードすれば、モバイルからCleanupを利用することができます。

Androidでは、https://cleanup.pictures、直接アクセスして利用することもできます。多くのiOSとAndroidユーザーは、このウェブサイトをホームスクリーンに追加するだけで、モバイルでアプリとして使用することができます。

 

サブスクリプションの編集、一時停止、キャンセルはどのように行うのですか?

サブスクリプションの管理は、「サブスクリプションの管理」セクションで行えます。

 

Cleanup購読は何人のユーザーが使用できますか?

各クリーンナップサブスクリプションは個別で、1人のユーザーに制限されています。

 

inpainting APIはどのように使用できますか?

Cleanupのinpainting APIは、Node.js, SwiftUI, Kotlin...などのあらゆる環境で使用することができます。
豊富なドキュメント、ライブデモ、多数のサンプルを提供していますので、すぐに使い始めることができます。

 

写真から人物を削除するには?

cleanup.picturesを使えば、無料で数秒のうちに写真から人物を削除することができます。Adobe Photoshopのような複雑なソフトは必要ありません。cleanup.picturesを使えば、数回のクリックでプロ並みの仕上がりになります。

プロからのアドバイス:大きめのブラシを選択し、レタッチしたい部分よりも広い範囲をカバーすることを躊躇しないでください(特にシャドウをカバーする場合)。これにより、アルゴリズムが最適な結果を作成します。

 

写真から不要なオブジェクトを削除するには?

cleanup.pictures Cleanup.pictures(無料のクリエイティブ編集ツール)を使って、不要なオブジェクト、人物、または欠陥を削除します。A.I.アルゴリズムが、ワンクリックでオブジェクトの背後にあったものを再構築します。オブジェクトを削除するために、不要な要素が覆われていることを確認してください。人物を削除したり、テキストを削除するのも同じ方法です。

 

画像からテキストや透かしを削除する方法は?

cleanup.picturesを使えば、テキストや画像を数秒で、しかも驚くほど正確に削除することができます。オブジェクトや人物に関しては、画像をツールに読み込み、削除したいテキストや透かしの上に描画するだけです。数秒後、それが完全に消えているのがわかるでしょう。

プロからのアドバイス:最良の結果を得るためには、実際に削除したいものよりも少し大きな領域をオーバーフローして描くことを確認してください。

重要: ウォーターマークは通常、画像の著作権が制限されていることを示します。ウォーターマークは、明確なライセンスを持っている画像にのみ、削除してください。

 

シミやシワを除去する方法は?

クリーンアップブラシを使って、写真からシミやシワを除去することができます。他の除去方法と同様、ブラシをオーバーフローさせてください。

 

画像の背景を削除するにはどうすればよいですか?

オンラインまたは携帯電話で写真の背景を削除するには、ClipDropを使用するのが一番です。現在入手可能な中で最高の品質を提供します。

参考資料

バンダイナムコ研究所が3000を超える3Dモーションデータを無料公開

バンダイナムコ研究所が、3000を超える3Dモーションデータ(BVH)を公開しました。日常の動作、格闘、ダンスや、アクティブ、疲れ、幸せなどは様々なスタイルが提供されています。ライセンスはCC BY-NC-ND 4.0で、研究および個人使用のために無料で利用できます。

ライブラリにはBlenderでデータを視覚化するための無料のスクリプトが付属しているそうです。

https://www.bandainamco-mirai.com/news_20220428/
https://github.com/BandaiNamcoResearchInc/Bandai-Namco-Research-Motiondataset/blob/master/README_Japanese.md

 

株式会社バンダイナムコ研究所(以下、バンダイナムコ研究所)は、AI技術(機械学習と深層ニューラルネットワーク分類技術など)の研究開発に使用できる3Dモーションデータセットを、4月28日よりGitHubにて無料公開いたします。

バンダイナムコ研究所では、メタバース及びxR技術など三次元モーションを使用する研究開発を手がけています。現在、ゲームや映像に登場するCGキャラクターは、事前にアクターの方々に演技していただき、その動きをデータ化し再現させるモーションキャプチャ技術や、専門のクリエイターが手作業により制作することがほとんどです。

しかし、今後メタバースをはじめとしたコンテンツの規模が拡大すると、個性的なキャラクターや多彩なモーションが必要不可欠になり、従来の制作過程では限界を迎えることが予想されます。

一方、このようなAIを用いたモーション研究開発は、性別や動作、演技といった様々なパターンのモーションの「データセット」が必要で、しかも入手しにくいことから、世界的に見ても研究開発が進んでいないのが現状です。

バンダイナムコ研究所では、昨年から、AI技術を活用して多彩なキャラクターモーションを生成するという研究に着手してきました。また、AI研究に今後多くの技術者が携わることでイノベーションにつながると確信しており、現在、自社で機械学習と深層ニューラルネットワーク分類技術に使用しているデータの一部をAI研究に使用できるセットとして無料で公開することにいたしました。

これにより、AI研究全体の技術の底上げやゆくゆくはエンターテインメント業界の発展につながることを期待しています。

 

【データセット内容】

名称:Bandai Namco Research Motion Dataset
公開場所:https://github.com/BandaiNamcoResearchInc/Bandai-Namco-Research-Motiondataset
セット内容:

  • データセット1 …歩行や走行、格闘やダンスなどの17種類の動作に対して、男性、女性や感情など15種のスタイルの演技モーションを収録した総計36,673フレームのモーションデータセット
  • データセット2 …歩行や、走行、手を振るなど10種の運動に対して、男性、女性、子供、老人などの属性の7種のスタイルのモーションを収録した総計384,931フレームのモーションデータセット

※非商用目的で研究やAIの検証などで利用できるライセンスになっています。

参考資料

iPad用のリトポロジアプリ「CozyBlanket」

iPad用のリトポロジアプリ「CozyBlanket」がリリースされました。基本無料で、アプリ内課金 Retopologyパック$89.99です。

https://apps.apple.com/us/app/cozyblanket/id1608079174
https://sparseal.com/cozyblanket/

CozyBlanket

CozyBlanketは親しみやすくリラックスできるように設計されたiPad用レトポロジーアプリです。そのミニマルなUIは、ハイポリメッシュ上に直接描画して使用できる、フル機能のメッシュエディタを搭載しています。
CozyBlanketは、リトポロジーをパズルを解くような楽しいゲームのようなプロセスとして提示することに重点を置いています。

 

 width=

 width=

 

特徴

  • ポリゴンの作成/削除、エッジループ、エッジスライド、マージ/コラプス、グリッド生成など、ジェスチャーによるメッシュ編集が可能
  • リトポロジーのために設計されたスナップ、対称性、オーバーレイ
  • 大規模なデータセットを処理する高性能なCPUビューポー
  • OBJのインポート/エクスポート

 

CozyBlanketは、インポート/エクスポートのオプションを完全に有効にするために、アプリ内課金があります。デフォルトでは、CozyBlanketにはエクスポート/保存オプションがなく、インポートは45000頂点未満のメッシュに制限されています。

Apple Pencilの使用を推奨しますが、必須ではありません。

 

フル機能のポリメッシュエディット

CozyBlanketは、以下のような最も一般的なポリゴンメッシュの編集操作をすべて行うことができます。

  • 四角形や三角形の作成と削除
  • エッジループの挿入、ディゾルブ、スライド
  • 頂点位置の調整
  • 頂点の結合とエッジの折りたたみ
  • 短冊やグリッドの自動作成

これらの動作はすべて、ジェスチャーを使い、Apple Pencilで直接メッシュに描画することで実行されます。すべてのジェスチャーは、最も一般的なリトポロジーのパターンをできるだけ簡単に作成できるように設計されています。

 

ループタグ

CozyBlanketは、最適なループフローを実現するために、顔のループに異なる色でタグ付けすることができます。タグを使用することで、スパイラルや不要な自己交差ループなどの一般的な問題を回避することができます。

IO

CozyBlanketは、.objファイルのインポートに対応しています。リトポロジメッシュの.objファイルのエクスポートは、リトポロジパックに含まれています。

CozyBlanketは、高ポリメッシュを扱う際、可能な限り高いスナップ精度を維持しながらメモリ使用量を抑えるために、自動的にCPUベースのビューポートに切り替わります。

 

リトポロジーのためのデザイン

CozyBlanketはデフォルトでスナップと適切にオクルードされたメッシュのレンダリングを使用します。また、トポロジーリラックスのための機能、スライド機能も備えています。パッチクローニングのような高度な機能は、Retopology Packで利用可能です。

CozyBlanketはグローバルなX軸対称もサポートしています。すべてのツールで対称オプションが考慮されるため、頂点は対称平面にスライドしてスナップします。

 

よくある質問

ファイルをインポートするとCozyBlanketがクラッシュします。

ハイポリメッシュを使用している場合、デバイスのメモリ制限を越えている可能性があります。外部ツールでモデルをデシメートして、頂点数を減らすことができます。サブディビジョンベースのスカルプトソフトウェアからファイルをインポートしている場合は、より低い解像度のメッシュをインポートするか、モデルのサブディビジョンを解除してみてください。

 

メッシュ編集時のApple Pencilジェスチャーの精度を上げるにはどうしたらいいですか?
  • ジェスチャーは常に直線と鋭い角を使用して描くようにしてください。
  • 画面の大きさに対して小さすぎたり大きすぎたりするジェスチャーを描かないようにします。
  • 推奨されるズームレベルで作業するようにしてください。CozyBlanket は、ジェスチャーを正しく認識できる距離でモデルを表示すると、リトポロジ・メッシュの太いワイヤーフレームを表示します。
  • 大きく歪んだトポロジーを避けるようにしてください。CozyBlanket は、均等に分散した規則的なトポロジーの方が、ジェスチャーをよりよく認識しました。
  • ジェスチャーを繰り返す前に、カメラを少し動かしてみてください。

 

デフォルトのスタートアップフロッグモデルを変更するには?

Retopology Packを購入すると、CozyBlanketフォルダにStartupフォルダを作成することができます。StartupフォルダにCozyBlanketのドキュメントを置くと、アプリを開いたときにその中のドキュメントがランダムに読み込まれ、デフォルトのカエルに置き換わります。
また、アプリメニューの「スタートアップファイルの読み込み」を無効にすることで、スタートアップファイルの読み込みを無効にすることができます。

 

ハイポリメッシュの新しいバージョンを持っています。CozyBlanketドキュメントのハイポリメッシュを、リトポロジーの進捗を失うことなく変更するにはどうすればよいですか?

インポートボタンを長押しすると、メニューが表示されます。現在のモデルを置き換える」オプションを選択すると、現在のファイルに別のモデルをインポートすることができます。