参考資料

Temporally Stable Real-Time Joint Neural Denoising and Supersampling

Intelの新しいリアルタイム向けのデノイズとスーパーサンプリングを組み合わせた技術の品質がよさそう。

https://www.intel.com/content/www/us/en/developer/articles/technical/temporally-stable-denoising-and-supersampling.html

ノイズの多い低解像度の入力に対して、時空間フィルタリングを行い、2倍の解像度でノイズ除去およびアンチエイリアス処理を行った出力を生成します。従来のノイズ除去器と比較して、本手法はより多くのディテールとコントラストを保持し、同程度の計算コストでより高い解像度を生成することができます。

 

概要

近年のレイトレーシング・ハードウェアの進歩により、リアルタイムのパストレーシングが可能になり、レイトレーシングによるソフトシャドウ、光沢反射、拡散グローバルイルミネーションは、現在ゲームにおける一般的な機能となっています。しかしながら、レイバジェットにはまだ限界があります。その結果、アンダーサンプリングが発生し、エイリアシングやノイズとして表れます。
先行研究では、これらの問題に個別に対処しています。しかし、ニューラルネットワークに基づく時間的スーパーサンプリング法は、その優れたロバスト性により、現代のゲームにおいて広く使用されていますが、ニューラルネットワークによるノイズ除去は、その高い計算コストのため、依然として困難です。

本発表では、スーパーサンプリングとノイズ除去を組み合わせたリアルタイムレンダリング用の新しいニューラルネットワークアーキテクチャを紹介し、2つの別々のネットワークと比較してコストを削減することができます。これは、1つの低精度特徴抽出器と複数の高精度フィルタステージを共有することで実現されています。さらにコストを削減するために、本ネットワークは低解像度の入力を受け取り、高解像度のノイズ除去されたスーパーサンプリング出力を再構成します。この技術は時間的に安定した高忠実度の結果をもたらし、TAAやニューラルアップサンプリングと組み合わせた最新のリアルタイム統計的・分析的ノイズ除去器をターゲット解像度まで大幅に凌駕しています。

 

 

デノイズを検証したビデオを見ると、テクスチャを維持した状態でのデノイズが綺麗に見えます。

コメントを残す