NVIDIA’s GANCraft AI- Feels Like Magic! …Also, 1 Million Subs! – YouTube
2018年にNVIDIAの研究で動画からAIレンダリングした仮想世界をドライブするデモが記憶に新しいが、それを更に発展させたようなもの。
リアルなゲーム画面の動画からGANを用いてさらにリアルな世界の動画を生成することはうまくいっていた。
ゲーム画面
AI生成後
では、マインクラフトのようにブロックで生成されたシンプルな画像を入力とした場合でも同様の効果が得られるかというのがこの結果
マインクラフト画像
変換結果
これは最初の発明ではなく、これまでにも行われてきた取り組みだが従来は動画にしたときに前後の連続性が保たれずにフレームごとに物体が変化するような結果になっていた。
左が従来、一番右が今回の GANcraft
雪のブロックがほとんどそのまま出力されるケースもある。
全てのケースにおいて良好な結果が得られるわけでは無い
複数の景観の混ぜて異なるタイプの出力結果を得ることもできる。
NVIDIAがAIインタラクティブグラフィックスを発明
https://developer.nvidia.com/blog/nvidia-invents-ai-interactive-graphics/?ncid=so-you-ndrhrhn1-66582
