NVIDIA mostrou uma rede neural que transforma imagens 2D em objetos 3D

A NVIDIA, juntamente com especialistas da Universidade de Stanford, finalizou a rede neural EG3D, que é capaz de gerar imagens tridimensionais realistas com base em imagens 2D planas.

A tecnologia tem sido demonstrado no exemplo de retratos de pessoas e focinheiras de gatos. Em todos os casos, a imagem volumétrica foi bastante realista, com proporções corretas e sem artefatos visíveis.

Para criar um modelo tridimensional, uma rede neural gera uma série de imagens bidimensionais usando redes adversárias generativas e, em seguida, cria um objeto 3D com base nelas.

Os desenvolvedores observam que o EG3D funciona muito mais rápido e com mais precisão do que os análogos e não requer poder de computação colossal - você pode usá-lo mesmo em laptops com os melhores jogos placas de vídeo. Por exemplo, tudo funcionou bem com a GeForce RTX 3090.

A rede neural já está disponível para autoteste - o código-fonte e as instruções de instalação estão disponíveis no GitHub.

Em março, especialistas da NVIDIA demonstrado

uma rede neural semelhante Instant NeRF, que cola uma série de fotos 2D e finaliza a imagem em uma cena tridimensional. Foi chamado de "Polaroid do futuro".