Nvidia convierte una foto en una escena 3D en segundos

Nvidia se propuso revolucionar el mercado de imágenes mediante el uso de un proceso de inteligencia artificial (IA) para convertir cualquier foto bidimensional en 3D.

Aunque hoy en día no es demasiado complicado lograr una foto 3D con una cámara especializada, los resultados dejan mucho que desear si no se utiliza un equipo profesional.

NVIDIA en un comunicado se jacta de «convierte una colección de fotos en una escena 3D en segundos«.

Fue así que la firma experta en placas gráficas presentó una nueva tecnología denominada Instant Neural Radiance Field (NeRF) que entrena algoritmos de IA para crear objetos 3D a partir de fotos 2D.

Conocido como «representación inversa», el proceso utiliza IA para «aproximarse a la forma en que se comporta la luz en el mundo real al permitir a los investigadores reconstruir una escena 3D a partir de un puñado de imágenes 2D tomadas desde diferentes ángulos».

La red neuronal llena los espacios en blanco del panorama de 360 ​​grados y predice el color de la luz que emana desde cualquier dirección, desde cualquier punto del espacio 3D, para obtener resultados más realistas. En el vídeo facilitado por la empresa se puede ver cómo cuatro fotografías tomadas desde diferentes puntos de vista se fusionan en una imagen tridimensional.

Instant NeRF utiliza técnicas de aprendizaje profundo para que, con equipos relativamente asequibles, cualquier persona pueda obtener una imagen 3D casi al instante, lo que facilita la creación de contenido para entornos virtuales. Pero hay más usos.

Posibles usos de NeRF

Instant NeRF podría usarse para entrenar robots y automóviles autónomos para comprender el tamaño y la forma de los objetos en el mundo realyo Para ello se utilizaría la captura de imágenes 2D o secuencias de vídeo. También podría aprovecharse en arquitectura y entretenimiento para generar rápidamente representaciones digitales de entornos reales que los creadores pueden modificar y construir.

Nvidia se especializa en hardware 3D para consolas y computadoras.

Según la compañía, «el modelo requiere solo unos segundos para entrenarse en unas pocas docenas de fotos fijas, además de datos sobre los ángulos de cámara desde los que fueron tomadas, y puede renderizar la escena 3D resultante en decenas de milisegundos»acelerando el proceso en 1000x.

La compañía explica sobre este proceso que “en una escena que incluya personas u otros elementos en movimiento, cuanto más rápidas sean las fotos, mejor”. En ese sentido, si hay demasiada movilidad durante el proceso de captura 2D, la escena 3D generada por la IA “será borrosa”, informó Clarín.