Ciudades del futuro

Una inteligencia artificial puede reconstruir tu realidad pasada mirándote a los ojos

Investigadores de la Universidad de Maryland han desarrollado un increíble sistema de inteligencia artificial que reconstruye lo que ve una persona analizando el reflejo del ojo. Lo repito por si no os ha explotado la cabeza en una supernova de materia gris como me ha pasado a mí: Unos científicos han creado una IA capaz de recrear la realidad pasada de una persona a partir de los juegos de sombras y brillos de la realidad reflejados y deformados por la córnea, la pupila y el iris. Lo que hasta ahora era sólo la típica chorrada de película de ciencia ficción o espías, que no se creía nadie, se ha convertido en realidad.

Los nuevos avances en genética que pueden acabar con los ataques de ansiedad

María Duarte

Científicos encuentran un novedoso método no invasivo que promete acabar con la ansiedad mediante técnicas de edición genética. Un hallazgo que abre la puerta al desarrollo

Hasta la publicación de este estudio, la investigación para la reconstrucción visual se habían centrado en la recuperación de una imagen 2D panorámica del mundo del observador a partir de la imagen de sus dos ojos, pero este estudio no sólo ofrece una imagen de lo que está viendo el observador sino que, al ser una escena tridimensional, te permite explorar su realidad.

Cómo funciona

Cuando usas una cámara para grabar a cualquier persona, sus ojos se convierten automáticamente en un par de espejos de lo que hay al otro lado de la cámara. La luz que refleja los ojos de un observador proviene de la misma fuente que la luz que llega a su retina.

‘Seeing the World through Your Eyes’ by Hadi Alzayer et al. A model that allows 3D reconstruction of a scene just from the reflection in an observers eyeball. Presumably using both could result in even higher volumetric fidelity!https://t.co/jwlDGBsx1ehttps://t.co/CuMBTn5kZd pic.twitter.com/H2OdekBCeR

— Ben Ferns (@ben_ferns) June 16, 2023

El estudio, titulado “Ver el mundo a través de tus ojos“, describe como la nueva IA analiza la luz reflejada en los ojos para convertirla en un campo de radiancia neuronal (NeRF en sus siglas en inglés, básicamente un modelo de IA que define una escena en tres dimensiones). A diferencia de los NeRF tradicionales, que reconstruyen la realidad en 3D a partir de una secuencia de vídeo, esta nueva IA no requiere un vídeo capturado por una cámara en movimiento, sólo varios fotogramas de los ojos en movimiento.

Esto significa que pueden reconstruir tu realidad a partir de un post de instagram o cualquier video que tenga la resolución suficiente. De hecho, en el estudio lo demuestran con los ojos de Miley Cyrus y Lady Gaga capturados de dos vídeos musicales, aunque el resultado final no es claro debido a la baja resolución y alta compresión del material de YouTube.

Tan increíble como extremadamente difícil

La creación de estas escenas 3D a partir de imágenes de ojos es extremadamente difícil. El primer reto es la separación de las capas de la imagen obtenida: el sistema debe separar los reflejos de las intrincadas texturas del iris humano. El segundo desafío es la estimación de la posición de la córnea, que es crítica para la reconstrucción de múltiples vistas que dan lugar a la imagen 3D.

Vista del reflejo de la pupila y extracción de la información con IA.

Así extrae la IA la información contenida en el reflejo de la pupila y la transforma en 3D

Para abordar estos problemas, los investigadores tuvieron que desarrollar un algoritmo para descomponer la textura —y así separar la textura del iris del campo de radiancia general— y otro para refinar la pose del ojo. Esto mejora la precisión de la estimación del movimiento a pesar del pequeño tamaño de los ojos.

El resultado no es perfecto en esta primera versión pero es sin duda un avance enorme, de ciencia ficción. A diferencia de las investigaciones anteriores, centradas en la reconstrucción de imágenes 2D a partir de reflejos en el ojo, la reconstrucción del reflejo en escenas 3D puede aplicarse en áreas como la realidad virtual y la investigación médica.

Aplicaciones en la vida real

Sin duda, la resolución se incrementará en el futuro hasta llegar a ser casi perfecta. Pero, por el momento, los investigadores de la Universidad de Maryland ya han abierto una nueva frontera en la ciencia de la visión y la inteligencia artificial. Como apuntan ellos mismos: “Esto crea nuevas oportunidades para la investigación y el desarrollo en el campo más amplio de la imagen accidental para revelar y capturar escenas 3D fuera de la línea de visión visible”.

Reconstrucción de escenas 3D con inteligencia artificial

Reconstrucción final de la escena 3D capturada con IA generativa.

Lo único malo de este descubrimiento es que, la próxima vez que unos policías ciberpunk de película de serie B hagan exactamente lo que han conseguido estos científicos para pillar al malo, ya no nos podremos reír a carcajadas como hacíamos antes. Como siempre, la ciencia ficción parece tener la —literalmente increíble— habilidad de predecir el futuro.

This content was originally published here.

EL 2 DE JUNIO DEL 2024 VOTA PARA MANTENER

TU LIBERTAD, LA DEMOCRACIA Y EL RESPETO A LA CONSTITUCIÓN.

VOTA POR XÓCHITL