La herramienta impulsada por IA podría fundamentar el diseño de mejores sensores y cámaras para robots o vehículos autónomos.
¿Por qué los humanos desarrollamos los ojos que tenemos hoy?
Si bien los científicos no pueden retroceder en el tiempo para estudiar las presiones ambientales que moldearon la evolución de los diversos sistemas de visión que existen en la naturaleza, un nuevo marco computacional desarrollado por investigadores del MIT les permite explorar esta evolución en agentes de inteligencia artificial.
El marco que desarrollaron, en el que agentes de IA encarnados desarrollan ojos y aprenden a ver a lo largo de muchas generaciones, es como un “sandbox científico” que permite a los investigadores recrear diferentes ramas evolutivas. El usuario logra esto modificando la estructura del mundo y las tareas que realizan los agentes de IA, como encontrar comida o distinguir objetos.
Esto les permite estudiar por qué un animal pudo haber desarrollado parches simples y sensibles a la luz como ojos, mientras que otro tiene ojos complejos, similares a cámaras.
Los experimentos de los investigadores con este marco muestran cómo las tareas impulsaron la evolución ocular en los agentes. Por ejemplo, descubrieron que las tareas de navegación a menudo conducían a la evolución de ojos compuestos con muchas unidades individuales, como los ojos de insectos y crustáceos.
Por otro lado, si los agentes se centraban en la discriminación de objetos, era más probable que desarrollaran ojos tipo cámara con iris y retina.
Este marco podría permitir a los científicos investigar preguntas hipotéticas sobre sistemas de visión que son difíciles de estudiar experimentalmente. También podría guiar el diseño de nuevos sensores y cámaras para robots, drones y dispositivos portátiles que equilibren el rendimiento con las limitaciones del mundo real, como la eficiencia energética y la capacidad de fabricación.
“Si bien nunca podremos retroceder y descifrar todos los detalles de cómo se produjo la evolución, en este trabajo hemos creado un entorno donde podemos, en cierto sentido, recrear la evolución y explorar el entorno de todas estas diferentes maneras. Este método de hacer ciencia abre la puerta a muchas posibilidades”, afirma Kushagra Tiwary, estudiante de posgrado del MIT Media Lab y coautor principal de un artículo sobre esta investigación.
En el artículo colaboran el coautor principal y estudiante de posgrado Aaron Young; el estudiante de posgrado Tzofi Klinghoffer; el exinvestigador posdoctoral Akshat Dave, quien actualmente es profesor asistente en la Universidad de Stony Brook; Tomaso Poggio, profesor Eugene McDermott del Departamento de Ciencias Cerebrales y Cognitivas, investigador del Instituto McGovern y codirector del Centro para Cerebros, Mentes y Máquinas; los coautores principales Brian Cheung, investigador posdoctoral del Centro para Cerebros, Mentes y Máquinas y profesor asistente entrante en la Universidad de California en San Francisco; y Ramesh Raskar, profesor asociado de artes y ciencias de los medios y líder del Grupo de Cultura de la Cámara en el MIT; así como otros investigadores de la Universidad Rice y la Universidad de Lund. La investigación se publica hoy en Science Advances.
Construyendo un espacio de pruebas científico
El artículo comenzó como una conversación entre los investigadores sobre el descubrimiento de nuevos sistemas de visión que podrían ser útiles en diferentes campos, como la robótica. Para poner a prueba sus preguntas hipotéticas, los investigadores decidieron usar IA para explorar las múltiples posibilidades evolutivas.
“Las preguntas hipotéticas me inspiraron a estudiar ciencias durante mi infancia. Con la IA, tenemos una oportunidad única de crear estos agentes encarnados que nos permiten plantear preguntas que normalmente serían imposibles de responder”, afirma Tiwary.
Para construir este entorno de pruebas evolutivo, los investigadores tomaron todos los elementos de una cámara, como los sensores, las lentes, las aperturas y los procesadores, y los convirtieron en parámetros que un agente de IA encarnado pudiera aprender.
Usaron estos componentes básicos como punto de partida para un mecanismo de aprendizaje algorítmico que un agente utilizaría a medida que desarrollaba ojos con el tiempo.
“No pudimos simular el universo entero átomo por átomo. Fue un reto determinar qué ingredientes necesitábamos, cuáles no y cómo asignar recursos a esos diferentes elementos”, afirma Cheung.
En su marco, este algoritmo evolutivo puede elegir qué elementos evolucionar en función de las limitaciones del entorno y la tarea del agente. Cada entorno tiene una tarea única, como navegación, identificación de alimento o rastreo de presas, diseñada para imitar las tareas visuales reales que los animales deben superar para sobrevivir. Los agentes comienzan con un único fotorreceptor que observa el mundo y un modelo de red neuronal asociado que procesa la información visual.
Luego, a lo largo de la vida de cada agente, este se entrena mediante aprendizaje por refuerzo, una técnica de prueba y error en la que se le recompensa por cumplir el objetivo de su tarea. El entorno también incorpora restricciones, como un número determinado de píxeles para los sensores visuales de un agente.
“Estas restricciones conducen el proceso de diseño, de la misma manera que tenemos restricciones físicas en nuestro mundo, como la física de la luz, que han concluido en el diseño de nuestros propios ojos”, afirma Tiwary.
A lo largo de muchas generaciones, los agentes evolucionan de forma diferente. Diferentes elementos de los sistemas de visión que maximizan las recompensas.
Su marco utiliza un mecanismo de codificación genética para imitar computacionalmente la evolución, donde los genes individuales mutan para controlar el desarrollo de un agente.
Por ejemplo, los genes morfológicos capturan cómo el agente percibe el entorno y controlan la ubicación de los ojos; los genes ópticos determinan cómo el ojo interactúa con la luz y dictan el número de fotorreceptores; y los genes neuronales controlan la capacidad de aprendizaje de los agentes.
Prueba de hipótesis
Cuando los investigadores realizaron experimentos en este marco, descubrieron que las tareas tenían una gran influencia en los sistemas de visión que desarrollaron los agentes.
Por ejemplo, los agentes centrados en tareas de navegación desarrollaron ojos diseñados para maximizar la percepción espacial mediante detección de baja resolución, mientras que los agentes encargados de detectar objetos desarrollaron ojos centrados más en la agudeza frontal que en la visión periférica.
Otro experimento indicó que un cerebro más grande no siempre es mejor para procesar la información visual. Solo una cantidad determinada de información visual puede ingresar al sistema a la vez, en función de limitaciones físicas como el número de fotorreceptores en los ojos.
“Llega un momento en que un cerebro más grande no ayuda en absoluto a los agentes, y en la naturaleza eso sería un desperdicio de recursos”, afirma Cheung.
En el futuro, los investigadores quieren usar este simulador para explorar los mejores sistemas de visión para aplicaciones específicas, lo que podría ayudar a los científicos a desarrollar sensores y cámaras para tareas específicas. También quieren integrar LLM (Grandes Modelos de Lenguaje) en su marco de trabajo para facilitar a los usuarios la formulación de preguntas hipotéticas y el estudio de posibilidades adicionales.
“Hacer preguntas de forma más imaginativa ofrece un beneficio real. Espero que esto inspire a otros a crear marcos de trabajo más amplios, donde, en lugar de centrarse en preguntas específicas que abarcan un área específica, busquen respuestas con un alcance mucho más amplio”, afirma Cheung.
Este trabajo fue financiado, en parte, por el Centro para Cerebros, Mentes y Máquinas y el programa de Matemáticas para el Descubrimiento de Algoritmos y Arquitecturas (DIAL) de la Agencia de Proyectos de Investigación Avanzada de Defensa (DARPA).
Nota Original: Adam Zewe para Noticias del MIT en Life Science Network
Traducción: Ian Varela
