En el I/O 2024, Google presentó un adelanto de Project Astra, ofreciendo una visión del futuro de los asistentes de IA. Esta característica multimodal integra la inteligencia de Gemini con el reconocimiento de imágenes de Google Lens y avanzadas respuestas en lenguaje natural. Aunque el video promocional fue impresionante, nuestra experiencia práctica reveló que a Astra todavía le falta mucho para estar lista para el uso diario. Aquí están tres puntos clave de nuestro primer encuentro con la próxima generación de IA de Google.
La opinión de Sam:
Actualmente, la mayoría de las personas interactúan con los asistentes digitales utilizando la voz, por lo que la multimodalidad de Astra (es decir, utilizar la vista y el sonido además del texto/habla) es relativamente novedosa. En teoría, esto permite que las entidades computarizadas funcionen y se comporten más como un asistente o agente real, en lugar de algo más robótico que simplemente responde a comandos hablados.
Durante nuestra demostración, tuvimos la opción de pedirle a Astra que contara una historia basada en algunos objetos que colocamos frente a la cámara, tras lo cual nos relató un encantador cuento sobre un dinosaurio y su fiel baguette tratando de escapar de una ominosa luz roja. Fue divertido y el cuento fue lindo, y la IA funcionó tan bien como se esperaba. Pero al mismo tiempo, estaba lejos del asistente omnisciente que vimos en el adelanto de Google. Y aparte de quizá entretener a un niño con una historia original para dormir, no parecía que Astra estuviera haciendo tanto con la información como uno podría desear.
Luego, mi colega Karissa dibujó una escena bucólica en una pantalla táctil, momento en el cual Astra identificó correctamente la flor y el sol que pintó. Pero la demostración más interesante fue cuando volvimos para un segundo intento con Astra funcionando en un Pixel 8 Pro. Esto nos permitió apuntar sus cámaras a una colección de objetos mientras rastreaba y recordaba la ubicación de cada uno. Incluso fue lo suficientemente inteligente como para reconocer mi ropa y dónde había guardado mis gafas de sol, aunque estos objetos no formaban parte de la demostración inicial.
De alguna manera, nuestra experiencia destacó tanto el potencial como las limitaciones de la IA. La capacidad de un asistente digital para decirte dónde dejaste tus llaves o cuántas manzanas hay en tu frutero antes de ir al supermercado podría ahorrarte tiempo. Pero después de hablar con algunos de los investigadores detrás de Astra, queda claro que aún hay muchos obstáculos por superar.
A diferencia de muchas de las características recientes de IA de Google, Astra (que se describe como una "vista previa de investigación") todavía necesita la ayuda de la nube en lugar de poder funcionar completamente en el dispositivo. Y aunque admite algún nivel de permanencia de objetos, esos "recuerdos" solo duran una única sesión, que actualmente abarca solo unos minutos. Y aunque Astra pudiera recordar cosas por más tiempo, hay cuestiones como el almacenamiento y la latencia a considerar, porque por cada objeto que Astra recuerda, corres el riesgo de ralentizar la IA, resultando en una experiencia más entrecortada. Así que, aunque está claro que Astra tiene mucho potencial, mi entusiasmo se ve atenuado por el conocimiento de que pasará algún tiempo antes de que podamos obtener una funcionalidad más completa.
La opinión de Karissa:
De todos los avances en IA generativa, la IA multimodal es la que más me intriga. Por muy poderosos que sean los últimos modelos, me cuesta emocionarme por actualizaciones iterativas a los chatbots basados en texto. Pero la idea de una IA que pueda reconocer y responder a preguntas sobre tu entorno en tiempo real se siente como algo sacado de una película de ciencia ficción. También da una idea mucho más clara de cómo la última ola de avances en IA se abrirá camino en nuevos dispositivos como las gafas inteligentes.
Google insinuó esto con Project Astra, que algún día podría incluir un componente de gafas, pero por ahora es mayormente experimental (las gafas mostradas en el video de demostración durante la presentación del I/O eran aparentemente un "prototipo de investigación"). En persona, sin embargo, Project Astra no se sintió exactamente como algo salido de una película de ciencia ficción.
Fue capaz de reconocer con precisión los objetos que se habían colocado alrededor de la sala y responder a preguntas matizadas sobre ellos, como "¿cuál de estos juguetes debería usar un niño de 2 años?". Pudo reconocer lo que había en mi dibujo y crear historias sobre diferentes juguetes que le mostramos.
Pero la mayoría de las capacidades de Astra parecían estar a la par con lo que Meta ya ha logrado con sus gafas inteligentes. La IA multimodal de Meta también puede reconocer tu entorno y hacer un poco de escritura creativa en tu nombre. Y aunque Meta también presenta las características como experimentales, al menos están disponibles de manera más amplia.
La característica destacada de Astra que podría diferenciar el enfoque de Google es el hecho de que tiene una "memoria" incorporada. Después de escanear varios objetos, aún podía "recordar" dónde se colocaron elementos específicos. Por ahora, parece que la memoria de Astra está limitada a un período de tiempo relativamente corto, pero los miembros del equipo de investigación nos dijeron que teóricamente podría expandirse. Eso obviamente abriría aún más posibilidades para la tecnología, haciendo que Astra se parezca más a un asistente real. No necesito saber dónde dejé mis gafas hace 30 segundos, pero si pudiera recordar dónde las dejé anoche, eso realmente se sentiría como ciencia ficción hecha realidad.
Pero, como con gran parte de la IA generativa, las posibilidades más emocionantes son las que aún no han sucedido. Astra podría llegar allí eventualmente, pero por ahora, parece que Google aún tiene mucho trabajo por hacer para llegar a ese punto.
https://www.readawrite.com/a/72808a2cb373d1985c56bce22572c03c
https://www.readawrite.com/a/4311b9734d8a2c11f1e4ba7e98885433
https://kingdomoftheapessubthai.raiselysite.com
https://kingdomoftheapes2024thaihd.raiselysite.com
https://community.mongabay.com/news/kingdomoftheapes2024thaistory
https://community.mongabay.com/news/2024-hd-kingdom-of-the-planet-of-the-apes
https://muluznews.blogspot.com/2024/05/google-project-astra-hands-on-mucho.html
