Gemini AI puede ver y hablar contigo sobre lo que hay en tu pantalla, lo que podría ser más útil de lo que parece

Pixel 9 Pro og Pixel 9 Pro XL
(Crédito de imagen: Google)

  • Google Gemini está lanzando una función para Pixel 9 que le permite discutir lo que hay en una pantalla en tiempo real
  • Gemini Live puede discutir imágenes, archivos y videos de YouTube
  • La función hace que Gemini Live sea más consciente del contexto de las discusiones

Google le está dando a su asistente de IA Gemini una nueva perspectiva, su vista de lo que hay en la pantalla de un teléfono inteligente. Específicamente, la serie de dispositivos Pixel 9, donde Gemini Live ahora puede "Hablar en vivo sobre esto" y tener una charla en tiempo real sobre imágenes, archivos y videos de YouTube a medida que los ve, según lo detectado por primera vez por 9to5Google. Es ideal si estás interesado en preguntar sobre un tutorial de cocina a mitad de la receta o exigir una explicación sobre un meme que no estás lo suficientemente moderno como para entender.

El papel de Gemini Live hasta ahora ha sido muy parecido al de cualquier asistente de voz de IA estándar, impulsado por los modelos más conversacionales en el molde de ChatGPT. Pero, ahora, puede echar un vistazo a contenido específico en su pantalla y agregarlo a sus discusiones. Los propietarios de Pixel 9 pueden acceder a la función iniciando la superposición flotante de Gemini, donde aparecerá una sugerencia que sugiere la IA "Hablar en vivo sobre el video" en YouTube, "Hablar en vivo sobre PDF" en Archivos de Google y "Hablar en vivo sobre esto" para las imágenes en la pantalla. Le da contexto a Géminis sin que tengas que explicar lo que hay allí. Eso es mucho más rápido que tener que cargar manualmente una imagen de su galería.

Una vez que activa la función, Gemini Live se abre con una vista previa de lo que sea que esté en la pantalla que desee discutir. La IA puede ofrecer ideas de destinos basadas en un video de viajes de YouTube, resumir un contrato en PDF o explicar la alegoría de una obra de arte renacentista que está examinando en su teléfono. Si todo te parece un poco intrusivo, puedes evitar que Gemini Live mire automáticamente lo que estás mirando. Si no tienes un Pixel 9, no te preocupes. Google ha dicho que pronto lanzará la función para los teléfonos inteligentes Samsung Galaxy S24 y S25, seguidos de otros dispositivos Android.

Gemini vive

La función encaja perfectamente en la estrategia Gemini de Google. En caso de que no lo hayas notado, Google sueña con consolidar el lugar de Gemini en el centro de la vida de las personas, especialmente en dispositivos móviles, como lo demuestra su integración continua con Android. Y esta función no será el final de las actualizaciones de Gemini Live. Google se está preparando para Project Astra, un kit de herramientas aún en evolución que debería permitir a los usuarios compartir su pantalla y transmitir video en tiempo real mientras conversan con Gemini Live.

Google se está inclinando fuertemente hacia la asistencia en tiempo real y en contexto. En lugar de limitarse a generar respuestas basadas en consultas abstractas, Gemini Live quiere ser parte del momento, reaccionando a lo que sea que esté en tu pantalla con (con suerte) información útil. Para mantenerse a la vanguardia de los planes de Apple para Apple Intelligence y cualquier plan de OpenAI y Microsoft, Google quiere que Gemini esté lo más omnipresente posible.

Octavio Castillo
Senior Editor

Octavio Castillo ha dado cobertura a la tecnología en diferentes medios por más de una década. Ha sido testigo del crecimiento y evolución de los gigantes tecnológicos

Aportaciones de