Google desarrolla "Dime sobre esto" para Gemini: la función que permitirá analizar cualquier elemento de la pantalla
Google trabaja en una función que permitirá señalar elementos en pantalla para que Gemini los analice y explique qué son o para qué sirven
estas alturas ya sabemos que Google no para de meter mano a Gemini, y ahora la compañía está trabajando en una nueva función que básicamente nos va a permitir señalar cualquier cosa que veamos en la pantalla y preguntarle al asistente qué es. Se llama "Dime sobre esto" y, según el análisis de la versión beta de la aplicación Google para Android, funciona de manera bastante intuitiva.
La mecánica es sencilla: igual que haces con Circle to Search, dibujas un círculo alrededor de lo que te interesa y Gemini se encarga del resto. Android Authority ha descubierto esta función en un teardown del APK, así que por ahora solo existe en el código, pero pinta bien.
¿Para qué sirve exactamente?
La función aparece como un botón que dice "Dime sobre esto" cuando invocas Gemini. Una vez que lo tocas, puedes seleccionar cualquier área de la pantalla para que el asistente la analice y te dé información sobre lo que has marcado. Es útil para identificar objetos, traducir texto que veas por ahí o incluso extraer información de gráficos complicados.
Lo interesante es que esto va más allá de lo que hace Circle to Search. Mientras que esa función se centra en reconocer imágenes, "Dime sobre esto" aprovecha las capacidades conversacionales de Gemini para darte respuestas más elaboradas y contextualizadas. Es como tener a alguien que no solo ve lo que tú ves, sino que puede explicártelo.
Claro, aquí surge la pregunta obvia: ¿no es esto básicamente lo mismo que Circle to Search? En cierto modo sí, pero integrado directamente en Gemini en lugar de ser una función separada. La diferencia está en que puedes mantener una conversación sobre lo que has seleccionado, hacer preguntas de seguimiento o pedirle que te explique algo específico.
Google ya ha estado perfeccionando Circle to Search constantemente, aunque los cambios recientes han sido más bien cosméticos. La función está ampliamente considerada como de lo más útil de Android, y hay gente que la usa para descubrir música de forma muy práctica.
Incluso están experimentando con cosas más específicas, como ayudar a resolver niveles de videojuegos analizando capturas de pantalla. Así que está claro que Google ve potencial en este tipo de funciones.
El problema es que ahora tendremos dos funciones que hacen cosas muy parecidas pero con nombres diferentes. No es que sea el fin del mundo, pero puede resultar confuso para los usuarios que no sepan cuál usar en cada momento.
Como suele pasar con las funciones que se descubren en teardowns de APK, no hay garantía de que "Dime sobre esto" llegue al público. Google puede decidir integrar estas capacidades en Circle to Search, cambiar completamente el enfoque o simplemente descartar la idea si no funciona como esperaban.
Por ahora, lo único que podemos hacer es esperar a ver si Google decide hacer oficial esta función o si se queda en el cajón de los proyectos internos. Lo que está claro es que la competencia con ChatGPT y otros asistentes está empujando a Google a mejorar las capacidades visuales de Gemini, así que algo bueno saldrá de todo esto.