Google AI: Más formas y herramientas en Android

Por: Samer Samat. Presidente, ecosistema Android

Estamos en un momento único en una generación en el que los últimos avances en inteligencia artificial están reinventando lo que pueden hacer los teléfonos. Con la IA de Google en el centro del sistema operativo Android, los miles de millones de personas que usan Android ahora pueden interactuar con sus dispositivos de maneras completamente nuevas.

Hoy compartimos actualizaciones que le permiten experimentar la IA de Google en Android.

Circle to Search ahora puede ayudar a los estudiantes con la tarea

Con Circle to Search integrado directamente en la experiencia del usuario, puedes buscar cualquier cosa que veas en tu teléfono con un simple gesto, sin tener que detener lo que estás haciendo o cambiar a una aplicación diferente. Desde el lanzamiento en Samsung Unpacked , agregamos nuevas capacidades a Circle to Search, como traducción en pantalla completa , y ampliamos la disponibilidad a más dispositivos Pixel y Samsung.

A partir de hoy, Circle to Search ahora puede ayudar a los estudiantes con la tarea, brindándoles una comprensión más profunda, no solo una respuesta, directamente desde sus teléfonos y tabletas. Cuando los estudiantes marcan con un círculo una pregunta en la que están atascados, recibirán instrucciones paso a paso para resolver una variedad de problemas de física y matemáticas.¹problemas escritos sin salir de su hoja de información digital o programa de estudios. A finales de este año, Circle to Search podrá ayudar a resolver problemas aún más complejos que involucran fórmulas simbólicas, diagramas, gráficos y más. Todo esto es posible gracias a nuestro esfuerzo de LearnLM por mejorar nuestros modelos y productos para el aprendizaje.

Circle to Search ya está disponible en más de 100 millones de dispositivos en la actualidad. Con planes de llevar la experiencia a más dispositivos, estamos en camino de duplicarla para fin de año.

Géminis mejorará aún más su comprensión del contexto para ayudarte a hacer las cosas.

Gemini en Android es un nuevo tipo de asistente que utiliza IA generativa para ayudarte a ser más creativo y productivo. Esta experiencia, que está integrada en Android, es cada vez mejor al comprender el contexto de lo que hay en tu pantalla y qué aplicación estás usando.

Pronto, podrás abrir la superposición de Gemini en la parte superior de la aplicación en la que estás para usar Gemini fácilmente de más maneras. Por ejemplo, puede arrastrar y soltar imágenes generadas en Gmail, Google Messages y otros lugares, o tocar «Preguntar a este video» para buscar información específica en un video de YouTube. Si tiene Gemini Advanced, también tendrá la opción de «Preguntar a este PDF» para obtener respuestas rápidamente sin tener que desplazarse por varias páginas. Esta actualización se implementará en cientos de millones de dispositivos durante los próximos meses.

Y continuaremos mejorando Gemini para brindarle sugerencias más dinámicas relacionadas con lo que hay en su pantalla.Artículo 1 de 3

• 1
• 2
• 3

Capacidades multimodales completas llegando a Gemini Nano

Android es el primer sistema operativo móvil que incluye un modelo básico integrado en el dispositivo. Con Gemini Nano, podemos brindarle experiencias rápidamente y mantener su información completamente privada. A partir de Pixel a finales de este año, presentaremos nuestro último modelo, Gemini Nano con multimodalidad. Esto significa que su teléfono no sólo podrá procesar la entrada de texto, sino que también comprenderá más información en contexto, como imágenes, sonidos y lenguaje hablado.

Descripciones más claras con TalkBack

A finales de este año, las capacidades multimodales de Gemini Nano llegarán a TalkBack, ayudando a las personas que sufren ceguera o baja visión a obtener descripciones más ricas y claras de lo que sucede en una imagen. En promedio, los usuarios de TalkBack encuentran 90 imágenes sin etiquetar por día. Esta actualización ayudará a completar la información que falta, ya sea más detalles sobre lo que hay en una foto que enviaron familiares o amigos o el estilo y corte de la ropa al comprar en línea. Dado que Gemini Nano está en el dispositivo, estas descripciones ocurren rápidamente e incluso funcionan cuando no hay conexión de red.

Reciba alertas de presuntas estafas durante las llamadas telefónicas

Según un informe reciente , en un período de 12 meses, la gente perdió más de 1 billón de dólares a causa del fraude. Estamos probando una nueva función que utiliza Gemini Nano para proporcionar alertas en tiempo real durante una llamada si detecta patrones de conversación comúnmente asociados con estafas. Por ejemplo, recibirá una alerta si un «representante del banco» le pide que transfiera fondos urgentemente, realice un pago con una tarjeta de regalo o solicite información personal como PIN de tarjetas o contraseñas, que son solicitudes bancarias poco comunes . Toda esta protección ocurre en el dispositivo, por lo que su conversación permanece privada para usted. Compartiremos más sobre esta función de suscripción más adelante este año.

Más por venir en Android

Recién estamos comenzando a ver cómo la IA en el dispositivo puede cambiar lo que su teléfono puede hacer, y continuaremos integrando la IA de Google en cada parte de la experiencia de los teléfonos inteligentes con Pixel, Samsung y más. Si es desarrollador, consulte el blog de desarrolladores de Android para saber cómo puede crear con nuestros últimos modelos y herramientas de IA, como Gemini Nano y Gemini en Android Studio.