Las funciones de inteligencia artificial del Apple Watch para rebobinar y recapitular conversaciones comienzan las pruebas beta

La tecnología «Audio Intelligence» de Apple impulsada por IA para el Apple Watch ahora se está implementando en prueba beta, inicialmente para desarrolladores en la actualización iOS 27.3, luego de ser anunciada por primera vez en el evento de hardware Surprise and Shine de la compañía en septiembre. La tecnología incluye un conjunto de cuatro funciones de IA opcionales que permiten a los usuarios de Apple Watch Series 12 detectar sonidos importantes, identificar canciones, ponerse al día con conversaciones y tomar notas.

La función de reconocimiento de sonido ayudará a los usuarios sordos y con problemas de audición a identificar sonidos importantes como sirenas, alarmas o timbres desde su reloj, mientras que la función de reconocimiento de canciones aprovecha la aplicación Shazam de Apple para detectar la música que se reproduce en segundo plano e identificar el nombre de la canción y el artista.

Sin embargo, las funciones más potencialmente controvertidas son aquellas que escuchan conversaciones humanas: Live Rewind y Siri Recaps.

Dada la reacción negativa a los dispositivos de grabación de IA, como las gafas de IA de Meta y otros dispositivos portátiles de IA, Apple ha intentado crear un espacio donde las funciones puedan ser útiles para los propietarios de Apple Watch, respetando al mismo tiempo la privacidad de quienes los rodean.

Con Live Rewind, la idea es permitirte retroceder en el tiempo para ver lo que alguien acaba de decir, en caso de que te lo hayas perdido. Por ejemplo, si alguien le estaba dando instrucciones verbales o leyendo una larga lista de ofertas especiales en un restaurante, podía presionar dos veces la corona digital del reloj para ver lo que se dijo en los últimos 15 segundos como un fragmento de texto que se muestra en la esfera del reloj. Puede ver este fragmento y luego no hacer nada, y desaparecerá permanentemente. O puede guardarlo en la aplicación Siri independiente que se incluye con iOS 27 para acceder más tarde, lo que puede resultar útil si intenta recordar el nombre de alguien o tomar una nota rápida de una presentación de ritmo rápido.

Apple dice que los usuarios también podrán tocar la opción «Preguntar a Siri» que aparece debajo del fragmento de texto si tienen preguntas sobre algo que se dijo, como un término técnico que no entienden o tal vez alguna opción de salsa que el camarero mencionó y que no conocen, entre otras cosas.

Cuando presiona dos veces la corona digital, aparece un timbre audible y se muestra una animación en el reloj. Esto tiene como objetivo indicarle a las personas a través de la combinación del gesto, el sonido y la visualización que has grabado algo de lo que se dijo.

Estos fragmentos se eliminarán automáticamente después de 30 segundos si no los guarda.

La otra opción, Siri Recaps, lleva esta tecnología de escucha ambiental aún más lejos al permitir a los propietarios de Apple Watch tomar notas de alto nivel de sus conversaciones.

Es importante destacar que Apple dice que no identifica a los hablantes, no guarda el audio sin procesar ni proporciona transcripciones palabra por palabra. En cambio, la función resume una conversación con una oración corta y algunas viñetas que identifican los puntos clave. Por ejemplo, según el tema, las viñetas pueden incluir cosas como fechas o plazos importantes, información sobre precios o planes de pago y otra información objetiva.

Apple sugirió que la función podría usarse en escenarios como reuniones de trabajo, conferencias de padres y maestros, sesiones de entrenamiento personal u otros lugares donde es posible que necesites recordar qué tareas debes completar o cosas que se dijeron. Básicamente, se supone que imita la capacidad del usuario para tomar sus propias notas, sin añadir emoción ni tono.

Esto podría resultar útil, especialmente en momentos en los que no puedes escribir tus propias notas, ya sea porque tienes las manos ocupadas o porque estás tratando de concentrarte en lo que se dice en ese momento. Los resúmenes no grabarán conversaciones cuando escuches música con tus auriculares o uses sus funciones de cancelación de ruido.

Al final del día, se le pedirá que revise sus resúmenes de Siri guardados cuando la función esté habilitada y luego elija cuál desea guardar, si corresponde. Estas notas se pueden guardar en su aplicación Notas o incluso exportar a su aplicación Diario, si son de naturaleza más personal. Si no hace nada, los resúmenes se eliminarán solos en un plazo de siete días.

Este recordatorio para revisar los resúmenes de Siri que has grabado también aparece cuando desbloqueas tu Apple Watch por primera vez por la mañana.

Los usuarios pueden optar por habilitar Siri Recaps manualmente, o pueden configurar un horario, como que el resumen solo se realice mientras están en el trabajo o asegurarse de que nunca se ejecuten por la noche. Incluso si se ejecutan según un cronograma, aún puedes desactivar la función de recapitulación en cualquier momento desde el Centro de control.

Apple señala que Siri Recaps ha sido diseñado para omitir información confidencial como identificadores asignados por el gobierno, datos financieros y de autenticación, ciertos identificadores personales y cualquier lenguaje que promueva la autolesión.

Las funciones Audio Intelligence para Apple Watch Series 12 y Apple Watch Ultra 4 se basan en una combinación de hardware, software y servicios de Apple. Esto incluye el chip S11, el micrófono incorporado y los modelos Apple Intelligence que se ejecutan en el iPhone, así como Private Cloud Compute de Apple.

El procesador siempre activo incluye un enclave seguro (un espacio de memoria protegido por hardware al que no puede acceder el resto del sistema operativo) donde un búfer de audio dedicado procesa el audio sin procesar. Esto permite procesar el audio sin que nadie pueda acceder a él, incluido Apple. Solo el iPhone emparejado puede acceder al audio a través de un mecanismo de emparejamiento seguro entre este y el reloj.

Para funcionar, los modelos ligeros de IA en el chip S11 del Apple Watch detectan si hay una conversación de la que el usuario forma parte, que luego se transfiere al enclave seguro del iPhone. El procesamiento en el dispositivo del iPhone convierte el audio en texto condensado, es decir, el texto de la conversación sin las palabras de relleno. Este texto condensado luego se cifra y se envía a Private Cloud Compute (PCC) de Apple para crear el resumen de la conversación que se envía de regreso al teléfono. (El resumen y cualquier resumen utilizado para crearlo se eliminan del PCC inmediatamente después).

Los resúmenes a los que luego puede acceder en su iPhone solo son accesibles para usted, no para Apple. Y están encriptados cuando se sincronizan entre sus múltiples dispositivos Apple.

De manera similar, Apple Watch transfiere audio al iPhone para procesarlo y crear fragmentos de 15 segundos para Live Rewind.

Apple dice que ninguna de estas funciones debería afectar la duración de la batería de su reloj o teléfono. Más adelante, las funciones se implementarán en la versión beta pública para realizar pruebas más amplias antes de estar disponibles públicamente para todos.