La tecnologia Audio Intelligence di Apple debutta in beta per gli sviluppatori con l’aggiornamento iOS 27.3. Presentata in precedenza all’evento hardware Surprise and Shine di Apple nel mese di settembre, la funzionalità mette a disposizione di chi indossa Apple Watch Series 12 e Apple Watch Ultra 4 quattro strumenti AI opzionali: il riconoscimento dei suoni importanti, il riconoscimento delle canzoni, Live Rewind e Siri Recaps.
Il riconoscimento dei suoni permette alle persone sorde o con difficoltà uditive di individuare dal polso eventi come sirene, allarmi e campanelli. Il riconoscimento delle canzoni, invece, si appoggia all’app Shazam per individuare la musica in riproduzione in background e indicarne titolo e artista. Le altre due opzioni riguardano invece le conversazioni: Live Rewind recupera gli ultimi secondi di audio trasformandoli in testo, mentre Siri Recaps produce una sintesi con i punti essenziali dell’interlocuzione.
Live Rewind: gli ultimi 15 secondi sul quadrante
Con Live Rewind, l’utente può recuperare ciò che è stato detto subito prima, utile quando una frase non è stata compresa o quando si desidera annotare rapidamente un nome o un dettaglio. Una doppia pressione della corona digitale fa comparire sul quadrante una stringa di testo con ciò che è stato detto negli ultimi 15 secondi. Lo snippet può essere consultato e poi abbandonato oppure salvato nell’app Siri introdotta con iOS 27, per rileggerlo in seguito. Il testo può risultare utile, per esempio, per recuperare una serie di indicazioni verbali o una lunga lista di proposte pronunciata durante un pasto, oppure per ricordare il nome di una persona o annotare un dettaglio durante una presentazione dal ritmo rapido.
La registrazione è segnalata attraverso più elementi combinati: un suono udibile, un’animazione sul display e il gesto della doppia pressione. Questo insieme serve a informare le persone presenti che una parte della conversazione è stata acquisita. Il suono e l’animazione sul quadrante accompagnano il gesto della doppia pressione, rendendo visibile e percepibile l’attivazione della registrazione. Gli snippet di Live Rewind vengono eliminati automaticamente dopo 30 secondi se non vengono salvati.
Sotto il testo compare anche l’opzione “Ask Siri”, utilizzabile per ottenere chiarimenti su un termine tecnico non noto o su un dettaglio emerso nel dialogo. La domanda può riguardare, per esempio, una voce della carta non conosciuta o un altro elemento citato durante la conversazione. Apple Watch trasferisce l’audio all’iPhone associato anche per produrre questi frammenti di testo, seguendo lo stesso percorso di elaborazione adottato per le altre funzioni.
Siri Recaps: sintesi, privacy e controllo manuale
Siri Recaps va oltre l’ascolto ambientale e consente di ricavare appunti di alto livello dalle conversazioni. La funzione, tuttavia, non identifica gli interlocutori, non salva l’audio grezzo e non fornisce trascrizioni parola per parola. Al suo posto, il riepilogo si presenta come una breve frase accompagnata da punti elenco con informazioni come date, scadenze, prezzi e condizioni di pagamento. Le voci dell’elenco cambiano in base all’argomento della conversazione e possono includere dati oggettivi utili per ricordare attività da svolgere o informazioni ricevute.
Secondo Apple, Siri Recaps omette gli identificativi governativi, i dati finanziari e di autenticazione, alcuni identificativi personali e i riferimenti all’autolesionismo. La funzione è pensata per riprodurre l’effetto di una presa di appunti, senza aggiungervi emozioni o tono di voce. Può risultare utile quando non è possibile scrivere, perché le mani sono occupate oppure perché l’attenzione è rivolta a ciò che viene detto. Fra gli usi indicati da Apple ci sono le riunioni di lavoro, i colloqui fra genitori e insegnanti e le sessioni di allenamento personale.
La registrazione delle conversazioni non avviene quando l’utente ascolta musica con le cuffie o usa la cancellazione del rumore. L’attivazione può essere manuale oppure organizzata secondo un programma, per esempio limitandola all’orario di lavoro o escludendo le ore notturne. Anche quando segue una pianificazione, la funzione può essere spenta in qualsiasi momento dal Control Center.
Al termine della giornata compare un invito a rivedere i riepiloghi salvati e a scegliere quali conservare. Le note possono essere trasferite all’app Notes oppure esportate nell’app Journal quando hanno un contenuto più personale. I riepiloghi non salvati vengono eliminati entro sette giorni. Un ulteriore promemoria per controllarli compare alla fine della giornata e al primo sblocco mattutino dell’Apple Watch.
L’elaborazione e la protezione dell’audio
L’elaborazione dell’audio per Audio Intelligence combina hardware, software e servizi di Apple: il chip S11, il microfono integrato, i modelli di Apple Intelligence eseguiti sull’iPhone e il Private Cloud Compute di Apple. Il processore sempre attivo comprende un’enclave sicura, una porzione di memoria protetta dall’hardware e non raggiungibile dal resto del sistema operativo. Al suo interno un buffer audio dedicato tratta il materiale registrato.
“L’audio grezzo è elaborato in un buffer nell’enclave sicura e non è accessibile a nessuno, nemmeno ad Apple.” “L’audio è accessibile soltanto all’iPhone associato tramite un meccanismo di associazione sicura tra telefono e orologio.”
Modelli AI leggeri residenti sul chip S11 dell’orologio individuano la presenza di una conversazione a cui l’utente sta partecipando e trasmettono il segnale all’enclave sicura dell’iPhone. Qui l’elaborazione sul dispositivo trasforma l’audio in testo condensato, eliminando le parole superflue. Il testo risultante viene poi cifrato e inviato al Private Cloud Compute, che genera il riepilogo e lo restituisce al telefono. Il riepilogo e le sintesi utilizzate per produrlo sono eliminati dal servizio subito dopo.
Anche i riepiloghi consultabili sull’iPhone restano accessibili soltanto al proprietario, non ad Apple, e sono cifrati durante la sincronizzazione tra i diversi dispositivi Apple. Secondo l’azienda, nessuna delle funzioni dovrebbe ridurre l’autonomia della batteria dell’orologio o del telefono. Dopo la fase riservata agli sviluppatori, Audio Intelligence sarà distribuita nella beta pubblica per una verifica più ampia, fino alla messa a disposizione di tutti gli utenti.
