Questa applicazione ti consente di inserire i sottotitoli nelle videochiamate FaceTime

Da qualche mese è sul mercato un'applicazione innovativa che ha esteso l'uso di FaceTime a sempre più utenti. Pensando alle persone con disabilità uditive e ad altre persone con disabilità, lo sviluppatore Jordi Bruin ha lanciato «Navi» nel novembre 2021, un'applicazione in grado di creare sottotitoli e traduzioni dal vivo, disponibile su questa applicazione di videochiamata.

Bruin, che è anche il creatore di Cibo, un'applicazione iOS in grado di scansionare e tradurre i menu dei ristoranti mentre si viaggia all'estero, ha deciso di creare Navi durante la visita WWDC.

Dopo aver partecipato a una sessione di SharePlay, ha iniziato a immaginare modi per realizzare l'idea di fare una trascrizione tra le persone con disabilità. Navi aiuta gli utenti su FaceTime nelle seguenti operazioni:

- Sottotitoli istantanei per le chiamate FaceTime.

- Traduci i sottotitoli in arrivo in tempo reale in più di 20 lingue.

- Esperienza costruita specificamente attorno a Picture in Picture (PiP).

- Su macOS, i sottotitoli vengono sovrapposti direttamente alla finestra video.

- I sottotitoli sono crittografati end-to-end tramite i server Apple.

Come è stato creato Navi

Bruin, che come detto sopra possiede anche Cibo, ha spiegato a 9to5Mac come ha creato Navi:

«Nell'aprile 2021, ho partecipato a un hackathon e ho giocato con l'API MixtoTelephonyUPlink per consentire alle persone mute di parlare durante le telefonate con Text to Speech. Durante il WWDC ho guardato la sessione di SharePlay e ho iniziato a creare forme di immagine per rendere reale l'idea della trascrizione».

Sebbene l'obiettivo principale fosse quello di aiutare le persone con problemi di udito e altre disabilità che impediscono loro di partecipare facilmente a una videochiamata, l'app è utile anche per le persone che non parlano la stessa lingua ma vogliono comunque partecipare in tempo reale.

«SharePlay aggiunge un'API molto semplice per gli sviluppatori per trasmettere informazioni tra le persone in una chiamata FaceTime, tutte crittografate e con una latenza molto bassa. Avevo più di 500 persone su TestFlight, ma poiché i test mi richiedevano di chiamarli tutti, ho dovuto trovare modi migliori, quindi alla fine ho dovuto fare FaceTime molte volte da dispositivi diversi. E mi stupisce ancora quando uso la funzione di traduzione dal vivo e posso avere una conversazione con qualcuno di cui non parlo la lingua. A volte sembra davvero un film di fantascienza», ha aggiunto Bruin.

Con questi due pubblici in mente, lo sviluppatore vuole ancora continuare a migliorare Navi per le persone con problemi di udito e altre disabilità. «Ho sentito da alcuni utenti con problemi di udito su TestFlight che è già super utile, quindi soprattutto, voglio sentire da loro se c'è qualcosa che posso aggiungere per far funzionare meglio l'app per le loro esigenze specifiche».

Navi ha una traduzione, quindi può essere utilizzata nelle videochiamate FaceTime

Attualmente, 'Navi' consente la traduzione gratuita in 20 lingue: polacco, turco, tailandese, ucraino, tedesco (Austria), francese (Svizzera, Francia e Canada), finlandese, vietnamita, italiano, svedese, tedesco, giapponese, portoghese (Brasile e Portogallo), spagnolo (Messico e Spagna), norvegese, danese, croato, cinese ( tradizionale e semplificato).

Tuttavia, a partire dal 2022, in una data sconosciuta, gli utenti dovranno effettuare un pagamento una tantum per usufruire del servizio illimitato. Per verificare come funziona, basta seguire questi semplici passaggi:

1. Avvia una chiamata FaceTime.

2. Apri Navi.

3, Premi il pulsante che dice «Abilita didascalie» per invitare le altre persone nella chiamata FaceTime.

3. Accetta l'invito a SharePlay e il gioco è fatto.

CONTINUA A LEGGERE