Cette application vous permet de mettre des sous-titres sur les appels vidéo FaceTime

Une application innovante est sur le marché depuis quelques mois et a étendu l'utilisation de FaceTime à de plus en plus d'utilisateurs. En pensant aux personnes malentendantes et aux autres personnes handicapées, le développeur Jordi Bruin a lancé 'Navi' en novembre 2021, une application capable de créer des sous-titres et des traductions en direct, disponible sur cette application d'appel vidéo.

Bruin, qui est également le créateur de Cibo, une application iOS capable de numériser et de traduire les menus des restaurants lors de voyages à l'étranger, a décidé de créer Navi lors de sa visite WWDC.

Après avoir participé à une session SharePlay, il a commencé à imaginer des moyens de concrétiser l'idée de faire une transcription auprès des personnes handicapées. Navi aide les utilisateurs sur FaceTime dans les domaines suivants :

- Des sous-titres instantanés pour les appels FaceTime.

- Traduisez les sous-titres entrants en temps réel dans plus de 20 langues.

- Expérience construite spécifiquement autour de Picture in Picture (PiP).

- Sur macOS, les sous-titres sont directement superposés sur la fenêtre vidéo.

- Les sous-titres sont cryptés de bout en bout via les serveurs d'Apple.

Comment Navi a-t-il été créé

Bruin, qui, comme mentionné ci-dessus, possède également Cibo, a expliqué à 9to5Mac comment il a créé Navi :

« En avril 2021, j'ai participé à un hackathon et j'ai joué avec l'API MixtoTelephonyUplink pour permettre aux personnes muettes de parler lors d'appels téléphoniques avec la synthèse vocale. Pendant la WWDC, j'ai regardé la session SharePlay et j'ai commencé à créer des formes d'image pour redonner vie à l'idée de transcription. »

Bien que l'objectif principal était d'aider les personnes ayant des déficiences auditives et d'autres handicaps qui les empêchent de rejoindre facilement un appel vidéo, l'application est également utile pour les personnes qui ne parlent pas la même langue mais souhaitent tout de même participer en temps réel.

« SharePlay ajoute une API très simple permettant aux développeurs de transmettre des informations entre les personnes lors d'un appel FaceTime, le tout crypté et avec une très faible latence. J'avais plus de 500 personnes sur TestFlight, mais comme les tests m'obligeaient à les appeler tous, j'ai dû trouver de meilleurs moyens, donc en fin de compte, j'ai dû utiliser FaceTime plusieurs fois depuis différents appareils. Et je suis toujours étonné lorsque j'utilise la fonction de traduction en direct et que je peux avoir une conversation avec quelqu'un dont je ne parle pas la langue. Cela ressemble parfois à un film de science-fiction », a ajouté Bruin.

Avec ces deux publics à l'esprit, le développeur souhaite continuer à améliorer Navi pour les personnes ayant une déficience auditive ou d'autres handicaps. « Certains utilisateurs malentendants de TestFlight m'ont dit que c'était déjà très utile, donc surtout, je veux savoir si je pouvais ajouter quoi que ce soit pour que l'application fonctionne mieux pour leurs besoins spécifiques. »

Navi dispose d'une traduction, elle peut donc être utilisée dans les appels vidéo FaceTime

Actuellement, « Navi » permet une traduction gratuite en 20 langues : polonais, turc, thaï, ukrainien, allemand (Autriche), français (Suisse, France et Canada), finnois, vietnamien, italien, suédois, allemand, japonais, portugais (Brésil et Portugal), espagnol (Mexique et Espagne), norvégien, danois, croate, chinois ( traditionnel et simplifié).

Cependant, à compter de 2022, à une date inconnue, les utilisateurs devront effectuer un paiement unique pour profiter du service illimité. Pour vérifier comment cela fonctionne, il suffit de suivre ces étapes simples :

1. Lancez un appel FaceTime.

2. Ouvrez Navi.

3, Appuyez sur le bouton « Activer les sous-titres » pour inviter les autres personnes à participer à l'appel FaceTime.

3. Acceptez l'invitation SharePlay et vous avez terminé.

CONTINUEZ À LIRE