Это приложение позволяет добавлять субтитры во время видеозвонков FaceTime

Инновационное приложение появилось на рынке уже несколько месяцев, которое расширило использование FaceTime для все большего числа пользователей. Размышляя о людях с нарушениями слуха и других людях с ограниченными возможностями, разработчик Jordi Bruin запустил Navi в ноябре 2021 года, приложение, способное создавать субтитры и живые переводы, доступное в этом приложении для видеозвонков.

Bruin, который также является создателем Cibo, приложения для iOS, которое может сканировать и переводить меню ресторанов во время поездок за границу, решил создать Navi во время посещения WWDC.

После участия в сессии SharePlay он начал представлять себе способы реализации идеи создания стенограммы среди людей с ограниченными возможностями. Navi помогает пользователям FaceTime в следующем:

- Мгновенные субтитры для звонков FaceTime.

- Переводите входящие субтитры в режиме реального времени на более чем 20 языков.

- Опыт, созданный специально для Picture in Picture (PiP).

- В macOS субтитры накладываются непосредственно на окно видео.

- Подписи зашифрованы сквозным шифрованием через серверы Apple.

Как создавалась Navi

Брюин, который, как упоминалось выше, также владеет Cibo, объяснил 9to5Mac, как он создал Navi:

«В апреле 2021 года я участвовал в хакатоне и играл с API MixToTelephonyUplink, чтобы люди могли говорить по телефону с помощью функции преобразования текста в речь. Во время WWDC я наблюдал за сессией SharePlay и начал создавать фигуры изображений, чтобы идея транскрипции снова стала реальностью».

Хотя основная цель заключалась в том, чтобы помочь людям с нарушениями слуха и другими нарушениями, которые не позволяют им легко присоединиться к видеозвонку, приложение также полезно для людей, которые не говорят на одном языке, но хотят участвовать в видеозвонке в режиме реального времени.

«SharePlay добавляет очень простой API для разработчиков для передачи информации между людьми во время вызова FaceTime, все зашифрованные и с очень низкой задержкой. У меня было более 500 человек на TestFlight, но так как тестирование требовало от меня позвонить им всем, мне пришлось искать лучшие способы, поэтому в итоге мне пришлось много раз сталкиваться с FaceTime с разных устройств. И меня до сих пор удивляет, когда я использую функцию живого перевода и могу поговорить с человеком, на котором я не говорю. Иногда это действительно похоже на научно-фантастический фильм», — добавил Брюин.

Помня об этих двух аудиториях, разработчик по-прежнему хочет продолжать совершенствовать Navi для людей с нарушениями слуха и другими нарушениями. «Я слышал от некоторых пользователей с нарушениями слуха на TestFlight, что он уже очень полезен, поэтому, прежде всего, я хочу услышать от них, могу ли я что-то добавить, чтобы приложение лучше работало для их конкретных потребностей».

У Navi есть перевод, поэтому его можно использовать в видеозвонках FaceTime

В настоящее время Navi позволяет бесплатно переводить на 20 языков: польский, турецкий, тайский, украинский, немецкий (Австрия), французский (Швейцария, Франция и Канада), финский, вьетнамский, итальянский, шведский, немецкий, японский, португальский (Бразилия и Португалия), испанский (Мексика и Испания), норвежский, датский, хорватский, китайский ( традиционный и упрощенный).

Однако, начиная с 2022 года, в неизвестную дату, пользователям необходимо будет внести единовременный платеж, чтобы воспользоваться безлимитным сервисом. Чтобы проверить, как это работает, просто выполните следующие простые шаги:

1. Начните вызов FaceTime.

2. Открытая навигационная система.

3, Нажмите кнопку «Включить субтитры», чтобы пригласить других людей в вызов FaceTime.

3. Примите приглашение на SharePlay, и все готово.

ПРОДОЛЖАЙТЕ ЧИТАТЬ