Apple Watch тестирует ИИ-функции для записи и анализа разговоров

Компания Apple приступила к бета-тестированию новых ИИ-функций под названием Audio Intelligence для смарт-часов Apple Watch. Первыми доступ к нововведениям получили разработчики в рамках обновления iOS 27.3, а ранее эти возможности анонсировали на сентябрьском мероприятии компании.

• В набор вошли четыре функции: распознавание звуков, определение музыки через Shazam, Live Rewind для недавней речи и Siri Recaps для кратких конспектов бесед.
• Функция Live Rewind позволяет с помощью двойного нажатия на коронку посмотреть текст того, что было сказано за последние 15 секунд.
• Инструмент Siri Recaps создает краткие тезисы разговоров без сохранения исходного аудио и распознавания по голосам.
• Архитектура безопасности включает защищенный анклав на чипе и обработку через Private Cloud Compute с шифрованием данных.

Новые возможности Live Rewind и распознавания звуков

Функция распознавания звуков создана для помощи пользователям с нарушениями слуха, фиксируя сирены, дверные звонки или аварийные сигналы. Идентификация музыки работает за счет интеграции с приложением Shazam. В свою очередь, инструмент Live Rewind дает возможность вернуться в прошлое и прочитать текст последних 15 секунд разговора в виде сниппета на экране часов. Это полезно, если вы пропустили указания или название блюда в ресторане.

Для соблюдения конфиденциальности окружающих активация записи сопровождается звуковым сигналом, анимацией и жестом. Если пользователь не сохраняет текстовый фрагмент в приложение Siri или Notes, он автоматически удаляется через 30 секунд. Предусмотрена и опция Ask Siri для получения дополнительных справок по услышанному термину.

Создание заметок с помощью Siri Recaps

Функция Siri Recaps задействует фоновое прослушивание для формирования кратких тезисов встреч, родительских собраний или тренировок. Система не записывает аудио дословно и не определяет спикеров, а выдает короткое предложение и ключевые пункты с датами, ценами или задачами. Созданные конспекты можно сохранить в Notes или Journal, либо они автоматически удалятся через семь дней.

Пользователи могут включать функцию вручную или настраивать расписание, например, активируя ее только во время работы. Система автоматически пропускает разговоры во время прослушивания музыки в наушниках. Кроме того, алгоритмы настроены на фильтрацию конфиденциальных данных, таких как финансовые реквизиты, правительственные идентификаторы и темы, связанные с селфхармом.

Техническая реализация и конфиденциальность

Работу функций обеспечивают чип S11 в Apple Watch Series 12 и Apple Watch Ultra 4, встроенный микрофон, локальные модели Apple Intelligence на iPhone и облачная инфраструктура Private Cloud Compute. Необработанный аудиопоток обрабатывается в защищенном анклаве процессора, к которому не имеет доступа даже сама операционная система или Apple.

Легковесные ИИ-модели на часах определяют наличие беседы, после чего данные передаются на iPhone для сжатия в текст без слов-паразитов. Зашифрованный текст отправляется в облако для генерации краткой выжимки, которая сразу же удаляется с серверов компании. В компании подчеркивают, что внедрение этих инструментов не должно негативно сказаться на времени автономной работы устройств.