Apple представила умные часы Watch Series 12 и Ultra 4 с обновленными функциями отслеживания физической активности и улучшенным шумоподавлением. Кроме того, устройства получили новые возможности для работы со звуком. Об этом компания объявила в среду.
В часы добавили четыре опциональных инструмента «аудиоинтеллекта», использующих данные с микрофонов. Среди них распознавание звуков и музыки, краткий пересказ разговоров и функция Live Rewind (перемотка в реальном времени), которая позволяет получить расшифровку сказанного вокруг пользователя за последние 15 секунд.
Как пишет Wired, Apple заявила, что новые функции создавались с учетом требований к конфиденциальности и безопасности. Компания утверждает, что инструменты не создают и не хранят аудиозаписи, а исходный звук недоступен операционной системе, приложениям, пользователю и самой Apple.
Основная обработка выполняется непосредственно на часах, чтобы чувствительные данные не передавались в облако. Например, функция распознавания звуков может сообщить о звонке в дверь, сирене, сигнале тревоги или плаче ребенка без отправки информации с устройства. Если передача необходима, данные предварительно обрабатываются и направляются через инфраструктуру Private Cloud Compute (частное облачное вычисление) Apple.
Расширить локальные возможности часов позволили новые чипы S11. В них предусмотрена защищенная область памяти Secure Exclave, изолированная от остальной операционной системы и предназначенная для хранения и обработки данных с датчиков, включая звук.
Обновленная функция Shazam распознает музыку, создавая цифровой отпечаток композиции и сохраняя его в Secure Exclave. При запросе пользователя на серверы Shazam отправляется только этот отпечаток, а не аудиофайл, после чего специальная запись сразу удаляется с часов. Siri Recap (пересказ Siri) может постоянно анализировать содержательные разговоры или работать по расписанию: звук шифруется, передается на iPhone, где распознается и сокращается до основных фраз, а затем итоговые данные отправляются в Private Cloud Compute.