Apple Watch начали пересказывать разговоры в бете iOS 27.3: запись голоса не хранится

Набор называется Audio Intelligence («звуковой интеллект»). Его анонсировали в сентябре на презентации Surprise and Shine, а теперь он вышел в бета-версии, то есть в тестовой сборке до общего выпуска, для разработчиков. Все четыре функции включаются только по желанию владельца Apple Watch Series 12. Фон у запуска непростой: по словам Apple, компания учитывала волну критики в адрес записывающих ИИ-устройств, например ИИ-очков Meta.

Что умеют часы после обновления?

Две функции из четырёх касаются окружающих звуков. Ещё две слушают людей, и именно их называют потенциально спорными.

• Распознавание звуков. Часы подсказывают глухим и слабослышащим людям о важных звуках: сирене, сигнализации, дверном звонке.
• Распознавание песен. Через Shazam, приложение Apple для поиска музыки, часы узнают фоновую мелодию и показывают название и исполнителя.
• Live Rewind («перемотка назад»). Двойное нажатие на цифровую коронку (колёсико сбоку корпуса) выводит на экран текст последних 15 секунд разговора.
• Siri Recaps («пересказы от Siri», голосового помощника Apple). Функция делает короткие заметки по разговору: одно предложение и несколько пунктов с главным.

Фрагмент Live Rewind можно просто прочитать, и он исчезнет навсегда. Если его не сохранить, он удалится через 30 секунд. Сохранить можно в отдельное приложение Siri из iOS 27, а под текстом есть кнопка «Спросить Siri», например про незнакомый термин или соус, который назвал официант.

При двойном нажатии часы издают звуковой сигнал и показывают анимацию. Жест, звук и картинка нужны, чтобы собеседник понял, что его слова зафиксированы. Получается, что сигнал здесь адресован окружающим, а не владельцу.

Siri Recaps пишет конспект, а не стенограмму

Apple подчёркивает: функция не определяет говорящих, не сохраняет исходную запись и не даёт дословной расшифровки. В пунктах окажутся даты, сроки, цены, условия оплаты и другие факты, но не эмоции и не интонации. Среди примеров Apple называет рабочие встречи, разговор с учителем ребёнка и тренировку с личным тренером.

• Вечером часы предлагают просмотреть пересказы за день и выбрать, какие оставить. Утром, при первой разблокировке, напоминание приходит снова.
• Сохранить заметки можно в «Заметки» или в «Дневник», если они личные.
• Если ничего не делать, пересказы удалятся в течение семи дней.
• Функцию включают вручную или по расписанию, например только на работе и никогда ночью. Выключить её можно в любой момент в Пункте управления (меню быстрых настроек).
• Пересказы не пишутся, пока вы слушаете музыку в наушниках или пользуетесь шумоподавлением.

По словам Apple, Siri Recaps пропускает чувствительные данные: государственные идентификаторы, финансовые сведения и данные для входа, часть личных идентификаторов, а также высказывания, которые могут подталкивать к самоповреждению.

Как Apple прячет запись даже от себя?

Функции работают на Series 12 и Ultra 4. Лёгкие ИИ-модели на чипе S11 в часах определяют, что идёт разговор с вашим участием. Звук обрабатывается в защищённом анклаве (изолированной памяти, куда нет доступа у остальной системы и у самой Apple). Получить его может только связанный iPhone.

Дальше iPhone сам превращает звук в сжатый текст без слов-паразитов. Текст в зашифрованном виде уходит в Private Cloud Compute, закрытые облачные серверы Apple, которые составляют пересказ и возвращают его на телефон. После этого пересказ и промежуточные данные с серверов сразу удаляются.

Как попробовать?

1. Иметь Apple Watch Series 12 или Ultra 4 и связанный с ними iPhone.
2. Состоять в программе разработчиков Apple: бета доступна пока только им.
3. Установить бета-версию iOS 27.3.
4. Включить нужные функции вручную: по умолчанию они выключены.

Чем заменить, если новых часов нет?

Сам принцип Siri Recaps можно повторить вручную. Запишите встречу с согласия участников, переведите запись в текст и вставьте его в YandexGPT или GigaChat с промптом (текстовым заданием для нейросети): «Перескажи одним предложением и списком: даты, сроки, суммы, договорённости. Без эмоций и оценок». Это медленнее, чем на часах, зато работает на любом телефоне.

Что делать с этим прямо сейчас, по ролям

Автору Дзена. Формат «одно предложение плюс пункты с фактами» подходит для конспекта интервью с экспертом. Попробуйте его в следующем материале.

Маркетологу. Если клиенты придут на встречу с такими часами, договорённости о ценах и сроках будут сохраняться у обеих сторон. Формулируйте их чётко вслух.

Предпринимателю в РФ и СНГ. Покупать часы ради функции рано: о России данных нет. Начните с ручной схемы через YandexGPT или GigaChat.

Что спрашивают чаще всего?

Заработает ли это на Apple Watch SE 2024?

Apple называет только Series 12 и Ultra 4. Apple Watch SE 2024 в этом списке нет.

Хранят ли часы запись голоса?

По заявлению Apple, нет. Исходный звук не сохраняется, остаётся только текстовый пересказ, и то если вы его сохранили.

Поймёт ли собеседник, что его слушают?

При Live Rewind часы подают звуковой сигнал и показывают анимацию. Для Siri Recaps такой сигнал в описании не упомянут, поэтому предупреждать людей лучше самому.

Часы, которые конспектируют за вас, станут привычными быстрее, чем правила вежливости к ним. Договоритесь о таких правилах в своей команде заранее.