Apple Watch 音频 AI 功能开始 Beta 测试

Apple 在 9 月的 Surprise and Shine 硬件活动上公布的 Apple Watch“Audio Intelligence”技术,现在开始 beta 测试。它最初随 iOS 27.3 更新面向开发者开放。这套技术包含四类可主动开启的 AI 功能:检测重要声音、识别歌曲、回看对话、记笔记。声音识别面向聋人和听障用户,让 Apple Watch Series 12 佩戴者识别警笛、闹钟或门铃等关键声音;歌曲识别调用 Apple 的 Shazam,识别背景音乐并显示歌名和演唱者。

更可能引发争议的是两个与人声对话相关的功能:Live Rewind 和 Siri Recaps。Apple 显然在回应 AI 录音设备引发的反弹,比如 Meta 的 AI 眼镜;它想让这些功能对佩戴者有用,同时尊重周围人的隐私。

Live Rewind 的设计是让你回到过去,看看刚才说了什么。比如有人给你口头指路,或服务员念了一长串餐厅特色菜,你双击数码表冠,手表屏幕会显示过去 15 秒内容的文字片段。看完后不做任何操作,片段就会彻底消失;也可以存进 iOS 27 自带的独立 Siri App,方便以后找名字或记要点。片段下方有“Ask Siri”按钮,可以对不理解的内容提问,比如某个技术术语或服务员提到的酱料。双击表冠时会有提示音和动画,让周围的人知道你把某句话记录下来了。未保存的片段会在 30 秒后自动删除。

Siri Recaps 把环境聆听推得更远:Apple 表示它不做说话人识别,不保存原始音频,也不提供逐字转录。它把一段对话提炼成一句话加若干要点,比如重要日期、截止时间、价格或付款方式等事实信息。Apple 给出的使用场景包括工作会议、家长会、私教课。本质上这是模仿你自己随手记笔记的能力,不加入情绪和语气;在双手被占用或需要集中注意力时尤其有用。耳机播放音乐或开启降噪时,它不会录音。开启后,每天结束时会提醒你查看已保存的 Recap,可以选择存进 Notes 或 Journal;不处理的话,会在 7 天内自动删除。早上第一次解锁手表时也会出现提醒。用户可以手动开启,也可以设置时间段,比如只在工作时记录、夜里绝不运行,并随时从 Control Center 关闭。Apple 还表示 Siri Recaps 会尽量省略敏感信息,包括政府证件号、财务与认证数据、某些个人标识,以及涉及自伤的内容。

技术上,这些功能依赖 Apple Watch Series 12 和 Apple Watch Ultra 4 的 S11 芯片、内置麦克风、跑在 iPhone 上的 Apple Intelligence 模型,以及 Private Cloud Compute。常开处理器带有一个安全隔区:一块硬件保护的内存空间,操作系统其余部分无法访问;专门的音频缓冲区在这里处理原始音频,所以处理过程中包括 Apple 在内的任何人都接触不到内容。音频只能通过手表与 iPhone 之间的安全配对机制被配对 iPhone 访问。S11 芯片上的轻量 AI 模型先检测佩戴者是否在参与对话,之后音频传到 iPhone 的安全隔区;iPhone 端侧处理把音频转成去除口头填充词的压缩文本,再加密发送到 Private Cloud Compute 生成纪要并回传。纪要以及生成过程用到的摘要会立即从 PCC 删除。iPhone 上的纪要只有你能访问,在多台 Apple 设备之间同步时也会加密。Live Rewind 的 15 秒片段也走类似路径,由手表把音频传给 iPhone 处理。

Apple 称这些功能不会影响手表或手机的电池续航。接下来会先进入公开测试版,再向所有用户开放。

Apple Watch's AI features for rewinding and recapping conversations begin beta testing | TechCrunch

查看原文