原文标题:Apple Watch’s AI features for rewinding and recapping conversations begin beta testing

苹果公司针对 Apple Watch 的人工智能“音频智能”技术目前正在进入 beta 测试,最初是在 iOS 27.3 更新中面向开发者进行的,该技术在 9 月份的公司 Surprise and Shine 硬件活动上首次宣布。该技术包括一组四个可选的 AI 功能,使 Apple Watch Series 12 佩戴者能够检测重要的声音、识别歌曲、跟进对话和做笔记。

声音识别功能将帮助失聪和有听力障碍的用户识别手表上的警笛、闹钟或门铃等重要声音,而歌曲识别功能则利用苹果的 Shazam 应用程序来检测背景中播放的音乐并识别歌曲名称和艺术家。

然而,更具潜在争议的功能是那些监听人类对话的功能:Live Rewind 和 Siri Recaps。

鉴于对人工智能记录设备(如 Meta 的人工智能眼镜和其他人工智能可穿戴设备)的强烈反对,苹果试图开辟一个空间,让这些功能对 Apple Watch 用户有用,同时仍然尊重周围人的隐私。

通过“实时倒带”,我们的想法是让您回到过去,看看发生了什么

有人刚刚说过,万一你错过了。例如,如果有人在餐厅向您口头指示或阅读一长串特色菜,您可以双击手表的数字表冠,以文本片段形式显示在表盘上,查看过去 15 秒内所说的内容。您可以查看此片段,然后什么都不做,它将永久消失。或者,您可以将其保存到 iOS 27 附带的独立 Siri 应用程序中,以便以后访问,如果您想记住某人的名字或在快节奏的演示中快速做笔记,这可能会很有帮助。

苹果表示,如果用户对所说的内容有疑问,比如他们不理解的技术术语,或者服务员提到的一些他们不熟悉的酱汁选项等,他们还可以点击文本片段下方出现的“询问 Siri”选项。

当您双击数字表冠时,手表上会出现提示音并显示动画。这是为了通过手势、声音和视觉显示的结合向人们发出信号,表明你已经记录了所说的内容。

这些片段将是

如果您不保存,30秒后将自动删除。

另一个选项 Siri Recaps 进一步完善了这种环境聆听技术,让 Apple Watch 用户能够对他们的对话进行高级笔记。

重要的是,苹果表示它不会识别说话者、保存原始音频或提供逐字转录。相反,该功能用一个短句和一些识别关键点的要点来总结对话。例如,根据主题的不同,要点可能包括重要日期或截止日期、定价或付款计划信息以及其他事实信息等内容。

苹果建议该功能可以用于工作会议、家长教师会议、个人培训课程或其他可能需要记住必须完成的任务或说过的话的场景。从本质上讲,它应该模仿用户记下自己笔记的能力——而不添加情感或语气。

这可能会很有帮助,特别是当您无法写下自己的笔记时,无论是因为您的手很忙,还是因为您试图专注于正在做的事情

当时说道。当您用耳机听音乐或使用噪音消除功能时,回顾不会记录对话。

在一天结束时,启用该功能后,系统会提示您查看已保存的 Siri 回顾,然后选择要保存的内容(如果有)。这些笔记可以保存到您的笔记应用程序中,甚至可以导出到您的日记应用程序中(如果它们本质上更个性化)。如果您什么都不做,摘要将在 7 天内自行删除。

当您早上首次解锁 Apple Watch 时,也会出现这条提醒您查看已录制的 Siri 回顾的提醒。

用户可以选择手动启用 Siri 回顾,也可以配置时间表,例如仅在工作时进行回顾,或确保从不在晚上运行。即使它们按计划运行,您仍然可以随时从控制中心关闭重述功能。

苹果指出,Siri Recaps 的设计旨在忽略敏感信息,例如政府分配的标识符、财务和身份验证数据、某些个人标识符以及任何可能宣扬自残的语言。

音频智能功能

Apple Watch Series 12 和 Apple Watch Ultra 4 依赖于 Apple 的硬件、软件和服务的组合。这包括 S11 芯片、内置麦克风、在 iPhone 上运行的 Apple Intelligence 模型以及 Apple 的私有云计算。

永远在线的处理器包括一个安全飞地——一个受硬件保护的内存空间,操作系统的其余部分无法访问——其中有一个专用的音频缓冲区处理原始音频。这使得音频可以在任何人(包括苹果)实际上无法访问的情况下进行处理。音频只能通过配对的 iPhone 与手表之间的安全配对机制访问。

为了工作,Apple Watch 上 S11 芯片上的轻量级 AI 模型会检测佩戴者是否参与了对话,然后将其传输到 iPhone 上的安全区域。 iPhone 上的设备端处理会将音频转换为压缩文本,这意味着删除了填充词的对话文本。然后,该压缩文本被加密并发送到 Apple 的私有云计算 (PCC),以创建发送回的对话摘要

电话。 (随后将立即从 PCC 中删除概述和用于创建它的任何摘要)。

然后,您可以在 iPhone 上访问的回顾只有您自己可以访问,Apple 无法访问。当它们在多个 Apple 设备之间同步时,它们会被加密。

同样,Apple Watch 将音频传输到 iPhone 进行处理,以创建用于实时倒带的 15 秒片段。

苹果表示,这些功能都不会影响手表或手机的电池寿命。这些功能稍后将推出公开测试版,进行更广泛的测试,然后再向所有人公开。