苹果不想让你担心新款 Apple Watch 的聆听功能

新款 Apple Watch Series 12 和 Ultra 4 不仅具有更好的健身追踪功能和升级的降噪功能，而且还提供全新的聆听方式。苹果周三宣布，这两款智能手表配备了四种可选的“音频智能”工具，这些工具由手表麦克风收集的音频提供支持。它们包括声音和音乐识别、对话重述功能和“实时倒带”功能，以便用户可以看到过去 15 秒内在其环境中所说的任何内容的转录。苹果似乎担心这些功能可能会让人感觉隔墙有耳，但苹果强调所有这些功能都是为了优先考虑隐私和安全，利用该公司为保护其他 Apple Intelligence 和 Siri 服务而开发的广泛基础设施。然而，随着越来越多的此类功能首次亮相，音频智能公告提醒人们，人工智能驱动的工具在计算和生活的所有领域正变得越来越普遍。该公司在与《连线》分享的一份报告中写道：“这些功能不会创建或存储录音，操作系统、应用程序、用户或苹果完全无法访问用于处理的原始音频。” Apple Watch 的新功能旨在在设备上本地处理尽可能多的数据，因此潜在的敏感数据不会传输到云端。例如，声音识别功能可以提醒用户周围环境中的声音，包括门铃、警报器、闹钟，或者婴儿的哭声，而无需从手表上发送任何数据。将信息发送到云端的工具会对数据进行预处理，使其不是原始音频文件，然后使用苹果的私有云计算基础设施。苹果强调，由于该公司新的 S11 芯片，其 Apple Watch 的设备端功能得到了扩展。这些芯片包含一个特殊的内存保护空间，苹果公司将其称为 Secure Exclave。该隔离区专为传感器数据而设计，是一个隔离的缓冲区，操作系统的其余部分无法访问，Apple Watch 可以在受保护的空间中保存和处理音频数据。 Shazam 的新功能可以“聆听”音乐，并生成存储在 Secure Exclave 中的歌曲签名。如果用户导航到 Shazam 来查找音乐是什么，该工具会将该签名（而不是音频文件）发送到 Shazam 的服务器进行识别。 （Shazam 是 Apple 旗下的一项服务。）如果用户没有提示识别音乐，或者一旦提示识别音乐，特殊签名就会“立即”从手表中删除。重述功能被称为 Siri Recap，可以设置为一直开启并生成任何实质性对话的重述，或者可以为其指定在一天中特定时间收听的时间表。专用人工智能模型无需记录或转录任何数据即可确定语音何时发生。如果检测到对话，音频就会进入 Apple Watch 上 Secure Exclave 内的受保护缓冲区，手表对其进行加密，然后使用 Apple 特殊的安全蓝牙配对将其传输到用户 iPhone 上的 Secure Exclave。然后音频会立即从 Apple Watch 中删除。 iPhone 使用设备上的本地语音识别和语言模型来转录音频，然后生成最小版本的转录内容，删除多余的单词和重复的短语等不必要的元素。然后原始音频也会立即从 iPhone 中删除。苹果表示，iPhone 的最后一步是安全模型，“筛选文本以忽略潜在有害的术语”。从那里，对话的精华被加密，iPhone 将其发送到私有云计算。