Apple「随航」的无感体验里，藏着多少流畅的秘密？

相较于 Jobs 时代令人惊叹的「iPhone 时刻」，过去十五年的 Apple 或许少了一些足以重新定义一个品类的震撼——但围绕「体验」本身展开的技术革新却从未停止。 在 WWDC26 发布的 iPadOS 27 与 macOS Golden Gate 中，随航迎来了堪称史诗级的更新 —— 你可以通过 iPad 的触控屏，用手指完整操控随航中的 macOS。某种程度上这也印证了「Apple 即将推出触屏版 MacBook」的传闻。 开发者文档中关于「随航」触控新特性的介绍。 图源：Apple 若你已经加入 iPadOS 以及 macOS 的 Beta 计划，更新至 iPadOS 27 与 macOS Golden Gate 后即可直接在随航功能中体验到这一新特性。经笔者实测，当前 Beta 版本中触控的延迟几乎难以察觉，交互也足够流畅。不过由于 macOS App 大多针对的是键鼠的操作逻辑，大部分 App 尚未针对触控交互进行专门优化，目前大部分的点击与滑动操作，本质上只是由系统转译为相应的鼠标操作。 虽然在现阶段，相信你在体验一段时间后可能还是会更愿意回到传统的键鼠操作。但在高强度使用随航近两年后，笔者对它最深的印象其实只有两个字：无感。有时它的流畅甚至会让我忘记两台设备之间并没有数据线连接。 本文试着从协议、编码、硬件等技术层面入手，为你解析随航功能流畅体验背后的秘密。 什么是随航？ 或许有些读者对随航还不太熟悉。简单来说，随航（Sidecar）就是通过无线或有线传输的方式，将你的 iPad 作为 Mac 的扩展显示屏。不需要复杂的 App 连接、也不需要数据线，只需打开 Mac 和 iPad 进行配对，Mac 便拥有了第二块屏幕。 图源：Apple 你可以在 macOS 菜单栏中点击「控制中心 > 屏幕镜像」，然后在「镜像或扩展至」一栏中选择对应的 iPad 来开启随航。Mac 会通过蓝牙查找 iPad，然后以点对点 Wi-Fi 的形式传输画面。 你也可以前往「系统设置 > 显示器」中，在底部选择「镜像或扩展至 iPad」，然后从列表中选择一部 iPad。 连接完成后，iPad 会像普通外接显示器一样出现在 macOS 的显示器设置中，你可以调整它的位置、分辨率以及镜像或扩展方式。这里就不再赘言了。 除此之外，随航也针对 iPad 的特性进行了一些扩展，前文提到的「触控」特性便是其中之一。另外随航从推出之初便支持 Apple Pencil，你可以直接在 iPad 屏幕上使用 Apple Pencil 操作 Mac 应用；在兼容的应用中，压感、倾斜等笔触信息也能得到保留。从某种程度上说，开启随航的 iPad 可以当作一块带屏幕的数位板使用。 若想了解更为详细的内容，如具体的操作以及扩展功能，你可以访问 Apple 官网 或查看少数派中有关 随航 的介绍。 在「随航」成为官方功能之前 从功能和体验层面来说，随航可以说是相当完善，但「让 iPad 变成 Mac 副屏」其实并不是 Apple 首创的想法——事实上，在第一代 iPad 正式发售的当天这一概念便已落地，并以一款 iPad「首发 App」的形式登陆 App Store。 它叫 iDisplay，由 SHAPE Services 开发。 iDisplay 官网（2012） iDisplay 会在 Mac 中安装一套扩展驱动，创建一块系统能够识别的虚拟显示器，再通过 Wi-Fi 将画面发送到 iPad。用户可以像使用普通副屏一样排列两块屏幕，把 Mac 窗口拖到 iPad 上；甚至在遥远的 2010 年，iDisplay 就能「十分先进」地将 iPad 的触摸及键入操作反向传回 Mac。 只是这款诞生于 iPad 发售之初的软件远远谈不上「流畅」，甚至有着堪称灾难的使用体验：无论是繁琐的前期设置、极不稳定的连接，还是动辄数秒的延迟，都表明它更像是一次对新技术的探索，而非成熟的解决方案。 所以同年，Avatron Software 推出了 Air Display。它采用了与 iDisplay 相似的思路，进行了一部分的优化，不过仍称不上「好用」，动态画面仍有不小的延迟。此后几年，围绕「iPad 作为扩展副屏」的解决方案不断涌现，但总体而言，彼时「将 iPad 作为扩展副屏」这个点子在大多数人看来还是一种新奇的功能玩法，或是应急需求，没有人真正将它视作生产力的一部分。 Air Display 演示界面。 图源：MacFormat（YouTube） 读到这相信你也在想：既然「无线」带来了那么多问题，那加上一根线不就行了？巧了，正有一群和你抱有同样想法的前 Apple 工程师。于是 Duet Display 来了。 Duet 官网（2014） 与上述使用过 Wi-Fi 传输的产品不同，Duet Display 须使用 Lightning 或 30 Pin 数据线连接 Mac 与 iPad。得益于有线这一较为稳定的传输方式，Duet Display 打出了「Retina、60 fps、No Lag」的宣传旗号。 但需要注意的是，这里的「有线连接」有别于普通的显示器连接，它并不能直接将 iPad 扩展为一块普通的显示器 —— 因为iPad 不能通过它直接接收 Mac 输出的视频信号，本质上，它只是将数据传输方式从无线改为有线；画面的生成与显示过程仍与先前的软件类似，需要先在 Mac 中创建一块虚拟显示器，再将画面处理后传送至 iPad。 因此 Duet 也并没有像宣传的那么美好：其 Retina 与 60 fps 模式会占用大量 CPU，部分旧款 Mac 仍会出现光标延迟、画面伪影与系统卡顿。所以再后来，市面上又出现了针对将 iPad 扩展为数位板的 Astropad、以及借助 DisplayPort 硬件适配器、让 Mac 将 iPad 识别为「真实外接显示器」的 Luna Display 等产品...... 时至今日，市场上依然活跃着不少第三方随航类软件，其中一些在满足特定需求方面仍有优势，在此暂且按下不表，有兴趣的读者可以根据自己的需求进一步探索。 让我们谈回 Apple。 2019 年 6 月 3 日，Craig Federighi 在 Apple 的 WWDC 2019 上首次公布了一项名为 Sidecar 的新功能，正式将「让 iPad 变成 Mac 副屏」纳入系统功能中。 WWDC19 Keynotes。 图源：Apple 这里有一段颇有意思的小插曲。随航亮相后，Astropad 作为前文介绍的 Astropad Studio 与 Luna Display 背后的团队，很快在 官网 发文「抗争」，声称 Apple「高度复制」了自己的产品线，并把这次遭遇称为被 Apple Sherlock。这番指控究竟有多少事实依据，我们便不得而知了。 虽然 Sidecar 在整场发布会中只出现了不足 60 秒，但其中一些有趣的细节仍值得我们探索。毕竟很长一段时间里，Apple 的软件功能似乎都给人一种印象：它们或许未必最早出现，但被 Apple 整合进系统后，往往能呈现出相较第三方要更加完整的体验。 一帧画面的旅程 简单来说，一帧画面要显示在