的 现在能够与您的计算机上的其他应用程序协同工作，为开发者带来便利。
周四， 宣布适用于 macOS 的 桌面应用程序新增了一项功能，它可以读取一些常用的编码应用程序中的代码，例如 VS Code、Xcode、、 和 。这项更新意味着开发者无需再将代码复制粘贴到 中，而是可以直接在编码过程中与聊天机器人互动，它将自动发送您正在处理的代码部分作为上下文，以及您的提示信息。
尽管如此， 目前还不能像 或 等 AI 编码工具那样，直接帮您将代码写入开发者应用程序。 表示，这项名为“与应用协同工作”的功能是构建更高级 AI 代理系统的“关键基石”，尽管目前它还处于初级阶段。
目前， 将重点关注编码应用程序，因为 AI 编码助手已经成为大语言模型 (LLM) 最受欢迎的用例之一。这项功能已经向 Plus 和 Teams 用户推出，并计划在接下来的几周内向 和 Edu 用户推出。未来， 还将能够与其他类型的应用程序配合使用，尤其是那些可以用于写作任务的基于文本的应用程序。
您现在可以选择一些与 配合使用的编码应用程序。图片来源：
在 的演示中， 的一名员工展示了如何使用 应用程序与 Xcode 环境协同工作。员工在 中选择了一个 Xcode 选项卡，并提示聊天机器人“添加缺失的行星”。聊天机器人成功完成了任务，编写了一行代码来表示地球，与项目其余部分的格式相匹配。不过，他们仍然需要将 的答案粘贴回他们的开发环境中。
桌面产品负责人 表示，为了读取不同的应用程序， 主要依赖于 macOS 的辅助功能 API 来读取文本并将其翻译成 。macOS 上的屏幕阅读器已经存在近二十年，它可以帮助 Apple 的 功能正常工作。然而，它并不是对所有应用程序都同样有效。
对于某些应用程序，例如微软的 VS Code，Work with Apps 功能要求用户安装特殊扩展程序来查询内容。此外，苹果的屏幕阅读器只能读取文本，因此无法帮助 理解视觉元素，如照片、物体的方向或视频。
使用应用程序时， 会发送最后 200 行代码，以及某些应用程序的每个提示。对于其他应用程序，最前面窗口中的所有代码都将用作聊天机器人的输入。用户可以选择突出显示代码或文本的某些部分，以帮助 专注于项目的正确部分，但 还会包含其周围的文本。这一切听起来会使用很多输入令牌。
与 xcode 协作。图片来源：
目前尚不清楚 计划如何将这项功能扩展到与 Apple 屏幕阅读器不兼容的其他应用程序。 的竞争对手之一 发布了一款 AI 系统，该系统可以分析用户桌面的屏幕截图，以理解和使用其他应用程序。 的方法在目前状态下有很多不足之处：它速度慢，而且经常出错。的系统是一个更为通用的AI代理版本，它不仅能读取另一个窗口中的文本，还能做更多的事情。
“这并不是要成为一个代理；它是一种与编码工具协作的方式，很快会有更多的工具推出，” 在接受 的简报时说。“在代理方面，我认为这是一个非常关键的构建模块。 可以理解或处理你拥有的所有内容，从而为你提供帮助。”
据彭博社报道， 即将发布代号为“”的通用 AI 代理，迈向代理的这一步尤其引人注目。该工具预计将于 2025 年初问世，并将与其他早期的通用 AI 代理相媲美，例如 的””应用或谷歌报道的“”代理。
首次在 macOS 上发布这些功能，不久后苹果将于 12 月推出与 的集成。目前尚不清楚 Work with Apps 何时会登陆 ， 是由 最大的支持者微软创建的操作系统。
323AI导航网发布
相关文章
