OpenAI 近日扩大了其桌面应用可与之配合使用的应用数量,包括允许高级语音模式与其他应用一起工作,并朝着让 ChatGPT 使用计算机的方向更进一步。 去年 11 月,桌面应用推出了集成功能,最初支持四个应用。在其“OpenAI 十二天”活动的第 11 天,OpenAI 宣布了将支持的几个新的集成开发环境(IDE)、终端和文本应用。 ChatGPT 现在支持 BBEdit、MatLab、Nova、Script Editor、TextMate 作为 IDE,VS Code for VSCode Insiders、VSCodium、Cursor、WindSurf、JetBrains 系列 IDE 中的 Android Studio、AppCode、CLion、DataGrip、GoLand、IntelliJ IDEA、PHPStorm、PyCharm、RubyMine、RustRover 和 WebStorm。它还添加了 Warp 和 Prompt 终端应用作为集成。这些应用与 VS Code、Xcode、Terminal、iTerm 2 和 TextEdit 一起成为集成应用。 但编码应用并不是 ChatGPT 桌面应用可以访问的唯一应用。OpenAI 还将 Apple Notes、Notion 和 Quip 添加到其集成中。高级语音模式可以与这些应用一起工作,考虑到集成中项目的上下文。 OpenAI 强调,用户必须授予 ChatGPT 访问这些应用的权限。 让 ChatGPT 为你使用计算机 当然,AI 聊天机器人与应用的集成并不是什么新鲜事。去年 10 月,GitHub Copilot 添加了编码平台集成。将应用连接到 ChatGPT 或 Copilot 可以将这些平台的上下文带入聊天体验。开发人员可以在 VS Code 上为某个项目提示 ChatGPT 提供一些编码帮助,聊天机器人会理解他们正在做的事情。 OpenAI 首席产品官 Kevin Weil 在直播中表示,改进桌面应用将有助于公司为 ChatGPT 实现更具代理性的用户体验。 “我们一直在大力投入我们的桌面应用,”Weil 说。“随着我们的模型变得越来越强大,ChatGPT 将越来越具有代理性。这意味着我们将超越问答;ChatGPT 将开始为你做事。” 他补充说,桌面应用“是这一转变的重要组成部分”。 “作为桌面应用,你可以做的比仅仅在浏览器标签中做的要多得多,”他说。“这包括,在你的许可下,能够看到你屏幕上的内容,并能够自动化你在桌面上所做的很多工作。随着我们进入 2025 年,我们将有更多的话要说。” 如果 OpenAI 让 ChatGPT 更多地了解你的计算机,ChatGPT 将更接近 Anthropic 的 Claude Computer Use 功能,该功能允许 Claude 在人的计算机上点击、导航屏幕甚至输入文本。 OpenAI 已经为移动版 ChatGPT 宣布了一个相当类似的功能,尽管聊天机器人还不能以同样的方式访问计算机或手机。用户可以与聊天机器人共享他们的屏幕,以便它可以“看到”他们正在阅读或查看的内容。微软和谷歌也开发了类似的功能,分别是 Copilot Vision 和 Project Astra。 如何访问 在 MacOS 上,希望在使用其他应用时打开 ChatGPT 的用户可以使用“option + space”调出 ChatGPT,并通过聊天屏幕上的按钮选择他们需要的应用。另一个快捷键“option + shift + 1”将调出使用的最顶层应用。 从该窗口,用户还可以以同样的方式访问高级语音模式。语音模式会自动检测应用的上下文。 集成功能可供 ChatGPT Plus、Pro、Team、Enterprise 和 Edu 用户使用。然而,Enterprise 和 Edu 订阅用户必须要求其 IT 管理员启用该功能。