OpenAI 宣布在其高级语音模式中新增了期待已久的视频聊天和屏幕共享功能。

这一新功能现已在 iOS 和 Android 移动应用程序中向 ChatGPT Teams、Plus 和 Pro 用户开放,预计将在明年1月向 ChatGPT 企业版和教育版订阅用户推送。不过,来自欧盟、瑞士、冰岛、挪威和列支敦士登的用户将无法使用这一高级语音模式。

OpenAI 在今年5月首次提及这一功能,当时公司展示了 GPT-4o 如何 “观看” 游戏并解释游戏进程。随后,高级语音模式于9月正式推向用户。用户可以通过高级语音模式屏幕上的新按钮开始视频通话,这种视频模式类似于 Facetime,ChatGPT 能够实时响应用户在视频中展示的内容。

在 OpenAI 的演示中,ChatGPT 通过视频功能帮助用户冲泡咖啡。它能够识别咖啡器具,指导用户何时放入滤纸,并对冲泡结果进行评价。此外,ChatGPT 也能记住自我介绍的人,表现出更高的互动性。这种视频互动方式与谷歌最近推出的 Project Astra 相似,后者同样能够在视频聊天中回答用户关于所见物体的问题,比如识别伦敦街头的雕塑。

屏幕共享功能则使 ChatGPT 能够超越应用程序本身,进入浏览器环境。用户只需通过三点菜单打开屏幕共享,便可在手机上打开应用,并询问 ChatGPT 关于其所见的内容。在演示中,OpenAI 的研究人员触发了屏幕共享,然后打开了消息应用,请求 ChatGPT 帮助回复一条照片信息。

然而,ChatGPT 的屏幕共享功能与微软和谷歌近期推出的类似功能有相似之处。上周,微软推出了 Copilot Vision 的预览版本,允许 Pro 订阅用户在浏览网页时打开 Copilot 聊天,能够识别网页上的照片或帮助进行地图猜谜游戏。而谷歌的 Project Astra 也可以以相似方式读取浏览器内容。

此外,OpenAI 还推出了一个轻松有趣的 “圣诞老人模式”,用户可以与模仿圣诞老人声音的 ChatGPT 进行对话。

不同于新功能的用户限制,“圣诞老人模式” 在移动应用程序、网页版本及 Windows 和 MacOS 应用中均可使用,直到明年1月初。需要注意的是,与圣诞老人的聊天不会被保存到聊天记录中,也不会影响 ChatGPT 的记忆功能。

划重点:

🎥 新增视频聊天功能,ChatGPT 可实时响应用户所见内容。

🖥️ 屏幕共享功能上线,用户可在手机上请求 ChatGPT 提供帮助。

🎅 “圣诞老人模式” 上线,用户可以与模仿圣诞老人声音的 ChatGPT 互动。