12月12日消息,OpenAI 12天发布会的第五天恰逢苹果发布iOS 18.2,iOS 18.2为iPhone 16系列和iPhone 15 Pro机型带来了许多苹果智能(Apple Intelligence)功能,而ChatGPT让苹果智能变得更好,更易于使用。
在简短的直播过程中,OpenAI首席执行官山姆·奥特曼(Sam Altman)及其团队展示了如何通过iPhone或Mac上的Siri,以多种方式使用ChatGPT,这涵盖了利用视觉智能解读图像、将信息整理成列表等诸多功能。
奥特曼首先表示:“我们的合作伙伴苹果公司即将在iOS(适用于iPhone和iPad)及Mac OS上推出ChatGPT的集成功能。我们真心希望无论身处何地,用户都能毫无阻碍、轻松便捷地使用ChatGPT。我们喜欢苹果设备,因此这次集成让我们倍感自豪。更重要的是,即使用户没有账户,也能畅享这一功能。”
得益于ChatGPT的集成,苹果用户现在能够在Mac和iPhone上轻松调用OpenAI的模型。例如,用户可以通过Siri在Mac上打开文档,并借助ChatGPT查询相关信息。此外,这一更新还带来了与其他ChatGPT模型的深度融合,包括全新的01推理模型、Canvas以及DALL-E。
奥特曼及其团队还展示了如何利用01模型编写代码,并在代码编写完成后进行可视化处理。他们在演示中还展示了Siri与ChatGPT在提示栏中的视觉智能集成应用。他们让Siri和ChatGPT共同评选出最佳圣诞毛衣的照片。用户还可以直接指示Siri利用ChatGPT来安排任务或创建播放列表。
现在,用户可以从Siri直接打开适用于Mac和iPhone的ChatGPT应用程序,在这里进行更深入的操作,特别是利用全新的Canvas功能,用户可以添加表情符号或编辑由ChatGPT生成的内容。
三种集成方式
来自OpenAI工程团队的戴夫·库明斯(Dave Cummings)表示,他长期钟爱并使用了30年的苹果设备。如今,苹果用户将能在其操作系统中直接体验ChatGPT的便捷,这一功能全面覆盖iPhone、iPad及Mac设备。自今日起,OpenAI提供了三种不同的集成方式以满足用户需求:
第一,Siri现已具备识别超出其知识范畴问题的能力,并能主动提议利用ChatGPT来解答这些疑问。在提出此类建议时,Siri会首先询问用户是否愿意通过ChatGPT来处理他们的查询,并在发送任何请求之前,始终通过一条通知来征询用户的同意,确保用户掌握最大的控制权。
第二,写作工具升级,苹果智能中的写作工具原本就能帮助用户优化、总结文档,提取关键信息,而现在,借助ChatGPT,用户甚至可以从零开始创作全新文档。更令人惊喜的是,结合DALL-E图像生成技术,用户还能在撰写过程中直接融入由DALL-E生成的精美图片。
第三,对于iPhone 16用户而言,OpenAI还引入了“视觉智能”,用户只需轻触“相机控制”按钮即可轻松访问。开启摄像头后,用户便能利用搜索功能快速识别眼前物品,或是借助ChatGPT深入了解所观内容,甚至还能执行翻译、文本总结等多样化任务。
OpenAI产品团队的迈克达德·贾弗(Miqdad Jaffer)现场演示了这些功能的实际应用。
在iPhone上,用户只需启用苹果智能,依次进入设置、苹果智能和Siri,然后向下滚动即可发现新增的ChatGPT扩展选项。启用并登录ChatGPT账户后,用户还可以选择是否确认Siri发出的ChatGPT请求。每当Siri认为向ChatGPT提问是个好主意时,它会提示用户进行确认,并随后发送请求。此外,用户还可以从此处直接访问ChatGPT应用程序,进行更新、安装或打开操作。
以组织圣诞派对为例,若想直接利用ChatGPT,用户只需通过Siri快速提问。例如,让ChatGPT为我们策划一场圣诞派对。随后,用户就能看到ChatGPT迅速响应,双方进行互动交流,而用户也将收到详细的回复,如宾客名单、音乐及娱乐项目等建议。
奥特曼则现场展示了如何制作节日播放列表。当用户特别想找到一首歌,如玛丽亚·凯莉(Mariah Carey)的经典曲目《All I Want for Christmas is You》时,只需在ChatGPT应用中简单操作即可。若想进一步编辑内容,只需点击底部的蓝色“ChatGPT”图标,即可打开ChatGPT界面,所有对话内容均已整合其中。用户可以进行各种操作,如为播放列表添加表情符号、制作专辑封面等。
奥特曼还以圣诞毛衣比赛为例,展示了如何利用ChatGPT与视觉智能相结合的功能评选出最有趣的毛衣。用户只需长按相机控制按钮,开启视觉智能,该功能将首先识别照片中的元素。尽管每件毛衣都独具魅力,但奥特曼的毛衣因其大胆的设计脱颖而出,被评选为获胜者。
库明斯演示了如何在工作场景中利用ChatGPT和苹果智能。
在Mac上,用户只需进入系统设置,便能轻松启用苹果智能。值得注意的是,在MacOS 15.2版本中,新增了一个ChatGPT扩展功能,这为用户带来了更多便利。与在iPhone或iPad上的使用体验相似,用户可以选择完全匿名地使用该功能,或者登录自己的账户进行操作。
一旦启用了苹果智能,用户几乎可以在任何应用程序中随时调用Siri或写作工具,而且调用Siri的方式也变得更加便捷。为了避免“嘿Siri”指令在不同设备间的误触发,用户可以禁用该功能,确保只有指定的MacBook或iPhone会响应。此外,现在用户还可以通过打字的方式与Siri进行交互。只需点击屏幕右上角的Siri图标,或者连续按两次command键,即可调出Siri的打字界面。当Siri识别到某项任务较为复杂,可能会主动提出让ChatGPT来协助完成。在此过程中,Siri会先请求用户的确认,然后便会借助OpenAI强大的模型来共同实现这一目标。
那么,这些功能在实际应用中会有哪些场景呢?库明斯以一个包含9页系统卡片和49页PDF文档的示例进行了演示。他在预览应用中打开了这些文档,当Siri识别到这是一个需要深入处理的任务时,它会提示用户选择是发送当前页面的截图,还是整个49页的PDF文档给ChatGPT。这一过程中,用户始终拥有对分享内容的完全控制权。
奥特曼最后总结道,所有这些功能都可以在Mac上的几乎任何应用程序中使用,而且用户的iPhone随身携带,使得这些功能的使用更加灵活便捷。他期望那些已经在使用ChatGPT的用户,现在能够在更多场景、更流畅地享受它带来的便利。