全程图文实况|OpenAI 12天产品发布 - Day5: 苹果智能集成ChatGPT

文摘   2024-12-12 06:48   浙江  

👇关注公众号后设🌟标,掌握第一手AI新动态


本文内容整理自OpenAI 12天产发布第5天,公开发表于2024年12月11日。原始内容参考:https://www.youtube.com/watch?v=mBhkD0iFf4w

内容提要: OpenAI 12天产品发布第5天:ChatGPT与苹果智能集成

本文介绍了ChatGPT与苹果设备(iPhone、iPad和Mac)的全新集成,并演示了其使用方法和主要功能,核心观点如下:

  1. 无缝集成: ChatGPT集成到iOS和macOS系统中,无需额外账户即可使用,拥有账户则体验更佳。
  2. 多种集成方式:  提供了三种集成方式:
  • Siri集成: Siri可以根据任务需要,自动调用ChatGPT处理复杂任务。
  • 写作工具集成:  在苹果写作工具中直接使用ChatGPT进行文档撰写、优化、摘要和提取要点。
  • 视觉智能集成(iPhone 16): 通过相机和视觉智能功能,利用ChatGPT分析图像内容。
  • 使用方法演示(以iPhone为例):  演示了如何启用苹果智能中的ChatGPT扩展程序,以及如何通过Siri语音指令或直接在应用程序中使用ChatGPT。
  • 跨应用使用(MacOS):  在MacOS系统中,几乎可以在任何应用程序中通过Siri或写作工具调用ChatGPT,并可以分享屏幕截图或完整文档给ChatGPT处理。
  • 功能演示: 演示了ChatGPT的多种功能,包括:组织派对、生成歌单、创建图像、分析图片内容并进行排名、根据文档内容生成饼图等。
  • 便捷性提升:  旨在让用户更方便、更低摩擦地使用ChatGPT,将其融入日常使用场景中。
  • 发布会全文

    山姆·奥特曼: 欢迎来到第五天。今天我们将讨论如何让ChatGPT使用起来更加便捷。我们的苹果朋友们正在发布iOS版(适用于iPhone和iPad)以及macOS版的ChatGPT集成。我们真的希望让ChatGPT在任何地方都能轻松无缝地使用。我们非常喜欢苹果设备,因此这项集成是我们引以为傲的成果之一。您可以无需账户即可使用它;如果您有账户,体验会更好。我想我们应该直接进入演示环节,向您展示它的使用方法。

    戴夫:  是的,很酷。我是戴夫,来自工程团队。正如萨姆所说,我们热爱苹果设备。我已经使用了30年的苹果设备,各种苹果设备都用过。

    现在,您将能够直接从操作系统中调用ChatGPT。这适用于iPhone、iPad和Mac。从今天开始,我们将提供三种不同的集成方式,今天我们将向您展示所有这些。

    首先是Siri。当Siri认为将任务交给ChatGPT会有所帮助时,它可以直接将任务转交给ChatGPT。接下来是写作工具。苹果智能中的写作工具允许您优化文档并对其进行摘要,提取要点。但现在您还可以使用ChatGPT从头开始撰写文档,这非常酷。

    此外,iPhone 16上还提供了相机控制功能,让您可以调用视觉智能。使用此功能,您可以利用ChatGPT来了解您正在查看的内容,这也非常酷。

    接下来是麦克道,他是产品团队的成员,他将向我们展示其中一些内容。

    麦克道: 好吧,让我们打开我们的iPhone。打开后,有一些需要注意的地方。拿到iPhone后,首先需要启用苹果智能。因此,我们将进入设置,然后进入苹果智能和Siri。我将启用苹果智能,我已经启用了。

    向下滚动,新的ChatGPT扩展程序现已可用。不错,这就是ChatGPT。打开后,您可以启用ChatGPT并登录您的帐户。在本例中,我已经登录。您还可以选择确认ChatGPT请求。正如戴夫提到的那样,任何时候,如果Siri认为向ChatGPT提问是个好主意,它都会在您发送信息之前提示您。

    您还可以访问该应用程序,您可以直接从此处更新、安装或打开它。但是我已经全部设置好了,所以让我们回到主屏幕。我觉得我们现在心情很喜庆。是的,有些事情正在发生,所以让我们来组织一个圣诞派对吧。

    作为快捷方式,如果您想直接访问ChatGPT,只需让Siri询问ChatGPT即可。我将调用Siri。出现了一个新的彩虹状图标。你能让ChatGPT帮我们组织一个圣诞派对吗?

    所以我们马上就能看到ChatGPT正在工作。它会来回进行操作,我将得到一个回复。在本例中,我看到很多不同的内容,包括宾客名单、音乐和娱乐节目。

    山姆·奥特曼:  我们可以向你索要那个节日歌单吗?

    麦克道:  是的,就这么做。我们可以制作一个节日歌单吗?我不知道你们怎么样,但我特别想找一首特定的歌,那就是第一名。

    戴夫:  好的,是第一名。如果玛丽亚·凯莉不在,我想我们必须提交一个bug。

    麦克道:  我认为这是一个不错的歌单,我喜欢。我想能够在ChatGPT应用程序中进行更多编辑。底部有一个蓝色的图标,上面写着ChatGPT。如果我点击它,它将打开ChatGPT,其中包含我所有已集成的对话。太酷了!我可以做一些常规的事情,比如在歌单中添加表情符号。

    它会这么做的。但我认为我们需要更有节日气氛的东西。这很喜庆,但让我们做一个专辑封面吧。让我们做一个专辑封面。出于某种原因,我不知道为什么,但我感觉青蛙真的会让它更出彩。我也这么觉得。是的,我不知道,这是一种背景感觉,但我感觉青蛙,加上一只青蛙,在封面上。

    戴夫:  你认为ChatGPT知道青蛙是什么吗?

    麦克道:  当然不知道。让我们看看会发生什么。我们得到了……

    山姆·奥特曼:  我们确实有更快的图片生成功能即将推出。

    麦克道:  看到这个出现总是很棒的。嘿,来了。嘿,那是一只青蛙。中间是一只巨大的快乐青蛙,充满了节日氛围。我认为我们已经准备好派对了。既然我们已经很兴奋了,我很想让视觉智能发挥作用。我认为我们应该举办一场圣诞毛衣大赛。我认为ChatGPT应该帮助我们对谁最有趣到最无趣进行排名。为此,我觉得正确的做法是让圣诞老人跳舞。

    麦克道:  所以我将长按相机控制按钮,我得到了视觉智能……

    戴夫:  现在我们可以看到我们可爱的摄像头……

    麦克道:  是的,我们将打破第四堵墙一会儿。大家能挥挥手吗?大家好。让我们放大我们的照片,我将按下这个询问按钮,它将直接询问ChatGPT。首先,它只会识别图片中发生的一些事情。所以让我们看看会发生什么。我们正在举办一场圣诞毛衣大赛。

    左边是麦克道,中间是戴夫,右边是萨姆。

    让我们从最有趣到最不有趣排名一下。好吧,这是关键时刻了。Sam赢了?

    我为此提交了一个bug。所以我是最后一名。这件毛衣采用更传统的款式设计,带有微妙的节日图案。什么?等等,往下拉。所有毛衣都各有特色,但Sam的脱颖而出。

    山姆·奥特曼:   它大胆的配色几乎让人觉得有趣。让我告诉你一些事情。有人为我买了大约三个款式,我必须在刚才才选好要穿哪一件。我当时想,如果我能赢,那是因为它与众不同。你知道,

    麦克道:   让我们为Sam制作一个奖杯图像。我没想到会有这个结果。我真的很期待LED灯会有什么特别的展示。恭喜你,毛衣冠军!太酷了。太好了。是的,喜欢这个。好的,我们已经完成了有趣的环节。我的热情消退了,我要让圣诞老人慢下来。我只想说我觉得这很不公平。我很感谢你,Sam。但是我们现在要转到Dave,他将向我们展示如何使用Apple Intelligence恢复工作。

    戴夫:  是的,游戏结束了。如果我回到我的Mac上,就像麦克道之前在iPhone上展示的那样,如果你进入系统设置,你可以启用Apple Intelligence。在这里,我们已经启用了Apple Intelligence。Mac OS 15.2 Sequoia中一个我们以前没有的新功能是ChatGPT扩展程序。就像在iPhone或iPad上一样,你可以完全匿名地使用它,也可以使用账户。这里我们已经链接了一个账户。

    真正酷的是,现在我已经启用了Apple Intelligence,我几乎可以在任何应用程序中调用Siri或写作工具。调用Siri非常容易。我已经禁用了“嘿Siri”,这样房间里的所有Macbook和iPhone就不会同时响了。但是你现在可以用文字向Siri发出指令。你可以点击右上角的小Siri图标,或者两次按下command键,它就会调出Siri提示框。这真的很酷。

    此外,每当Siri遇到复杂任务时,它可能会决定寻求ChatGPT的帮助。它会将任务转交给ChatGPT,请求确认,然后利用我们强大的模型来完成任务。那么,我们可以在哪些地方使用它呢?

    好吧,为了赶上我们本周的所有发布内容,我这里有o1系统卡片和49页的PDF。我在预览中打开了它,但是,就像在任何应用程序中一样,我只需双击command键即可调出“对Siri说”。比如这个:这个文档超级长。他们是如何让模型在编码方面如此出色?

    你知道吗?我没有在系统卡片中。所以让我确保在这里获得正确的认可。所以发生的事情是Siri识别到,好吧,这是一个复杂的任务。让我们把它发送给ChatGPT。但在我们这样做之前,它想知道,我们是否想将我正在查看的任何内容作为请求的一部分发送?

    我们可以发送屏幕截图或完整的49页PDF。全部发送?始终全部发送。我能够控制与ChatGPT共享的内容,所以现在我们正在上传整个文档,以便ChatGPT与我的查询一起处理,例如,他们是如何让这个模型在编码方面如此出色的?

    太棒了,答案来了。也许这为我节省了大量时间。麦克道之前在iPhone上展示过,如果你点击底部的那个小ChatGPT按钮,它会在这个ChatGPT中打开,这超级酷,因为我可以保存它以备后用。我可以继续对话,我可以做更多的事情。

    所以,现在我已经在这里保存了它,并且它出现在我的侧边栏中,我可以做的一些很酷的事情是……

    山姆·奥特曼:   好的。顺便说一句,ChatGPT桌面应用程序现在非常好用,如果你想尝试一下的话。

    戴夫:  它非常好用。我是一个视觉学习者。我们可以制作一个饼图来显示每种技术对提高其编码能力的相对影响吗?所以这只是在我们离开的地方继续进行。它已经拥有完整的PDF文件。它能够再次通读它,分析它,推断出,我想,这里每种不同技术的相对等级和重要性,并最终编写一些代码来帮助可视化它。

    酷。我会咨询我们推理团队的同事,看看这是否具有代表性,但这有助于我更好地理解这篇论文,这太酷了。

    所以所有这些都可以在你Mac上的几乎任何应用程序中实现,它无处不在,在你的iPhone里,在你的口袋里。我们希望许多可能已经在使用ChatGPT的人现在能够在更多的地方以更低的摩擦力使用它。

    山姆·奥特曼:   是的,我们对这次发布或这个版本感到非常兴奋。这个按钮让与ChatGPT对话变得非常容易。这个按钮使ChatGPT能够轻松地为你查看某些内容。我们希望你们喜欢它。感谢我们在Apple的朋友们,祝你们今天过得愉快。

    参考资料: https://www.youtube.com/watch?v=mBhkD0iFf4w,公开发表于2024-12-11

    关注公众号后设🌟标,掌握第一手AI新动态

    往期精选

    1. 黄仁勋专访:OpenAI在大模型混战中达到“逃逸速度”
    2. 李飞飞与Justin深度解读空间智能:数字世界需要三维表征,才能与现实世界融合
    3. PayPal创始人彼得·蒂尔:人类科技停滞源于原子方面的进展远慢于比特
    4. 谷歌联合创始人布林:巨头们打造的“上帝模型”几乎可以理解一切
    5. 马斯克:AI将使商品和服务的成本趋近于零
    6. Karpathy最新专访:人形机器人、特斯拉、数据墙与合成数据

    瓜哥AI新知
    紧追AI业界一手观点、访谈、动态,点滴构建AI底层认知
     最新文章