Apple Intelligence能做什么?解析苹果全面整合AI的战略

苹果将在其iPhone、iPad和Mac上大力推广被称作Apple Intelligence的个人智能化系统。《华尔街日报》的科技专栏作家Joanna Stern分析了Siri的改进、ChatGPT的助力、写作助手、Genmoji和语音转文字等新功能的意义。封面图片制作:Preston Jessee for WSJ WSJ S Chinese

苹果公司已在其iPhone、iPad和Mac的各软件中整合了AI,即“Apple Intelligence”。

图片来源:APPLE

“我们认为,AI的角色不是取代我们的用户,而是赋能用户,”苹果公司软件工程高级副总裁Craig Federighi在会后表示。“它需要整合到你一直在使用的体验中。它需要简便易懂。但是,它还需要了解你的个人情况。”

在回答生活中的问题时,苹果公司能做的远比那些独立的聊天机器人要多。好的AI工具可以帮助用户处理照片、笔记和信息,甚至是通知提醒。

周一,在现场观看整场活动并与苹果公司高管们交谈时,我最大的想法是:这些真的是尖端的、有用的工具吗?还是说苹果公司只是将AI塞到现有产品中,以追赶目前AI领域的领跑者微软(Microsoft)和谷歌(Google),并且还能卖出更多的iPhone手机?我认为两者兼有。

关于这些,我将在实际测试后了解更多信息。现在,只能依靠苹果公司的展示和严格控制下的演示。

全新Siri

自2011年Siri诞生以来,苹果一直承诺这是“一个谦逊、智能的个人助理,一直追随你,只要你开口,它就为你服务”。

从以往经验看,事实并非全然如此。不过,也许现在才是Siri的时代。苹果对Siri的设想是AI个人助理,用户可以向Siri询问任何私人信息或者全世界的公开信息。

除了语音沟通,你现在也可以与Siri进行文本交流了。

图片来源:APPLE

与其他聊天机器人类似,你现在也可以用Siri进行文本交流了。但与其他聊天机器人不同的是,Siri可以访问你的苹果设备上的一切。当苹果公司承诺的全部更新都落实后,Siri将能浏览你设备屏幕上的内容,并能够跨应用程序来工作。比如,“把这个地址添加到他的联系人卡片中。” “把昨天野餐的照片以文本形式发给我妈妈。”这类事情对人类来说完全合情合理,但到目前为止,Siri还无法做到。

在一次演示中,苹果公司展示了如何用Siri帮忙填写PDF表格。Siri还能找到用户驾照的照片,提取驾照上的号码并输入表格。在另一个演示中,Siri可以在短信和邮件中搜索朋友发送的食谱。

真正让Siri功能得到提升的是它的新朋友ChatGPT。当你要求Siri做一些它不知道怎么做的事情时,比如说,根据你最近的购物清单安排出一顿晚餐菜谱,Siri就会征求你的允许,向嵌入到Siri里面的OpenAI的集成版ChatGPT征询意见。

你不必是ChatGPT Plus的用户,就可以享受Siri的这种功能。如果你有一个ChatGPT帐户,你可以连接到它并访问付费的额外功能。Federighi说,苹果公司计划在以后让用户选择自己喜欢的大语言模型,其中包括谷歌(Google)的Gemini等。

我的AI分析:如果苹果公司真的能做到它所展示的那样,让人们相信Siri不再那么让人难以忍受的笨拙,那可能会成为一个科技奇迹。这是一个带有很大不确定性的“如果”。要知道,苹果公司已经对Siri进行了十年的改进,但效果却不尽如人意。

写作工具

我每天用生成式AI做什么?写作。不,不是写作我的专栏。(你看得出来这一点!)我用生成式AI来总结文章和报告,起草电子邮件等等。

苹果公司将为备忘录、邮件、Pages文稿等应用添加总结、改写和校对功能。这个集成的写作工具还将针对短信和电子邮件提出回复建议和不同语气的回复。虽然大部分工作都是通过苹果公司自己的AI完成的,但更有创意的写作(比如写一首关于iPhone的诗)将交给ChatGPT来完成。同样的,这个写作工具会先征求你的同意,然后才会去咨询ChatGPT。

ChatGPT对苹果设备用户免费,如果你有一个ChatGPT帐户,你可以连接到它并访问付费的额外功能。

图片来源:APPLE

我的AI分析:这是苹果公司下的赌注。谷歌、三星(Samsung)和微软在过去的一年里已经在它们的操作系统和设备中整合了这些工具,而摘要功能也许是迄今为止对生成式AI的风险最低、回报最高的应用。不过,这是一个非常受欢迎的功能更新。

语音转录

没有什么比简便的语音转录方法更能让记者兴奋的了。在Notes记事本应用中,你可以录制一段对话,然后获得转录文本以及针对转录文本的AI摘要。

更棒的是,电话应用现在也能记录通话内容,并进行同样的操作。是的,苹果公司表示,对方会收到通话正在录音的通知。

我的AI分析:三星和谷歌都提供设备上的AI转录功能。苹果公司此举只是在跟上竞争对手而已。

图像生成

我们曾被许诺会有飞行汽车,我们得到的是......可以制作飞行汽车表情符号的AI。是的,是Genmoji。你可以通过添加描述来生成这些新的表情符号。你可以将它们用作贴纸、内嵌表情符号,甚至是信息中的tapback功能反应。

苹果公司新推出的Genmoji功能可让你制作自定义表情符号,例如眼睛上有黄瓜的笑脸、熏鲑鱼面包圈或松鼠DJ。

图片来源:APPLE

苹果的Image Playground应用对标OpenAI的Dall-E和其他图像生成应用。该功能也内置在Messages和Pages等应用中。但它不会生成逼真的图像,也不会生成接近深度伪造的图像。你只能选择三种卡通风格:动画、素描和插图。

Apple Intelligence还能让你更轻松、更具体地搜索照片(“Fred站在红色汽车前的照片”)。此外,与谷歌的Magic Eraser一样,Clean Up工具也能帮助你移除照片背景中的物体或人物。

我的AI分析:Instagram和Facebook内置图像生成器已经有几个月了,但我使用的次数不超过一次。这里令人兴奋的是,AI将与我们已经拍摄的照片相融合。但正如我之前所说,如果你能对自己拍摄的照片进行如此大的改动,那现实又是什么?

通知及其他

AI将帮你对通知进行分类、汇总,并将最重要的通知放在推送的最上面。

图片来源:APPLE

苹果将效仿谷歌和三星的做法,使用AI来排列通知的优先级。最重要的通知会出现在最上面。如果你收到大量的群组信息,iPhone会为你总结这些聊天内容。再也不用翻阅52条信息来查看周四的酒局是否还在。

我的AI分析:哇!这种分析真是太棒了。

坏消息

Apple Intelligence最早将在iOS 18、iPadOS 18和MacOS Sequoia中出现。首先是今年夏天的测试版,之后在今年秋季更广泛地推广使用。而且一开始只有英文版。

这就是非常令人遗憾的地方:正如我所说,并非所有功能都能立即使用。例如,苹果公司不会明确说明ChatGPT整合功能的推出时间,只表示会在年底前推出。有些AI功能可能需要更长的时间。

而这一切都需要全新的硬件,至少是最近的硬件,而不是低端硬件。你需要iPhone 15 Pro或Pro Max,或者配备M芯片的iPad或Mac。这将苹果目前销售的几款iPhone和iPad排除在外。

AI可能会改变我们与设备互动的方式。但它也会迫使我们购买新设备。

“嘿Siri,你知道我在哪里能搞到1,200美元买新手机吗?”