免费获取chatGPT 3.5 账户,或购买GPT 4.0plus 会员账户,扫描文章内微信公众号二维码,或加微信:yuke36
机器之心报导
机器之心编辑部
还有史诗级更新:加通话录音,iPad加估算器。
不止Siri或,整个苹果,往前迈入了一大步。
上海时间6月11日下午,苹果全球开发者会议WWDC在库比蒂诺的ApplePark即将举行。这场会议,苹果如我们所愿总算带来了覆盖全线产品的生成式AI技术,与此同时还有些意料之外的消息。
「苹果的目标仍然是建立以人为本,最为易用便捷的个人设备,提高人们的生活效率。多年来我们仍然在应用人工智能、机器学习技术来实现目标,」苹果CEO蒂姆・库克说道。「最近大语言模型等AI突破,让我们有机会把体验推向新的高度。」
如今总算能晓得苹果是怎么看待生成式AI的了。首先是理念:必需要强悍、直观、完全整合、个性化且保护隐私。
之后是形式:基于苹果设备强悍的M系列芯片,走自研本地大模型加云端的策略,本地的模型不走寻常路,超出本地处理能力的问题可以利用云端大模型解决(Cloud),也可以找的GPT-4o。
十五年前,苹果的语音助手Siri横空出世,为智能手机探求了下一次交互改革。在生成式AI时代,Siri总算有机会兑现先前人们寄寓的厚望,它显得愈发聪明,拥有丰富的知识,会像目前最先进的大模型工具一样一步步给你提示,帮你解决问题。
另外,如今和一样,你也可以向Siri打字交互了。
苹果表示,Siri的全新形态将会改变游戏规则。大量AI新能力会很快上线,另外屏幕读取、App内/App之间的操作等能力预计今年到位。
新Siri只是苹果AI能力的一小部份,去年WWDC历时一个半小时的上,苹果首次把AI能力单列举一个章节,专门介绍从图象到文本,覆盖手机、iPad和Mac的生成式AI。它们都基于Apple。
Apple:完整AI体系
Apple是苹果的全新个性化智能系统,全面接入了生成式AI的能力。
Apple结合生成式AI模型和使用者的个人资料,提供实用的智能服务。它覆盖、iPad和Mac,深度集成在iOS18、18和macOS中。它借助苹果芯片的能力来理解并创造语言和图象,可以跨应用地执行操作,并借助个人信息简化和加速日常任务。
这种应用可以在设备端运行,超出设备端能力的部份也可以在云上运行。通过Cloud,苹果在AI领域筹建了新的隐私标准,才能在设备端处理和基于服务器的小型模型之间灵活调整估算能力,这种服务器运行在专用的苹果芯片上。
库克表示,Apple是苹果创新的新篇章,将改变用户使用产品的形式。他指出,苹果奇特的方式结合了生成式人工智能和用户的个人信息,能提供真正有用的智能服务。据悉,Apple才能以完全私密和安全的方法访问信息,帮助用户完成对她们最重要的事情。这是苹果独有的AI体验。
脱胎换骨的Siri
Apple为Siri带来了更深层次的系统整合。Siri如今拥有更丰富的语言理解能力,显得愈发自然、更懂上下文、更个性化,还能简化和加速日常任务。Siri才能理解用户在说话时的迟疑,并在不同恳求之间保持上下文连贯。用户还可以通过打字与Siri交流,并按照须要在文本和语音之间切换。据悉,Siri还拥有全新的设计,当Siri处于激活状态时,屏幕边沿会环绕着高贵的发光疗效。
如今,用户可以向Siri输入文字,也可以在文字和语音之间切换,以任何合适的方法与Siri交流。
Siri如今可以为用户提供全面的设备支持,无论她们身在何处,都能解答关于、iPad和Mac操作的数千个问题。例如,用户可以学习怎样在Mail中安排电邮、如何从黑色模式切换到红色模式等各类操作。
但是,有了屏幕感知功能,Siri可以让你轻松执行与屏幕上的信息相关的操作,比如将聊天信息中收到的地址添加到同学的通信录中。
利用Apple,Siri才能在苹果和第三方应用中执行数百种新操作。比如,用户可以说:「从我的阅读列表中找出那篇关于蝉的文章」,或则「把周日烤肉的相片发给Malia」,Siri将手动处理这种恳求。
Siri如今可以在应用程序中或跨应用程序执行数百项新操作,包括在「」和「Mail」中查找同事发送的书籍推荐。
Siri就能按照用户的设备信息提供个性化的智能服务。比如,用户可以说:「播放Jamie推荐的那种播客」,Siri将定位并播放该播客,用户无需记住它是在邮件还是电邮中被提到的。用户也可以问:「妈妈的班机哪些时侯抵达?」Siri将找到班机详情,并与实时班机追踪数据交叉引用,以提供抵达时间。
Siri才能依据用户及其设备上的信息提供量身定做的智能服务,比如查找正式起飞班机的详尽信息或跟踪早餐预订情况。
虽然,关于Siri的此次更新,苹果在五月份的一篇论文中早有剧透,只不过当时没有造成足够的注意。具体细节可以参见机器之心报导《》。
据悉,苹果还开源了一些相关研究,参见:
跨苹果平台集成
不出所料,明天苹果发布会的一大亮点在于与的合作。
苹果宣布,Apple正在将集成到iOS18、18和macOS内的体验中,使用户无需在工具之间跳转即可访问,包括图象和文档理解功能。
据悉,Siri也可以随时借助的专业回答。但Siri在将任何问题、任何文档或合照发送到之前,就会先寻问用户,之后Siri直接给出答案。
当用户授予权限时,Siri可以借助的回答。
据悉,Apple系统范围内的写作工具也可以用到,进而帮助用户生成内容。通过,用户也可以访问图象工具来世成各类风格的图象。
写作工具访问协助写作
至于上线时间,苹果表示将于明年晚些时侯登录iOS18、18和macOS,由GPT-4o提供支持。用户无需创建账户即可免费访问它,订阅者可以联接她们的账户并直接从这种体验中访问付费功能。
最后,Apple对用户完全免费,并将于明年春季作为iOS18、18和macOS的一部份提供英文测试版。更广泛地功能、软件平台和其他语言将在今年推出。Apple将在15Pro、15ProMax以及搭载M1及更高版本的iPad和Mac上提供。
也就是说想要用到这种大模型能力,你就要花钱买最新的苹果设备了。
新的语言理解和创造能力
Apple为用户解锁了提高写作能力和更有效沟通的新途径。
全新的系统级写作工具被外置于iOS18、18和macOS中,用户几乎可以在任何写作场合重画、校对和总结文本,包括短信、备忘录、页面以及第三方应用程序。
借助重画功能,用户可以从多个版本中选购,调整文风以适应不同的读者和场合。无论是为求职信降低劝说力,还是为聚会约请函注入诙谐与创意,重画功能都能帮助用户找到恰如其分的抒发。
校对功能则深入检测句型、词汇和句式结构,并提供建议性的编辑意见及其解释,让用户轻松审查或快速采纳。比如,当用户在撰写电邮时,写作工具菜单会弹出,提供校对和重画的选项,用户可以按照自己的须要选择相应的功能。
而总结功能则容许用户选定文本,一键生成简约明了的段落、要点列表、表格或清单,使信息一目了然。诸如,当用户启动备忘录应用,在记录有关全面健康的内容时,就可以使用「总结」功能来提炼要点。
管理电邮是一件让人头痛的事情,而新增的「优先电邮」功能将最紧急的电邮——如当天的午餐约请或登机牌——置于收件箱底部,用户无需打开电邮,才能一目了然地看见每封电邮的摘要。
面对短篇的电邮线程,用户仅需轻触屏幕,即可获取关键信息。
智能回复功能更是提供了快速回复的选项,并能精准辨识电邮中的问题,确保每一项都得到妥善回应,让电邮管理愈加得心应手。
对语言的深刻理解同样扩充到了通知功能。最重要的通知会被提高至通知列表的底部,而摘要功能则帮助用户在屏保上快速浏览短篇或堆叠的通知,展示关键细节。
「减少打搅」功能是一个新推出的专注模式。当一个群聊非常活跃时,为了帮助用户更好地专注于当前任务,「减少打搅」功能仅展示这些可能须要立刻处理的通知,例如从日托中心提早接女儿的紧急邮件。
据悉,备忘录和电话应用也新增了一项功能,用户可以录制通话、实时转录对话内容,并手动生成摘要。
在通话过程中,假如用户选择录音,所有通话参与者就会收到提示。通话一结束,Apple都会立刻生成一份摘要,帮助用户快速回顾和掌握对话中的关键信息。
Image
Apple提供令人激动的图象生成功能,可以帮助用户以新的方法沟通和抒发自己,这主要彰显在新应用功能Image上。利用Image,用户可以在几秒钟内创建有趣的图象,能够选择三种风格:动漫、插图或绘画。
Image便于使用,而且直接外置于包括「」在内的应用程序中,也可以在专用应用程序中使用,特别适宜尝试不同的概念和风格。所有图象都在设备端创建,用户可以尝试任意数目的图象。
利用Image,用户可以:
利用「」中的「Image」功能,用户可以快速为同学创建有趣的图象,甚至可以看见与她们的对话相关的个性化建议。比如,当用户向群组发送有关登山旅行的消息时,她们会看见与同事、目的地和活动相关的建议概念,进而使图象创建更快、更相关。
在Notes中,用户可以通过Apple工具调板中的新ImageWand访问Image,使笔记更具视觉吸引力。简略的草图可以弄成令人愉悦的图象,用户甚至可以选择空白空间,借助周围区域的背景来创建图象。
据悉,Image还可以在、和Pages等应用程序以及采用新ImageAPI的第三方应用程序中使用。
:将表情符号提高到一个全新水平
用户可以创建原创的来抒发自己的看法,只需输入描述,符合要求的都会出现,并附送其他选项。
用户甚至可以按照相片为同事和家人创建。如同表情符号一样,可以内嵌添加到消息中,也可以作为贴纸进行分享。
用户只需输入描述,生成以及其他选项
如同表情符号一样,可以内嵌添加到消息中
相片中新增功能,为用户提供了更多控制
利用Apple,搜索相片和视频将显得愈发便捷。用户可以使用自然语言搜索特定相片,比如搜索「Maya穿着刺绣外套轮滑」或「Katie身上有贴纸」。
据悉,视频搜索也显得更加大大,用户还能在剪辑中找到特定时刻,并直接跳到相关片断。据悉,全新的「CleanUp」工具可以辨识并移除相片背景中的干扰物体,而不会改变主体。
通过「」功能,用户只需输入描述即可创建自己想要观看的故事。利用语言和图象理解,Apple会依照描述选购出最佳相片和视频,按照相片中辨识的主题制做故事情节,并将它们排列成具有奇特叙事弧线的连续剧。用户甚至会收到来自AppleMusic的歌曲推荐进行匹配。与所有Apple功能一样,用户的相片和视频会在设备上保持私密,不会与其他人共享。
AI隐私新标准
Apple要想真正为用户提供帮助,就必须了解深层次的个人上下文,同时保护用户隐私。Apple的基石是在设备上(on-)进行处理,许多模型完全在设备上运行。对于须要更多处理能力的更复杂恳求,Cloud将苹果设备的隐私和安全性扩充到云端,以解锁更多的智能功能。
通过Cloud,Apple就能灵活扩充其估算能力,并借助基于服务器的更大模型来处理更复杂的恳求。这种模型在由苹果芯片驱动的服务器上运行,为苹果提供了一个基础,确保数据永远不会被保留或曝露。
独立专家可以检测在苹果芯片服务器上运行的代码,以验证隐私保护举措。Cloud通过加密确保、iPad和Mac不会与服务器通讯,除非其软件已被公开记录以供检测。带有Cloud的Apple为AI领域的隐私保护筹建了新的标准,为用户提供了可信赖的智能服务。
:苹果智能十分兴奋人心
苹果的Apple吸引了全世界科技从业者的关注。创始成员发贴总结说,他特别喜欢苹果发布的「苹果智能」。他个人观察到了以下几个主题:
多模态输入/输出。苹果启用了文本/音频/图象/视频读写功能。可以说,那些都是原生的人类API。
。苹果容许操作系统和应用程序的所有部份通过「函数调用」进行互操作;内核进程LLM可按照用户查询安排和协调它们之间的工作。
无磨擦。苹果以一种高度流畅、快速、on和上下文的形式全面集成这种功能。无需到处复制粘贴信息、提示工程等。还对用户界面进行了相应调整。
主动性。苹果没有按照提示执行任务,而是预测提示、提出建议并主动执行任务。
分级授权。尽可能多地将智能联通到设备上(苹果芯片十分有帮助且适宜),但容许将工作可选地派发到云端。
模块化。容许操作系统访问并支持整个不断下降的LLM生态系统(比如公告)。
隐私。
表示,我们正在迅速步入这样一个世界:你可以打开手机,随意说些哪些,它会回应你,它了解你,但是它能够正常工作,这十分兴奋人心。
全新macOS系统让Mac、实现连续互通
这次,苹果macOS系统也迎来了重大的版本更新,包括系统名称、新增一系列功能等。
macOS15系统改名为了macOS,将于明年推出内测版,明年春季面向普通用户发布完整版。其中引入的最明显功能包括镜像()、通知()和升级。
我们重点来看新增的镜像功能,它容许用户直接在Mac上完全访问和使用。用户可以在Mac设备上启动和浏览任何她们想要执行操作的应用程序,并通过按键、触控板和键盘与手机无缝互动。
滑动屏幕。
打开应用程序。
利用Mac上的通知功能,用户可以在Mac上接收手机的通知,点击通知才能步入对应的应用程序。
当用户在Mac上工作时,屏幕将锁定待机模式,其他人难以访问或查看你正在做的事情。
在Mac上通过拖曳轻松实现Mac与之间文件传输。
尽管Mac上已能运行iOS应用,但直接操作手机界面似乎更直观。这方面Mac堪称是跟上了安卓、鸿蒙的脚步。
macOS还添加了一个类似于的新窗口排列工具,可以手动调整应用窗口大小以平铺并塞满屏幕。当用户将窗口拖到屏幕边沿时,系统会手动建议将其置于桌面的那个位置,因而让桌面井然有序。
用户可以选择将窗口并排平铺或则置于角落以查看更多应用程序,同时新的按键和菜单快捷键可以帮助更快地进行排列平铺。
据悉,Mac外置浏览器通过「突出显示」()功能让用户更轻松地发觉信息,例如路线、摘要或快速链接。这儿借助机器学习技术手动检查用户正在浏览的信息并突出显示。
规划路线时突出显示。
可以看见,全新macOS系统加持下的Mac体验愈发地轻松、便捷、高效。
违反族规,给iPad装估算器
对于iPad用户来说,最大的进步莫过分总算有原生的估算器应用了。乔布斯以前说过,把估算器装进iPad是「反直觉」的,所以十几年来这些全球最为流行的平板设备仍然没有估算器App。
如今生成式AI来了,苹果立刻「违背了家训」。
苹果推出了全新的物理笔记(MathNotes)估算器,使用户就能输入或手写物理表达式,并立刻看见以她们自己的笔迹解决的结果。在学习新概念、计算预算等时,用户还可以为变量分配值。新增的绘图功能容许用户写出或键入方程式,并只需轻触一下即可插入图表,甚至可以在同一个图表上添加多个方程式,以查看它们之间的关系。
估算器APP专为iPad的奇特功能而设计,提供了一种使用Apple解决表达式问题的全新形式。
其实,这一切的前提是,你得有个Apple。
iPad上的这个基本科学估算器让用户在完成之前能够轻松查看完整的表达式。历史记录功能帮助用户跟踪之前的估算结果,而单位转换功能让用户才能快速转换厚度、重量、货币等单位。
有了MathNotes,估算器容许用户键入或写出物理表达式,并立刻看见它们的解,能够为变量形参,便于在表达式中使用。
OneMoreThing
不仅大换代的macOS、系统,苹果在其他设备端的系统也都有相应的更新。其中混和现实头戴设备Pro有了全新的系统——2,新增了好多全新的功能,例如借助中级机器学习从2D图象中导入左右眼视图,并创建具有自然深度的空间合照。
6月28日,Pro将率先在中国、日本和美国开售。国行价钱方面,256GB版本29999起、512GB版本31499起、1TB版本价钱32999元。这样的价钱,你准备入手吗?
苹果的一系列发布,既跟上了节奏,也发挥出了苹果自身从硬件到软件一体化的优势。虽然在安卓阵营,短时间内还无法看到手机与服务器用同一芯片构架的情况。另一方面,与技术最先进的深度合作也被人们觉得是「放得开」。
这么苹果AI落地的前景算是一片大好?不一定,明天的股价还是上涨了。
WWDC的结束后,苹果估值再度被英伟达超过。
另外马斯克也说了,既然苹果是系统级整合,那就是难以接受的不安全,在我的公司里要禁用。
不论投资者还是友商,都有些疑虑。
「Apple」能不能让苹果在生成式AI的赛道上反超,其实还有待时间的检验。
参考链接:
为了挖掘和展示人工智能领域具有市场竞争力、技术实力的机构、产品、案例,产生“鸿雁”引领效应,机器之心发起2024“人工智能+”标杆示范征集活动。本次征集将设置《2024“人工智能+”产品典范》、《2024“人工智能+”创新案例典范》、《2024人工智能隐型亚军企业典范》三大维度,面向全球征集“人工智能+”标杆示范。本次征集结果将于7月在2024WAIC“人工智能+”论坛上公布并进行颁奖。本次征集截止2024年6月7日,最终结果将于7月在世界人工智能会议上公布并颁奖。
免费获取chatGPT 3.5 账户,或购买GPT 4.0plus 会员账户,扫描文章内微信公众号二维码,或加微信:yuke36
暂无评论内容