← 返回信息流
AI 资讯TechCrunch AI·1 小时前

苹果为Safari等应用新增AI功能,支持智能补全与自动化

原标题:Apple just taught your iPhone to finish your sentences, your photos, and your workflows

速览

苹果公司正在为其Safari浏览器、快捷指令(Shortcuts)以及密码应用添加新的AI驱动功能。这些新功能旨在提升用户体验,能够智能补全用户输入的句子、处理照片以及自动化执行复杂的工作流任务。此举标志着苹果在整合生成式AI能力方面迈出了重要一步,进一步增强了其生态系统的智能化水平。

AI 深度解读

Apple 全面升级 Apple Intelligence:从“辅助工具”到“操作系统级”智能中枢

背景

在今日举行的开发者大会及相关技术发布中,Apple 正式宣布了一系列针对 Apple Intelligence 的重大更新。此次更新并非单一功能的迭代,而是覆盖了 Safari、Messages、Phone、Shortcuts、Image Playground 以及 Photos 等核心应用的全方位智能化升级。

随着 AI 助手战争(AI assistant wars)逐渐从单纯的应用层竞争转向操作系统层面的深度整合,Apple 此次更新的核心逻辑在于利用设备端的大模型能力,打通应用间的数据孤岛,并通过自然语言交互降低用户的使用门槛。这不仅是对标 Google 近期推出的类似功能(如 "Magic Cue"),更是 Apple 试图确立其“个人数据隐私与智能体验”差异化优势的关键一步。

核心内容

本次更新涵盖了浏览器管理、密码安全、跨应用上下文感知、自动化工作流生成以及影像处理等多个维度,具体功能如下:

1. Safari:智能标签页管理与页面监控

Safari 浏览器引入了基于 AI 的标签页管理功能。系统能够自动根据主题对标签页进行分组,并建议将相关标签页合并到现有组中。此外,Safari 新增了一个“页面监控器”(Page Monitor),当检测到网页内容发生特定变化时(如价格变动、新闻更新或任何时间敏感信息),会向用户发送通知。

更具突破性的是,Safari 现在允许用户通过文本提示词(text prompts)创建自定义扩展程序来修改网页内容。这一功能此前通常需要开发者介入,现在普通用户即可通过自然语言指令实现网页定制。

2. 密码安全:一键更新 compromised 密码

针对账户安全风险,Apple 引入了基于 AI 和 Safari 的一键式密码更新机制。当检测到账户凭证泄露或需要更新时,Apple Intelligence 将在后台自动处理登录和更新流程,用户无需手动输入旧密码或进行繁琐的重新登录操作,极大提升了安全性与便捷性。

3. Messages 与 Calendar:自然语言交互深化

  • Messages:除了现有的 AI 回复建议外,新增了基于文本描述查找照片的功能。用户无需在相册中手动滚动,只需输入描述,系统即可精准定位相关图片。
  • Calendar:用户现在可以通过自然语言创建日程事件。只需提及相关人员和时间,Apple Intelligence 即可自动解析并生成完整的日历条目。

4. Phone:跨应用上下文感知(关键更新)

这是针对重度用户最具影响力的更新之一。Phone 应用现在可以在通话过程中,从 Mail 和 Messages 等其他应用中提取上下文信息。例如,当用户正在与航空公司客服通话时,Phone 会自动从电子邮件中提取航班详情并在屏幕上实时显示。

这一功能被视为 Apple 对 Google "Magic Cue" 功能的直接回应。它标志着 AI 助手的竞争焦点已上升至操作系统层面,而“个人数据”将成为区分不同 AI 体验的核心差异化因素。

5. Shortcuts:AI 驱动的工作流创建

Shortcuts(快捷指令)应用进行了彻底的重构。用户不再需要手动一步步拼接工作流步骤,而是可以直接用自然语言描述想要实现的功能,Apple Intelligence 将自动构建相应的快捷指令。这一变化实质上是将“氛围编程”(vibe-coding,指通过自然语言描述意图而非编写代码来生成应用或功能)带入了主流 iPhone 用户群体。

6. Image Playground:更逼真的图像生成与编辑

Image Playground 获得了显著升级:

  • 模型升级:引入了新模型,能够生成更具照片真实感的图像。
  • 精细编辑:用户可通过点击、圈选或画笔涂抹来单独选择和编辑图像中的特定对象。
  • 格式适配:支持调整生成图像的宽高比以适应不同格式。
  • 新功能:支持生成壁纸和联系人海报。
  • API 开放:随着 Apple 通过新 API 向第三方开放图像生成能力,开发者有望立即利用这些新功能。

7. Photos:智能清理与空间重构

  • 清理工具:改进了图像修复(infill)算法和对象移除质量,使删除多余物体后的画面更加自然。
  • AI 扩展工具:可以扩展照片的边缘,增加画面内容。
  • Spatial Reframing(空间重构):这是一个利用设备端空间模型结合图像生成模型的新功能。它允许用户重新定位画面中的主体或物体,并利用 AI 填补新视角下的空白区域,使其看起来逼真可信。
  • 回溯编辑:Apple 确认该功能同样适用于旧照片,这意味着用户现有的整个照片库现在都成为了潜在的回溯性编辑目标。

关键要点

  • 跨应用数据打通:Phone 应用能读取 Mail 和 Messages 的上下文,标志着 Apple Intelligence 从“单应用智能”向“系统级智能”的转变。
  • 自然语言即编程:Shortcuts 和 Safari 扩展功能的更新,表明 Apple 正在降低技术门槛,让普通用户通过自然语言即可创建复杂的自动化工作流和网页定制。
  • 隐私作为差异化优势:通过强调“设备端模型”(on-device models)和“个人数据”的本地化处理,Apple 试图在 AI 助手竞争中建立以隐私安全为核心的护城河。
  • 影像生成的民主化:Image Playground 和 Photos 的新功能使得复杂的图像编辑(如对象移除、背景扩展、视角重构)变得像拍照一样简单,且支持对历史照片进行“事后”处理。
  • 对标 Google:Phone 的上下文感知功能直接对标 Google 的 Magic Cue,显示科技巨头在操作系统层级的 AI 整合已进入白热化阶段。

意义与影响

此次更新揭示了 Apple 在 AI 战略上的三个重要趋势:

  1. 从“功能叠加”到“体验重构”:Apple 不再仅仅是在现有应用中添加 AI 按钮,而是重新设计了用户与设备交互的方式。例如,通过自然语言创建快捷指令和 Safari 扩展,改变了用户获取信息和执行任务的路径。
  2. 操作系统成为 AI 的主战场:Apple 明确指出,AI 助手的竞争将在操作系统层面展开。谁能更好地整合用户数据(在隐私保护的前提下),谁就能提供更精准、更个性化的服务。Phone 应用读取邮件上下文的能力,正是这种“系统级智能”的典型体现。
  3. 降低技术门槛,扩大 AI 用户群:通过“vibe-coding”式的自然语言工作流创建和直观的图像编辑工具,Apple 正在将原本属于开发者或专业摄影师的能力下放给大众用户。这不仅提升了用户体验,也扩大了 Apple Intelligence 的潜在用户基数。

总体而言,Apple 通过此次更新,展示了其将 AI 深度融入 iOS 生态的决心。虽然部分功能(如跨应用上下文)仍面临隐私合规和技术实现的挑战,但其方向明确指向了一个更智能、更无缝、且以用户数据为核心的个人计算未来。

查看原文 →techcrunch.com