Apple Intelligence iOS 18新Siri连动ChatGPT4|WWDC 2024懒人包

撰文: 林卓恒
出版:更新:

Apple Intelligence、iOS 18新Siri连动ChatGPT4、macOS Sequoia|WWDC 2024懒人包|2024 年度的 Apple 苹果开发者大会 WWDC 刚在香港时间 6 月 11 日凌晨正式开锣,发表了苹果产品 5 大 OS 的新版本 iOS 18、iPadOS 18、macOS 新增的各个功能,最重更重磅公开了苹果自家的生成式 AI 技术 Apple Intelligence。

无新 iPhone 但全线 OS 更新 Apple Intelligence 苹果AI重磅公开

今届 WWDC 发布会时长接近 2 小时,虽然并没有新的 iPhone 或其他硬件发布,但就有苹果全线产品的 OS 系统更新,亦展示了各种 OS 升级带来的新功能。压轴公布则是现时最火红火热的生成式 AI 技术和苹果产品深度融合的 Apple Intelligence;以下《香港01》科技玩物记者就为大家归纳出整个发布会的重点内容。

WWDC 2024懒人包

WWDC 2024 文字直播:

WWDC2024公开apple intelligence苹果智能iOS18新Siri结合GPT-4o

Apple Intelligence

Apple Intelligence 简单地说就是苹果自家的生成式 AI,类似 ChatGPT。但 Apple Intelligence 厉害在于它和 iOS 18、iPadOS 18 和 macOS Sequoia 深度整合,iPhone、iPad 及 Mac 用家很简单就能运用到 Apple Intelligence 的各种功能。

WWDC 2024懒人包

此外 Apple Intelligence 另一大特色就是“个人化”,它能够分析用户的个人背景、生活习惯和日程,并以之产出贴合用户所需的内容。发布会中举了一个例子是会议突然改期,令我不知能否赶上女儿演出的音乐剧;这时 Apple Intelligence 能够办认我的女儿是谁、女儿出演的剧目、新的会议日程和音乐剧举办时间是否冲突、以及由我办公室去到音乐剧会场的交通状况及所需时间等。

WWDC 2024懒人包

Apple Intelligence 重点功能:

- 智慧写作工具:能够即时生成文字(如回复电邮等),亦可校阅或按特定语气重写用户自己的文字。

- 优先通知:分析用户个人背景及习惯,将重要的通知置顶显示;AI 亦会自动将通知内容总汇成重点显示。

- 优先邮件:自动将重要的邮件置顶显示,如今日出发的登机证等;亦增加智慧回复功能,Apple Intelligence 能识别电子邮件中提出的问题,并快速起草包含正确资讯的回复 。

- 减少打扰模式:分析通知内容后只显示用户可能需要立即关注的内容,并他则不作显示以减少用户打扰。

- 图像生成功能 Image Playground:只需输入几个单字即可生成图片,有 animation、 illustration 和 sketch 3 种风格可以选择。最方便是它将整合到 Message、Freeform 和 Keynote 等 app 内,例如用户可以在 Message 中直接生成图片来回复讯息。

WWDC 2024懒人包

- emoji 生成功能 Genmoji:输入文字以生成独一无二的 emoji,甚至能够以用户相片库中的人物相片作原型生成 emoji ;亦能以生成出来的 emoji 作 Tapback。

WWDC 2024懒人包

- Image Wand 图像棒:能将用户所画的图像转换为相关图像;照片中也新增清理工具,能快速移除背景中的路人等。

- 以文字搜寻相片及影片:Apple Intelligence 会分析用户的照片及影片,只要输入文字描述就能搜寻到照片及影片,甚至是影片中的特定段落。

新 Siri 大量新功能

受惠于 Apple Intelligence,Siri 也获得多个全新功能:

- 对应文字输入:双击 iPhone 或 iPad 萤幕底部即可从任何位置向 Siri 输入文字内容。

- 可向 Siri 询问一切关于 iPhone、iPad 和 Mac 的操作,获得逐步指导。

- 更强的语言理解能力,能像和人对话一样理解没有明言的主体。

- 画面感知能力:Siri 现在可以理解萤幕上的内容并采取相应动作,例如朋友对你发送新地址的短信,用户可对 Siri 下令“将此地址添加到联络人名片中”,Siri 会懂得处理。

- 使用 Siri 进行应用操作及跨应用操作:可直接向 Siri 下指令以完成各种应用程式中的操作,例如“将我正在起草的电邮发送给 Lilly”、“将这张照片放入备忘录内”等等。

私隐问题

Apple Intelligence 如此个人化,大家可能已开始担心私隐问题,这方面 WWDC 中就大派定心丸,首先 Apple Intelligence 绝大部份的运算都是 iPhone / iPad / Mac 本地完成,不会向外传送资料。亦因为 Apple Intelligence 主要使用本地运算的关系,只有使用 A17 Pro 及 M 系列芯片才能使用 Apple Intelligence。

而当有本地运算难以完成的问题时,则会通过 Apple 自家的专用伺服器“私有云运算”Private Cloud Compute 来完成。苹果表示 Private Cloud Compute 不会记录任何用户资料,所有通讯亦只为完成用户问题服务、苹果无法存取其内容。同时苹果也会让独立专家来检查在私有云上所运用的代码,以保障用户私隐安全。

Chat-GPT 4 整合

OpenAI 的 ChatGPT 也将整合到 Siri 和写作工具中,在向 Siri 提问时,也可选择利用 ChatGPT 来满足某些要求;用户可选择是否、何时使用 ChatGPT,并且在向 ChatGPT 传送任何资讯之前都将询问用户确定。苹果用家可免费存取 ChatGPT、无需建立帐户;而 ChatGPT 的付费用户可以连结帐号,以在 Siri 中存取 ChatGPT 中的付费功能。

五大 OS 更新内容懒人包

各 OS 的更新将在 7 月展开 Beta 测试,年底正式推出。

Vision OS 2 & Apple Vision Pro

Apple Vision Pro 将会开放在更多国家地区发售,包括中国、香港及日本等。香港地区 Vision Pro 售价由 27,999 港币起;将于 6 月 14 日起接受预订,6 月 28 日起发售。如果你在想现在日圆低、买日水会否便宜;苹果已公布 Apple Vision Pro 在日本的售价为 599,800 日圆,折合约港币 29,800日圆,比港版还贵。

发布会也介绍了 Vision OS 2 的多种新功能;提到将有大量 app 加入,如 Marvel What If 的互动游戏、跟朋友捉象棋等。

Vision OS 2 增加了手势操控,只要掌心向上再 Tap 一下即可打开主页面,再反转手掌 Tap 一下就能显示时间及电量。相片 App 迎来多个强化,能直接原本 2D 的相片转为 Spatial photo 3D 图片;分享 spatial video 空间影片亦更为方便。另外 Mac 画面连结显示加强至可用 2 个 4K 形成超阔画面。

关于 Vision OS 2 的新功能详情可参看另文:

Vision Pro 6月28日香港及中国推出!同步推更强vision OS2|WWDC

iOS 18

添加了多项新功能及提升便利性及使用体验的改动:

- App icon 新增了 dark mode,另外用家可以自定义 icon 的色调。

- 控制中心重新设计,用户能自订控制中心显示的项目、将控制功能画分到不同组别等;亦可将支援的第三方 app 新增至控制中心内。用户亦可切换“锁定画面”底部的控制项目。

- 可以将个别 app 上锁或隐藏;上锁的 app 必须要用户再登入(以 FaceID 等)才会显示内容;隐藏的 app 则会放到一个隐藏的资料夹内。

- Message 更新,可以任何 emoji 进行 Tapback,并添加了粗体、底线等文字效果以及爆炸、跳动等多款文字特效。另外也增加了预约发送功能,可指定讯息在特定时间发送。

- Mail 电邮 app 更新,可将电邮分组显示,用户亦可自定义新的电邮分组。

- Photo 相片库 app 更新,能够分析相片内容,再按照拍摄日期、地点、相中人物等分类显示。

- Wallet 新增 tap to cash 功能,只要两部 iPhone 对头靠近即可转帐,毋须双方添加联络方式。

- 增加 Game mode 游戏模式,开启游戏模式时其他背景运算将会减至最低,以最大提升游戏效能、画质及影格速率表现。

克洛琳德圣遗物武器组队推荐|原神4.7版新角色攻略 强不强抽不抽

- Apple Maps 更新,添加了大量美国国家公园的行山路径资料、连海拔高度改变等都标齐,但没提及美国以外的行山资料是否都有添加。

- Air Pod Pro 增加 Voice Isolation 功能,可在通话时隔除背景杂音;也增加 Personalized Spatial Audio API,让更多第三方开发者可为游戏制作 Spatial Audio 全景声音效。

iPadOS 18

大部份 iOS 18 的新功能在 iPadOS 18 都同样会实装,包括可以自定 icon 颜色、控制中心,以及相片库 app 的更新。最爆的一点是这么多年后 iPad 终于可使用官方计数机 App ,更连同功能强大的 Math Notes 推出。

- 增加计数机和 Math Notes app,后者可理解为懂得自动计数的 Notes,用户可以自由书写数字和算式,系统会自动分析内容,然后当用户写下等号时就显示计算结果。如果算式或数字有所改动,计算结果也会相应即时更新。Math Notes 更对应代数、变数及涵数,更能因应用户输入的算式来制作图表;也懂得辨认出每个参数让用户直接调整,调整参数后图表亦会相应自动更新结果。原有的 Notes app 也会对应这些计算功能。

+2

- 增加 floating tab bar,可快速浏览 app 内的不同页面或项目,也可自定义 tab bar 的项目。

- Share play 更新,能够直接在 Share play 期间在画面上绘画,亦可要求对方让你直接操作对方的 iPad 或 iPhone。

- Freeform 更新,增加了场景功能以快速前往特定部份

- 新增 Smart Script 功能,可自动改善用户的(在 iPad 上以 Apple Pencil书写的)手写笔迹。用户也可将电脑文字模仿用户的字迹贴上,也可直接对手写文字进行拼字检查。

macOS Sequoia

新 MacOS 定名为 Sequoia,名字来自美国红杉国家公园 Sequoia National Park,位于美国西部加利福尼亚州内华达山脉。

大部份 iOS 18 及 iPad OS 18 的新功能都可在 macOS Sequoia 使用,例如 Message 的更新、Math Notes 等。

- 新增 iPhone Mirroring 功能,可在 Mac 机上直接显示 iPhone 的画面,然后可以直接在 Mac 机上对 iPhone 进行开 app 等所有操作。iPhone Mirroring 能对应 Mac 的 Touchpad 及键盘直接对 iPhone 进行滑动、打字等操作,更可以在 Mac 机上显示 iPhone 的通知,甚至可以直接在 Mac 机拖放档案到 iPhone 上。

- 分割画面功能提升

- 视像通话 FaceTime Video 更新可一键替换背景

- 新增 Passwords app,可一 app 保管所有平台、服务的帐号密码,亦对应自动填入;此 app 亦会在 iPhone、iPad、Vision Pro 及 iCloud for PC 提供。

iOS 18新加内置“密码管理”App|自动填帐密﹑同步所有Apple装置

- Safari 增加 Highlights 功能,能以机械学习自动分析用户所浏览的页面,并给出相应的总结,例如浏览酒店时会总结酒店地图、交通及联络,浏览资料性文章时则会总结文章内容等。

- 接下来将有多款新游戏推出 Mac 版,包括《柏德之门3》、《幻兽帕鲁》、《鸣潮》、《Frostpunk 2》、《Control》、《波斯王子: 失落王冠》等。《Assassin's Creed Shadows》刺客教条暗影者亦将在 11 月 15 日推出 Mac 版,游戏亦将推出 iPad 版但未确定是否和 Mac 版同日推出。

鸣潮击败原神 App Store 多个地区登课金榜首 网民:真原末鸣初了

- 推出 Game Porting Tool 2,让游戏开发者更容易将游戏移植至 Mac

WatchOS 11

- 追加 training load 功能,让用户自定每日训练的强度,并会在强度和平常偏差太多时作出提示

- 新推出 Vitals app,将会统计用户的心跳、血液含氧量等维生数据供用户查看;若发现用户的生理状况和平常有太大出入时亦会作出提示。

- Smart Stack 增加翻译、天气预告、check-in 报平安等更多小工具;而翻译更可以办识发言者的语言自动选择,亦能即时播放原文及译文。

- 表面图片设定新玩法,人工智能会在相片库中自动选择最适合做表面的相片,并自行适配相片特效及时间显示的位置等。

Apple TV+

- 将推多部原创新作或系列新季度,多位影坛巨星如麦迪文、佐治古尼、毕比特、妮坦妮宝文等都将参演。

- Apple TV+ 亦将增加一个“InSight”功能,可以即时查询节目画面中的角色名字、演员名字及所用音乐的详细,亦可以即时将该音乐加到 Apple Music 播放清单中。