蘋果發表Apple Intelligence,未來將陸續導入其他大型模型
界面新聞 / 洪嘉鎂編譯
2024-06-11 12:00

在生成式AI的熱潮下,大概是近十年來最受矚目的一場蘋果全球開發者大會(WWDC)來了。

6月11日凌晨,WWDC2024在Apple Park開幕。蘋果照例更新了iOS、iPadOS、MacOS等操作系統,另外還首次更新了visionOS。同時蘋果宣佈Apple Vision Pro將於6月28日在中國、日本、新加坡正式發售。

除了例行的系統更新,昨晚發佈會的最重頭大戲就是AI了。 蘋果公司CEO提姆·庫克在一開場便表明,這次會有多項重大的「智慧功能」發佈——市場對此已經期待了近一年之久。

蘋果AI正式亮相

暫時跳過各種OS的新內容,直接看看蘋果準備的AI「大禮包」。

蘋果將自有的AI功能命名為Apple Intelligence,它能基於蘋果內建的大型語言模型,通過理解自然語言來執行使用者的語音或文字指令。

蘋果讓AI功能幾乎覆蓋了所有重要的原生App,包括相機、照片、備忘錄、語音備忘錄、提醒事項、郵件、Safari、Keynote等等。 除此以外,蘋果還推出了兩款全新App,分別是書寫工具Writing Tools和圖片工具Image Playground。

這些App的功能彼此關聯。 例如,Writing Tools可以幫助使用者重寫、校對和總結文件,在幾乎任何輸入位置都可用,包括郵件、備忘錄、Pages和第三方App;Image Playground可以選擇動畫、插圖、手繪三種風格和不同主題來創作影像,生成結果也可以在訊息、備忘錄等App中使用。

在照片App的「回憶」功能中,使用者輸入一段自然語言描述就可以完成一段影片創作。 同時,搜尋照片、修改照片,都變成了一項更智慧和精準的操作。

一系列全然不同的功能更新後,語音助手Siri也脫胎換骨了。使用者可以對Siri發出語音指令,驅動以上所有工具執行數百種操作。

你幾乎什麼事情都可以找Siri。 比如一張從訊息App得到的照片,可以讓它幫你添加到某位聯絡人的資料中;iPad、iPhone、Mac等任何產品有你不知道怎麼用的功能,即便你不知道功能的名稱,只要描述給Siri,它就會手把手教你使用步驟。

以前幾分鐘才能完成的手動操作,可以縮短到幾秒了。並且,這些指令可以是斷斷續續的,Siri會跟上你的思路。蘋果還指出,基於App定義的Siri快捷指令並不限於原生App,開發者可以通過App Intents的API將其功能接入第三方App。

不僅如此,你也可以直接打字給Siri了,解決了會議等不方便說話場景的問題。

蘋果尤其強調,Apple Intelligence是一套基於個人化的AI功能。

假如你有一場工作會議被臨時調整至傍晚,你甚至可以直接問Siri,是否趕得上在這之後女兒的演出。 這個看似「沒頭沒尾」的問題,會由Siri從你手機的所有內容中找到答案,例如從訊息App中搜索到相關度最高的演出時間和地點、地圖中公司的定位等,再根據這些資訊生成與問題對應的路線和預估時間。

除了讓使用者理解Apple Intelligence的強大之處,蘋果公司更希望使用者放心的是,這套AI功能真的很安全。

蘋果團隊花了很多精力來講述Apple Intelligence的隱私保護能力。 基於蘋果自研晶片的強大算力,它有足夠的能力在設備端就支撐大部分AI功能。 同時,蘋果的AI功能只識別數據而不收集數據。

而當設備模型能力不足以完成任務時,蘋果對於雲端模型的數據使用也有保護。 為了讓使用者相信自己的數據不會上傳雲端並被公司利用,蘋果特別打造了Private Cloud Compute,這是一套具備晶片級別隱私和安全保護的伺服器。

最後,蘋果正式宣佈了與OpenAI達成合作。

蘋果將接入GPT-4o支援下的ChatGPT,使用者無需登入帳戶即可免費使用。 具體使用情境為,當使用者的問題超越Siri的能力範圍,後者將跳出視窗請求並得到使用者許可之後,尋求ChatGPT更精緻完整的答案。

根據演示,兩個環節之間是無縫銜接的,蘋果表示這是為了省去使用者在不同大型模型之間切換的繁瑣操作。而已經有ChatGPT帳戶的使用者,也可以登入已有帳戶並使用付費功能。

ChatGPT將在晚點進入最新版本的iOS、iPadOS和MacOS。蘋果還透露,除了GPT-4o之外,此後還會陸續接入其他大型模型。

操作系統全面更新

目光回到各大平臺的更新,首次更新的visionOS 2無疑最受關注。

不過,visionOS 2的改進幅度不算明顯。 例如,使用者可以通過visionOS 2的機器學習技術,將2D照片直接轉化為3D的空間照片;進入主畫面的手眼交互姿勢得到了簡化的改善;導入Mac虛擬介面的功能將擴展至兩台4K顯示器並排等等。

庫克正式宣佈,Apple Vision Pro將於6月28日在中國、日本、新加坡正式發售,並於7月12日進入澳洲、加拿大、法國、德國和英國。

對於其他幾項軟體系統,Apple Intelligence其實已經是iOS 18、iPadOS 18和MacOS Sequoia最重要的更新之一。

圖片來源:蘋果

iOS 18的更新再次加強了桌面、小工具、App圖示的個人化設定;其控制中心從過去的單頁變成了更有擴展性的Controls Gallery,使用者可以放入更多第三方App並調整其佈局方式;iMessage加入了新的文字效果,例如可以針對文字劃線進行語氣強調等。

iOS 18一個有趣的更新是,蘋果為使用者提供了更強大的隱私保護功能。使用者可以對自己認為需要被保護的App「上鎖」,其他人點開時將需要額外的密碼、觸控ID、Face ID等。同時,使用者也可以將需要被保護的App放入一個隱藏的App中,使其不會在搜尋和主畫面上出現。

iPadOS最突出的一項更新是內建於計算機App的Math Notes(數學筆記)。使用者只需用Apple Pencil寫下運算式和等號,就能立即得到計算結果,並且只要改變左邊的表達式,右邊的答案都會自動更新。使用者也可以利用圖表、對變數賦值等,來理解變數之間的關係。

MacOS Sequoia此次的亮點在於加強了設備間的連續串聯功能。利用iPhone Mirroring,使用者可以在Mac無縫連接iPhone,並經由觸控板完成相對流暢的跨設備操作,無論是使用iPhone上的App(例如點外送),還是將Mac上的檔案拖入iPhone,過程都更加簡單有效率。

除此以外,watchOS 11、Safari、地圖、郵件等均有更新。

作為蘋果每年最為重要的開發者大會,WWDC所呈現的軟體更新幾乎為接下來一年的使用者體驗定調。它既為開發者群體最佳化應用指明方向,同時也一定程度上扮演秋季新品發佈前的行銷鋪墊角色。

在汽車專案擱淺之後,Gen AI(生成式AI)是蘋果必打的一仗。目前蘋果釋放出來的招數的確讓人感到炫目,它也直接投射了蘋果在AI上的押注和焦慮。不過,這些AI功能中的大多數上線時間還未知,具體體驗如何還需要等待進一步使用回饋。

如果體驗結果是令人滿意的,它無疑將是AI時代軟體與硬體產品結合的最新標竿。

本文為界面新聞授權刊登,原文標題為「一文看完WWDC2024,蘋果定義的AI時代要來了