全系標配滿級防水,OPPO A5 系列新品正式發布

蘋果 AI 重磅登場:Siri 全面進化,自有模型,內掛 GPT-4o,私密云計算定義 AI 隱私標準
國行 iPhone 16 Pro / Pro Max 值得期待嗎?
WWDC 24 上,蘋果終于發布了自己的 AI。
秉承了一貫「不蹭熱詞」風格,又有些討巧的,蘋果為自家 AI 起了個響亮的名字——Apple Intelligence,所以簡寫還是 AI。

庫克簡短導入,闡述了蘋果在各個終端產品中引入人工智能和機器學習的幾個核心原則:
必須足夠強大;
必須直觀易用;
必須深度整合到產品的使用體驗中;
必須能懂你,并以你的個人情境為基礎,比如日常安排、人際關系、溝通交流等;
必須從設計之初就注重隱私保護。

蘋果公司軟件工程高級副總裁 Craig Federighi 做主要發言。
他為 Apple Intelligence 做了定義:它是個人化的智能系統,將讓你手中的個人化產品更實用、更稱心。
接下來他和他的團隊從能力、架構、體驗三個方面,詳細介紹了 Apple Intelligence。我們也將在正文中逐項為你展開。
幾點說明:
差異性:目前市面上不乏一些讓人眼前一亮的聊天工具,它們能利用全世界的知識來執行大量的任務,但很少能充分了解你或你的需求。而 Apple Intelligence 更強調個人化、對于個性需求的理解。
深度集成:Apple Intelligence 集成了蘋果大型語言和擴散模型,可以嵌入至新系統 iOS 18、iPadOS 18、macOS Sequoia 之中,并能夠根據你的個人情境來提供智能協助,而且實用性、相關性都很高。
隱私保護:它在每個環節都注重隱私保護,并深度整合到蘋果的各個平臺、以及 app 中。對于日常任務,Apple Intelligence 可以本地設備端運行處理。對于復雜任務,蘋果則構建了基于芯片層的私有云,在大算力支持的情景下,來保證數據隱私。
設備要求:雖然 Apple Intelligence 免費,但對硬件設備要求很高,僅適用于 A17 Pro 芯片的 iPhone 15 Pro / Pro Max 以及配備 M1 芯片或更高版本的 iPad 和 Mac。。
上線時間:受限于語言、地域、政策等因素,Apple Intelligence 先期僅在美國市場開啟試用,秋季為用戶提供測試版。
國行版是否值得期待:至于其它地區,蘋果僅給了這樣的參考信息:另外一些功能以及其他語言和平臺的支持將在明年陸續推出。
開發者利好:最后還不忘向開發者高呼,蘋果更新了 SDK、開放了 API,大家趕緊擁抱 Apple Intelligence 吧!
01?能力
Apple Intelligence 的功能強大,可以讓 iPhone、iPad 和 Mac 理解并生成語言和圖像,還能代你執行操作,簡化跨多個 app 進行交互的過程。
它的真正獨特之處是能理解你的個人情境。Apple Intelligence 內置的大語言模型能深刻理解自然語言,讓日常生活中的各種大事小事都做得更快、更輕松。
比如,iPhone 可以根據你的個人情景,為通知設定優先次序,減少不必要的干擾的同時,又不會錯過重要消息。

碼字時,Apple Intelligence 能夠幫你重寫、校對、提取文字摘要、提煉想法、檢查段落。

這些新功能將自動支持郵件、備忘錄、Safari 瀏覽器、Pages 文稿、Keynote 講演、以及第三方 app。

除了語言 AI 之外,Apple Intelligence 還具備圖像 AI 功能,讓照片、表情符號和動圖有了新的視覺表達方式,并且支持圖像生成功能。
它能識別照片圖庫中的人物,比如,當你向朋友發送生日祝福時,AI 可以生成一張朋友的圖像,再用蛋糕、氣球和花朵來點綴。

再比如,你想告訴媽媽她是你心中的超人,就可以發送一張她身穿披風的照片。

生成的圖像有三種獨特的風格可選:素描、插圖和動畫風格。

這種體驗對于系統中的所有 app 都適用,比如備忘錄、無邊記、Keynote 講演、Pages 文稿。

接下來介紹的是跨多個 app 執行操作的能力。
類似調出某個時間段的文件、查看某些人的照片、播放某一天接收到的播客,等等。Apple Intelligence 能實現數百種此類操作。
要做到個人化智能就要深刻理解個人情境。能夠理解個人情境,才能提供真正實用的智能技術。
Apple Intelligence 的運作基于個人信息和情境,不僅能從你的各種 app 中檢索和分析相關程度最高的數據,還會參考你屏幕上的內容(比如你正在查看的郵件或日歷日程)。

比如我有一場會議改到了傍晚,而我想知道開完這場會之后,我還能不能趕上女兒的演出,Apple Intelligence 就會處理相關的個人數據,來為我提供協助它知道我的女兒是誰,以及她幾天前發來的演出詳情,也知道我這場會議的時間和地點,并能預估我從公司到劇院的交通狀況。

02?架構
所以,問題來了,隱私和安全。人們不應需要交出所有生活細節,并儲存到他人的 AI 云端加以分析。
在介紹 Apple Intelligence 的隱私保護之前,我們先了解一下它的架構。
蘋果的個人化智能系統基于設備端處理,Apple Intelligence 必須深度整合到 iPhone、iPad 和 Mac 以及各款 app 中,讓它能夠識別你的個人數據,而無需收集這些數據。

要實現這項功能,首先離不開蘋果獨特的軟硬件整合、以及多年對芯片的投入。包括 A17 Pro 以及 M 系列芯片,為驅動 Apple Intelligence 提供了堅實的算力基礎。

其次,超強的大語言模型和圖像生成擴散模型能飛快根據你當前的活動進行調整。
它還內置設備端語義索引,可以整理和提煉你各種 app 中的信息。當你提出請求,它會通過語義索引來識別相關的個人數據,并傳輸給生成式模型。

盡管大多數模型都能完全在設備端運行,但 Apple Intelligence 不僅發生在設備端,但做法則與普通 AI 不同。
當你用到的模型大到無法放進隨身攜帶的設備時,就需要服務器端的處理能力了。通常情況下,服務器還會儲存你的數據,并且未經你同意就使用這些數據,因為服務器軟件只有其所有者才能訪問,即使某家公司否認濫用你的數據,你也無法驗證情況是否屬實。
蘋果卻能做到讓你全權掌控自己的數據,包括在哪里儲存、誰能訪問。
iPhone 上的軟件映像能夠持續驗證它的隱私性,將 iPhone 上的隱私與安全保護功能擴展到云端,從而解鎖更多智能功能。

蘋果重磅發布了 Private Cloud Compute 這一私密云計算技術,賦予了 Apple Intelligence 更多靈活性,讓它能擴展自身的計算能力,并引入更大的基于服務器的模型來處理更復雜的請求,同時妥善保護你的隱私安全。
此類模型將在為蘋果芯片特別打造的服務器上運行,它能夠提供與 iPhone 相同的芯片級別的隱私和安全保護。
蘋果還借鑒 Swift 編程語言的安全特性,并明示軟件的透明度。Apple Intelligence 會分析你發出的請求能否在設備端運行,如需更強的計算能力,便可借助 Private Cloud Compute 將僅與任務相關的數據發送給蘋果芯片服務器處理。

蘋果承諾,你的數據絕不會被儲存,連蘋果也無法訪問,它只會被用來執行你的請求。獨立專家可以檢查這些服務器運行的代碼,以驗證隱私安全是否得到保障。

此外,Private Cloud Compute 通過加密形式,讓 iPhone、iPad 和 Mac 還具備拒絕與服務器對話的功能,除非這個服務器的軟件具有已接受檢查的公開記錄。
蘋果此舉為 AI 隱私設立了全新標準,帶來了讓人放心的智能技術。
03?新體驗
接下來將介紹在 Apple Intelligence 的賦能下,各種 app 及其使用體驗的變化。
其中問世 13 年 Siri 實現了最大的能力飛躍,還有各種強大的寫作和溝通工具,以及一些趣味視覺表達方式,這些體驗將貫穿在 iOS 18、iPadOS 18 和 macOS Sequoia 中。
Siri 全面進化:能力更強、更個性化,支持 ChatGPT 4o 擴展、Gemini 排隊中
首先是 Siri 全新的外觀,它與系統的整合更加緊密。
當 Siri 運行時,不再是屏幕底部出現的「小球」,而是以特制的光暈環繞整個屏幕邊緣。

除語音交互之外,Siri 還新增了文字輸入的交互方式。語音 + 文字,亦可配合使用,與之交互。

能力上,Siri 能夠理解更復雜的語言,即使對話不連貫,甚至出現錯詞,它都能對答如流。
比如,當你詢問天氣說錯地名時,Siri 會糾正錯誤地名,而給出正確地名的天氣信息。
對上下文理解能力的提升,也會讓 Siri 更加聰明。
比如,你可以模糊的讓 Siri 幫忙創建日程,它仍會按照上文提及的地名自動創建。

Siri 還可以充當日常使用蘋果智能的小助手,幫助你學習和使用新功能。
比如,你寫好了一條短信,但是想要明天發給朋友。這時,就可以詢問 Siri 該如何操作,它會分步驟的告訴你,可以采用新上線的「稍后發送」功能。

Apple Intelligence 還為 Siri 帶來了屏幕內容感知功能,它能理解屏幕上的內容,并執行相應的操作。
比如,當朋友發消息告訴你新地址時,就可以直接在信息對話界面調用 Siri,讓它將地址信息添加至朋友的聯系人名片中。

Siri 也會理解不同 App 中的多樣操作,利用全新協調功能,跨 App 執行更為復雜的命令。

比如,讓 Siri 在相冊應用中找出某張照片后,添加到備忘錄應用的某個文件內。

按照會上蘋果的意思:
我們希望 Siri 能穿梭于系統中,隨時聽你差遣。
Siri 還是一個找東西的好幫手。
比如,當你忘了資料是在郵件、信息,還是備忘錄里時,只需要告知 Siri 資料信息,它就能幫你在應用中找到。


最后,蘋果借用了一個案例,進一步強調了 Siri 的個人情境感知能力。
Siri 能夠在郵件中,獲取通信雙方涉及的航班信息、就餐地址,幫助用戶規劃接機、前往就餐行程安排。



對于創作、知識問答、多模態交互等 ChatGPT 4o 更擅長的領域,蘋果借助 Siri 開放了對其的支持與調用。
蘋果無需注冊 ChatGPT 即可享受這一功能,而如果已是 ChatGPT 訂閱用戶,也能關聯賬號,體驗付費功能。

對于隱私,蘋果表示所有步驟操作均需用戶授權,同時數據不會用于訓練與記錄。
而在會后的采訪環節,Craig 透露:
我們認為,用戶會選擇使用他們喜歡的大模型,因此我們期待未來與谷歌 Gemini 等不同模型合作集成。雖然現在還沒有要宣布的,但這是我們的方向。
文本和圖像生成:自動撰寫、文本潤色、快速摘要、錄音轉寫、表情包、圖像生成、自動生視頻
Apple Intelligence 主要通過「書寫工具」、「智能回復」、「郵件預覽」功能,來提升應用的實用性。
其中「書寫工具」為全系統適用功能,在郵件應用下,則主要利用了當中的「重寫功能」。
它會在回復郵件時,提供寫過的不同版本內容,方便用戶選出滿意的一版。

并且,「重寫功能」還能直接在郵件的行文中,給出調整語氣、措辭、語法選項,甚至可將文本內容生成為一首小詩。或貼心的在長郵件開篇,添加經過提煉的摘要內容,以方便收件人閱覽。



「智能回復」功能,可以快速識別收件核心內容,并提供必要的回復選項建議,用戶只需確認回復內容,無誤后即可發送回復郵件。

而對于郵箱內繁多的未讀郵件,「郵件預覽」功能可將郵件內的重點信息摘錄置于預覽界面,不用逐條打開,也能快速獲悉郵件內容。此外,蘋果還將 Priority Messages 移至上方,Apple Intelligence 即能夠讀懂緊急郵件,并將其置頂顯示。


對通知應用進行更新,優先通知會顯示在疊放內容的頂端,一覽需要注意的事項。
具體通知界面還會顯示摘要,以便快速掃視。即使有群消息彈出,鎖屏界面下,依舊能清晰獲悉。

此外,通知應用新增了全新的「專注模式」,通過對通知內容的理解,只選出緊急性通知,從而減輕通知對用戶的干擾。

蘋果對于表情包可謂情有獨鐘,此番則帶來了生成式表情包 Genmoji。
只需在聊天時,鍵入簡單的文字描述,設備端側即可生成應景的表情包。

Genmoji 還帶有多種生成方式,比如可以依照相冊里的人物,選中創建神似的 Genmoji。

Image Playground 是一款內置在信息、Keynote、Pages、無邊記等應用中的生成式圖片工具。
它提供主題、服裝、配飾、地點等類別選項,選中的內容就會加入至 Playground,無需提示詞,也能生成圖片。

由于選項的預設,Image Playground 可以完全在設備端生成。

如果對于圖片有具體想法,也能采用輸入文字描述的方式,將其添加至 Playground,進而通過云端生成圖片。

值得一提的是,Image Playground 也能夠基于信息對話的上下文信息,給出生成圖片的建議。
除內置工具形態外,Image Playground 將作為原生新應用出現,以方便用戶生成圖像與社交網絡分享。


備忘錄應用引入了新工具 Image Wand,它能將筆記草圖轉換成精美圖片,為筆記錦上添花、圖文并茂。
Image Wand 內置于工具調板中,并可配合 Image Playground 互動使用。
比如,在筆記中圈選出草圖,打開 Image Playground,Image Wand 就能基于建議的文字、圖片信息,創建逼真的圖像。

相冊應用新增了清除工具,可以識別出照片背景中的干擾物體,進而消除。

搜索照片、視頻在 Apple Intelligence 的加持下也變得更方便。



并且,相冊還支持創建「回憶」影片,可以根據特定限制詞,智能挑選出對應照片,并生成具有主題、章節的影片內容。

錄音應用也支持摘要功能,并擴展至電話應用。


04?小結
在最近的一次財報會上,蘋果公布了 iPhone 的銷售情況,今年 1 月~3 月 iPhone 銷售額同比下降 10%,成為自 2020 年夏天以來最大的降幅。
如今發布的 Apple Intelligence,打出了一套嵌入系統底層、跨應用的 AI 組合拳,還有智能的 Siri、生成式表情、生成式圖片、書寫工具等等使用 AI 應用上線,并且作為免費增值應用向消費者提供。
勢必都將提升 iPhone 產品力,將消費者目光重新拉回至 iPhone。

但是,Apple Intelligence 的引入,也存在著一些問題。
比如 Apple Intelligence 僅可在搭載 A17 Pro 芯片上的 iPhone 15 Pro 和 iPhone 15 Pro Max 上運行,如果機制不變動的話,一定程度上會擾亂當前的 iPhone 銷售周期。消費者完全有理由,等到 9 月購買 iPhone 16 進而去體驗 Apple Intelligence。
此外,蘋果對于 Apple Intelligence 其它國家地區的上市計劃并不明朗,本地化、隱私都將是蘋果需要處理的問題。
主筆:達達、周森 / 深圳灣
審校:周森 / 深圳灣
編輯:陳述 / 深圳灣