模型時代蘋果是否落后？幾乎每個人都想在蘋果WWDC24上找到這個答案。然而，在重要的主題演講階段之后，爭議接踵而至:發(fā)布會前半部分被戲謔為“追求安卓”的小功能集合，后半部分最重的AI表面上與安卓手機發(fā)布的AI能力大相徑庭，被很多人認為“沒有驚喜”。這段話開始在網(wǎng)上傳播：“WWDC24最大的驚喜就是蘋果給iPad帶來了一個新的計算器”。

雖然真正意義上的AI硬件還沒有出現(xiàn)，但大模型可能已經(jīng)成為未來端側(cè)設(shè)備上相當(dāng)于操作系統(tǒng)的“核心”，這已經(jīng)成為業(yè)界的共識。蘋果有這么重要的大模型能力嗎？在AI時代，蘋果真的需要像OpenAI這樣的第三方大模型公司嗎？

在主題演講當(dāng)天，蘋果的股價下跌了1.9%，這似乎符合外界對這次新聞發(fā)布會的“平淡”評價。然而，戲劇性的事情發(fā)生了，在主題演講的第二天，蘋果股價暴漲7%，創(chuàng)下歷史新高。金融業(yè)是市場合力的體現(xiàn)，對蘋果3.18萬億元的巨大市值規(guī)模而言，資金背后情緒的巨大反差，值得關(guān)注。

跟隨之前的爭議焦點，我們將把重點放在兩個數(shù)據(jù)上。：一份資料是蘋果在官方網(wǎng)站上低調(diào)發(fā)布的大型技術(shù)文檔，其中有許多細節(jié)值得深入挖掘。另一個是騰訊科技在現(xiàn)場的同事發(fā)的筆記。筆記記錄了主題演講后舉行的不起眼的閉門對話內(nèi)容。對話的兩人是“蘋果軟件工程高級副總裁雷格-費德里吉”（Craig Federighi）約翰-吉安南德雷亞，蘋果的機器學(xué)習(xí)和人工智能戰(zhàn)略高級副總裁。（John Giannandrea），兩人都向CEO庫克報告。談話的內(nèi)容包括為什么要和OpenAI合作，以及如何保護隱私。

圍繞這兩個資料，本文試圖順藤摸瓜地探討蘋果的“大模型競爭力”到底是怎樣的。

有兩個關(guān)鍵點：

●蘋果自主研發(fā)大模型的能力非常強；

●AppleenAI不是OpenAI Intelligence給予支持，兩者完全獨立。Apple Apple自主研發(fā)模型支持Intelligence全部。

深入挖掘蘋果發(fā)布模型技術(shù)文檔：2條新確定的信息，也許這次發(fā)布最重要的一點

第一，信息逐漸清晰：有兩種信息在新聞發(fā)布會上沒有顯示出來，在新聞發(fā)布會后逐漸清晰。

蘋果低調(diào)地發(fā)布了自研模型：不僅有端側(cè)的小模型，還有大型云模型

就Keynote而言，蘋果一直在談?wù)摼哂蠥I能力的端側(cè)設(shè)備，能夠給用戶帶來多么神奇的應(yīng)用體驗。但是這些模型到底是誰的呢？蘋果自己開發(fā)了什么，和OpenAI合作了什么？雖然承諾了隱私安全，但究竟具體怎樣保證？如果將OpenAI集成在一起，馬斯克將在企業(yè)中禁用蘋果。但蘋果全場主題演講結(jié)束后，我們都沒有找到明確的答案。

在發(fā)布會之前，它發(fā)布了一個技術(shù)博客，并且在State上。 of Union宣布，它將在蘋果設(shè)備上使用模型細節(jié)：端和云模型，都是蘋果自己開發(fā)的。

自研模型趕上GPT4

具體來說，蘋果設(shè)備上的端側(cè)模型是一個30億參數(shù)(3B)的小模型，而蘋果并沒有公布云模型的具體參數(shù)。這兩個模型的性能都很好。

蘋果可以基本獲得3B級小模型和幾個主流7B級模型的能力(獲勝) 平局概率>50%)。而云模型則直接擊中GPT-4。 Turbo級別(獲勝) 58.3%的平局概率)。

這個發(fā)布可能是整個蘋果更新中最大的核彈:蘋果開發(fā)了GPT4級大模型，一出現(xiàn)就成熟到可以直接接入蘋果的軟硬件系統(tǒng)。

這意味著之前對蘋果模型能力的質(zhì)疑完全不成立。現(xiàn)在，蘋果可以建立自己的內(nèi)部閉環(huán)AI系統(tǒng)，而不依賴外部模型公司。這是除了谷歌以外的其他手機廠商目前做不到的。

這些都是蘋果只列出OpenAI的一個模型，也是外界調(diào)用的一個模型。

側(cè)面小模型強提升

另外，在發(fā)布會上，蘋果強調(diào)了大多數(shù)Apple模型。 Intelligents的所有操作都必須在終端模型上完成。然而，在發(fā)布會結(jié)束后，幾乎所有人都在質(zhì)疑一個3B大小模型是否能夠真正完成發(fā)布會上展示的功能。

第一，3B大小的端側(cè)模型實際上已經(jīng)很難落地了。

看看蘋果的競爭產(chǎn)品表現(xiàn)：谷歌在去年12月首次將其端面模型Gemninininini 在旗艦機Pixel上，Nano部署 8 在Pro上，它的參數(shù)只有1.8。B，而且能力很有限。Gemnininininininini也用于三星S24。 Nano。了解Pixel 8 Pro有12G內(nèi)存，直到今年5月谷歌才能讓8G內(nèi)存的Pixel。 8 和 8a還跑上了這款1.8B模型，還需要下個月才能真正升級部署。而且其它手機廠商部署的端側(cè)模型基本都是在1B級參數(shù)值規(guī)模中。

而且蘋果做到了iPhone，8G內(nèi)存。 15 Pro運行了一個3B參數(shù)模型。這個項目能力已經(jīng)甩出了競爭對手的位置。

在此之前，蘋果已經(jīng)做好了充分的準(zhǔn)備，去年12月引起轟動的論文《LLM in a flash: Efficient Large Language Model Inference with Limited Memory》在里面，蘋果提出了一種處理小內(nèi)存運行大模型的方法，使用窗口化（Windowing）還有團隊捆綁（Row-Column Bundling）為了最大限度地減少數(shù)據(jù)傳輸和最大限度地提高閃存吞吐量，兩項核心技術(shù)。

蘋果還在這份技術(shù)文件中提到，他們在模型框架中使用了分組注意力查詢。（grouped-query-attention）和LoRA適應(yīng)器框架。這兩種技術(shù)一種是避免重復(fù)投射，另一種是壓縮推理過程，可以有效降低內(nèi)存占用和推理成本。

另外，為了保證AI模型的運行不會大大降低手機的功耗，蘋果還配備了功耗分析工具 Talaria，及時提高功耗。

通過這一系列的操作，3B模型端側(cè)部署才成為可能。

第二，在這個技術(shù)博客中，蘋果還展示了他們?nèi)绾伪ＷC小模型的交付能力：不是全能的，而是加強了具體的任務(wù)。

具體來說，蘋果在基本模型上增加了很多微調(diào)的適配器。適配器是疊加在一般基本模型上的小型模型的權(quán)重集合。它們可以動態(tài)加載和交換，使基本模型能夠根據(jù)當(dāng)前任務(wù)立即進行有針對性的特殊處理。蘋果智能包括緊急判斷、總結(jié)、電子郵件回復(fù)等一系列適配器。發(fā)布會上的許多功能都經(jīng)過了精細的調(diào)整。

所以，至少端側(cè)模型可以更好地完成最常見的工作，如基本摘要、寫郵件等。

總的來說，蘋果在本次發(fā)布會上展示的綜合模型能力基本遠遠超出預(yù)期。從大模型到小模型，他們都躍入了第一梯隊。

只有新旗艦才能使用AI，這可能會導(dǎo)致新的換機潮

另外一條消息也很重要：雖然iOS18系統(tǒng)更新可適用于iPhoneX以上的所有型號，但是蘋果的AI功能只能適用于iPhoneX。 15 Pro或以上型號，其他終端需要M1芯片以上的能力。也就是說，為了使用AI，用戶可能需要進行一波換機潮。

事實上，蘋果并非故意卡老客戶。一方面，端側(cè)大模型的運行瓶頸是計算率，另一方面是內(nèi)存。對于蘋果來說，計算率問題反而可能不那么棘手。這次Apple 從M1開始，Intelligent發(fā)布了產(chǎn)品。事實上，M1芯片負責(zé)AI推理的NPU能力還不如A16，但是也充分滿足了蘋果端側(cè)模型推理的需要。iPhone14 甚至iPhoneiPro 為什么不能做到15？或者是因為內(nèi)存不足。

由于在模型推理過程中需要占用大量的運行內(nèi)存。（DRAM），較小的內(nèi)存會嚴重延緩?fù)评硭俣?，甚至無法完成推理。所以iPhone 15 蘋果手機所擁有的Pro及以上8G內(nèi)存，可能是目前經(jīng)過一系列優(yōu)化的3B端模型所需的最小內(nèi)存數(shù)量。

但是這個問題本身也有優(yōu)化的空間。昨天上交大發(fā)布的PowerInfer2手機推理框架提出了進一步減少內(nèi)存占用的方法。GeminiNano下放到Pixel 這也說明谷歌也在做同樣的努力。

但是內(nèi)存需求小，7B和14B模型排隊等待上端。從長遠來看，機器仍然需要更換。畢竟只有更大的端側(cè)模型才能帶來更多用戶付費的感受法術(shù)。

圓桌談話透露了與OpenAI的關(guān)系

因為蘋果自主研發(fā)的大模型能力如此強大，為什么還要與OpenAI合作？克雷格-費德里吉，蘋果軟件工程高級副總裁。（Craig Federighi）吉安南德雷亞和約翰-（John Giannandrea）這一細節(jié)在Keynote之后的閉門對話階段被揭露，騰訊科技在WWDC現(xiàn)場的同事們發(fā)回了這次對話的內(nèi)容記錄。"現(xiàn)有的大語言模型，如ChatGPT，具有豐富的公共信息，也有其用途。這幾個很大的前沿模型都有一些有趣的功能，用戶非常喜歡，我們把它們整合到自己的體驗中，可以讓客戶體驗更加豐富?！?/p>

考慮到這一點，Apple正式宣布在WWDC與OpenAI合作，并在其平臺上提供更強大的AI服務(wù)。但是，值得注意的是，ChatGPTOpenAI不是AppleenAI Intelligence給予支持，兩者完全獨立。Apple Apple自主研發(fā)模型支持Intelligence全部。

這就意味著，雖然Apple已經(jīng)在WWDC現(xiàn)場正式宣布與OpenAI合作，但這種合作并不像外界猜測的那樣集成到蘋果系統(tǒng)中。這類合作更像是與第三方大模型企業(yè)合作的一種模式，Federighi解釋說，Apple與OpenAI的合作是因為GPT-4o目前是最好的LLM，但是Apple將來可能會與其他LLM提供商合作，用戶可以選擇外部LLM提供商。SamAltman的態(tài)度也很曖昧，一向高調(diào)，達成“如此重要”的合作后，只發(fā)布了一條推特。

圖片注：傳聞Sam Altman去了Apple Park，但是沒有機會上臺

按照Federighi的說法，Apple Intelligence被設(shè)計成高度個性化的智能，需要使用照片、聯(lián)系人、新聞和電子郵件等個人設(shè)備上的數(shù)據(jù)來執(zhí)行任務(wù)。OpenAI的ChatGPT可以在客戶有更復(fù)雜的AI請求時發(fā)揮作用。例如，如果他們想讓ChatGPT為他們編寫影視劇本，那么有人可以用他們的Mac或iPhone向ChatGPT發(fā)送查詢。

而且，Apple在設(shè)計它與ChatGPT集成時也采用了隱私優(yōu)先的思維。任何用戶信息都不會在未經(jīng)用戶許可的情況下發(fā)送到OpenAI?？蛻舯仨毾仁謩釉S可，然后才能將任何請求發(fā)送到ChatGPT處理?！袄?，我是一名醫(yī)生，我可能希望在未來引入一個醫(yī)療模型。我是律師。我可能有一個專門為法律工作而練習(xí)的模型。我想把它引入我的個人設(shè)備。他說：“蘋果認為，這最終將是對用戶在個人智能方面做得很好的補充?！?/p>

通過與OpenAI的合作探索，蘋果將繼續(xù)在Apple設(shè)備中引入百花齊放的模型，為用戶提供極其個性化和智能化的感覺，就像今天創(chuàng)建APP生態(tài)一樣嗎？這些還不得而知，我們拭目以待。

打造未來的AI端側(cè)設(shè)備，蘋果具有先天的生態(tài)優(yōu)勢

雖然蘋果在WWDC上展示的這些應(yīng)用領(lǐng)域看起來并不那么精彩，但不得不說，它們確實是客戶實際應(yīng)用中的一個很好的落地場景。比如iPadOS上的筆記學(xué)習(xí)功能，計算器的全屏識別功能，iOS上的Gen emoji的能力等等，既有趣又有用。這一切都是用來應(yīng)用的，但蘋果顯然做得更方便，很容易被顧客深刻感知。

發(fā)布會結(jié)束后，怒喵科技創(chuàng)始人李楠在騰訊科技主導(dǎo)的直播討論中表示:“蘋果的端側(cè)模型具有系統(tǒng)級別的權(quán)限和數(shù)據(jù)訪問能力。假如你問蘋果在AI能力方面做了什么？這是全行業(yè)第一個真正將手機本地API與端側(cè)模型無縫銜接的，也是全行業(yè)第一個真正將客戶個人數(shù)據(jù)交給端側(cè)模型進行fine-tuning的。其它端側(cè)模型也想做到這一點，但是他們無法獲得這些數(shù)據(jù)的訪問限制。蘋果端側(cè)AI的核心技術(shù)能力一定會越來越強?！?/p>

這種強大的源泉來自蘋果獨特的生態(tài)模式，這是安卓想做卻做不到的，蘋果可能是唯一一家能在短時間內(nèi)打通所有硬件智能終端AI感受和流通的公司。

這無疑是一條重要的環(huán)城河，蘋果這么多年來一直專注于科技行業(yè)的頂端。他們有著極其堅實的生態(tài)堡壘，這不僅是產(chǎn)品和系統(tǒng)之間的，也是底層的芯片和開發(fā)工具。蘋果可以完全統(tǒng)一。

這有助于蘋果提供前人在終端AI時代無法實現(xiàn)的AI生態(tài)，甚至可以提供更多的AI應(yīng)用生態(tài)場景。例如，在WWDC24上，蘋果展示了包括AI在內(nèi)的emoji生成。、AI驅(qū)動的數(shù)學(xué)筆記本等引人注目的功能，顯然比很多廠商只宣傳AI摳圖能力更有吸引力。

“我們希望人工智能能夠提高它們的能力，而不是取代我們的用戶?！笨死赘?費德里吉在圓桌對話中提到了蘋果對AI的看法，“這和我們之前看到的人工智能不一樣”。

但是問題也隨之而來，蘋果未來可能會無數(shù)次證實一件事。

確定與OpenAI的關(guān)系后，隨之而來的問題是“蘋果如何在保證安全的同時，將現(xiàn)有用戶數(shù)據(jù)交給第三方，生成AI內(nèi)容”。

對蘋果來說，這是極其重要的。

克雷格-費德里吉是今年WWDC最重要的商品。Apple 在Intelligence中，試圖用沉重的空間告訴用戶，Apple 這種由Intelligence創(chuàng)建的“端” 私有云是多么安全地組合在一起。蘋果通過系統(tǒng)級安全芯片加密和完全封閉的傳輸路徑來保證這一點...

蘋果在主題演講中強調(diào)了這部分流程。他們在系統(tǒng)中增加了一個開關(guān)，所有輸出到GPT-4o的內(nèi)容都必須由客戶發(fā)起。

與此同時，克雷格還在圓桌上展示了蘋果處理用戶需求的過程。如果他們想上云，他們有一套獨立的加密技術(shù)?？蛻魯?shù)據(jù)脫敏，數(shù)據(jù)處理后會被銷毀。蘋果根本無法干預(yù)這個過程中的數(shù)據(jù)。

蘋果希望通過這種方式告訴用戶足夠安全。他們甚至找到了一些單獨的安全研究人員，并向他們開放。Apple 將第三方引入Intelligence服務(wù)器，以幫助他們確認客戶數(shù)據(jù)的安全性不會被泄露。

然而，這仍然沒有消除外界對隱私數(shù)據(jù)安全泄露的焦慮，尤其是在Siri接入GPT-4o后，用戶信息如何脫敏，蘋果如何-OpenAI-在這條傳輸路徑上，蘋果沒有走錯路口等問題，全部拋到蘋果身上。

在與騰訊科技的解讀直播中，面壁智能首席研究員韓旭也表示擔(dān)憂。他認為，只要數(shù)據(jù)從蘋果傳遞給第三方，蘋果就會失去對數(shù)據(jù)安全的控制權(quán)，無論是OpenAI的GPT還是Google的Gemini，這確實會對蘋果的隱私安全提出新的挑戰(zhàn)。

但是好消息是，這已經(jīng)不是蘋果第一次面臨這樣的問題了。

在選擇搜索供應(yīng)商時，蘋果陷入了類似的討論。當(dāng)蘋果將谷歌確定為iPhone默認(海外)搜索引擎時，曾經(jīng)質(zhì)疑如何保證用戶的隱私數(shù)據(jù)不被泄露。在接受外媒采訪時，庫克討論的內(nèi)容與他們現(xiàn)在選擇OpenAI的內(nèi)容出奇的一致。

選擇Google的蘋果，庫克說谷歌在搜索引擎這方面做得最好。

選擇OpenAI的蘋果，克雷格還表示，OpenAI是目前蘋果的最佳選擇。

在談到搜索引擎時，庫克表示，蘋果還將許多控制選項融入其中，例如在Safari瀏覽器中開發(fā)隱私瀏覽模式，并配有智能防跟蹤器等，以為用戶提供全方位的幫助。

而且克雷格在談到AI的時候，更多的還是只談到了他們在端邊。 私人云的加密策略，但是對于OpenAI的部分，顯然還沒有透露更多。

或許可以預(yù)見，在未來很長一段時間內(nèi)，蘋果會無數(shù)次證實自己的AI策略是安全的，包括自己的和第三方的，這對蘋果來說是一條紅線。

本文來自微信微信官方賬號“騰訊科技”（ID:qqtech），作家：郝博陽 郭曉靜 經(jīng)授權(quán)發(fā)布的吳彬，36氪。

本文僅代表作者觀點，版權(quán)歸原創(chuàng)者所有，如需轉(zhuǎn)載請在文中注明來源及作者名字。

免責(zé)聲明：本文系轉(zhuǎn)載編輯文章，僅作分享之用。如分享內(nèi)容、圖片侵犯到您的版權(quán)或非授權(quán)發(fā)布，請及時與我們聯(lián)系進行審核處理或刪除，您可以發(fā)送材料至郵箱：service@tojoy.com