在當今數字化時代,人工智能(AI)已成爲推動技術進步和創新的關鍵力量。蘋果公司,作爲全球科技領域的巨頭之一,一直在不斷探索和創新,以提供更加智能和個性化的用戶體驗。2024年的WWDC大會上,蘋果公司揭開了其最新力作——Apple Intelligence的神祕面紗,這是一款全新的個人智能化系統,旨在徹底改變用戶與設備之間的互動方式。
Apple Intelligence是什麼
Apple Intelligence是蘋果公司開發的一款集成在 iPhone、iPad 和 Mac 平台上的個人智能系統,於北京時間2024年6月11日的WWDC大會(蘋果全球開發者大會)上發佈。該AI系統通過結合強大的生成模型和個人背景,爲用戶提供有用且相關的服務和體驗。Apple Intelligence 的核心在於其先進的 AI 技術和隱私的重視,不僅能夠理解用戶的需求,還能預測用戶的意圖,在保護用戶隱私的同時還能提供更加個性化的服務。
Apple Intelligence的核心功能
AI驅動的寫作工具
寫作工具是 Apple Intelligence 的一項系統級功能,能夠幫助用戶在各種應用程序中重寫、校對和總結文本。無論是撰寫電子郵件、潤色博客文章還是整理課堂筆記,這些工具都能讓用戶在寫作時更加自信。用戶可以調整文本的語調、檢查語法錯誤,甚至獲得文本內容的簡潔摘要。
Genmoji和Image Playground
Apple Intelligence 還爲用戶的圖像和表情符號帶來了樂趣和創造力。通過新的Image Playground,用戶可以生成三種風格的有趣圖像:動畫、插圖或草圖。用戶可以創建自定義的表情符號,即“Genmoji”,完美捕捉瞬間和獨特的表達方式。此外,使用圖像魔杖(Image Wand),用戶還可以將草圖轉換成精緻的圖像。
改進的照片和視頻體驗
照片應用也得到了增強,新增了自然語言搜索功能,用戶可以輕鬆找到視頻中的特定時刻。新的清理工具可以去除背景中的干擾物,而不會改變主題。通過“記憶”功能,用戶只需簡單描述即可創建自定義的故事。
隱私和安全
Apple Intelligence 在 AI 領域設定了新的隱私標準。首先,它擁有在設備上完全運行的小模型,以本地處理請求。當更復雜的任務需要雲處理時,它們有一個新的私有云計算功能,同時確保用戶的數據不會被保留或暴露。
Siri的全面升級
Siri 通過 Apple Intelligence 得到了全面的升級。現在,Siri 更好地理解用戶,能夠跟隨用戶的思路,保持請求之間的上下文,甚至允許用戶通過打字代替說話。Siri 還可以在應用程序中執行數百種新操作,例如從朋友那裏獲取書籍推薦或檢查父母的航班狀態。
ChatGPT集成
蘋果公司還在其平台上整合了OpenAI旗下的ChatGPT。Siri 可以在用戶允許的情況下,利用 ChatGPT 的專業知識來回答問題。ChatGPT 將在系統級的寫作工具中提供幫助,生成內容和圖像。ChatGPT 用戶還可以連接他們的賬戶以訪問付費服務。
Apple Intelligence的技術細節
Apple Intelligence 建立在蘋果公司創建的一系列生成模型之上,包括設備上的和服務器基礎模型、圖像生成的擴散模型和編碼模型。此外,Apple Intelligence 還可以根據需要調用第三方模型,如 ChatGPT,以處理更復雜的請求。
設備端的模型
設備上的模型擁有約 30 億參數和 49K 的詞彙量,採用低比特量化和分組查詢注意力技術,以提高速度和效率。在 iPhone 15 Pro 上,該模型實現了每個提示token 0.6 毫秒的時間到生成第一個token的延遲和每秒 30 個token的生成速率。
服務器端的模型
服務器端的模型擁有 100K 的詞彙量,能夠使用私有云計算處理更復雜的任務,同時確保隱私和安全。該模型使用高級技術,如推測性解碼和上下文修剪,以提高性能。建立在強化的 iOS 基礎子集上,通過強大的加密和安全的啓動過程確保用戶數據的隱私。
訓練和優化
蘋果的模型是在精心策劃的數據集上訓練的,這些數據集不包含任何個人用戶數據。訓練數據包括授權數據、由 AppleBot 收集的公開可用數據和合成數據。訓練後,蘋果使用諸如拒絕採樣微調和基於人類反饋的強化學習等新穎算法,以提高模型遵循指令的能力。
蘋果實施了一系列尖端技術,以確保在移動設備上的最優性能和效率。通過使用分組查詢注意力、共享嵌入表、低位palletization和高效的鍵值緩存更新等方法,蘋果成功創建了高度壓縮的模型,這些模型在滿足移動設備的內存、功率和性能限制的同時,保持了質量。
低秩適應(LoRA)
與 Google 的 Gemini Nano 和 Microsoft 的 Phi 等通用模型不同,蘋果的模型通過使用一種稱爲“低秩適應”的技術,對日常活動進行了微調,如摘要、郵件回覆和校對。這種技術涉及將小型神經網絡模塊插入預訓練模型的各個層中。這允許模型適應不同任務,同時保留其通用知識。重要的是,這些適配器可以動態加載和交換,允許基礎模型針對手頭的任務進行專門處理。
如何使用Apple Intelligence
Apple Intelligence面向用戶免費提供,測試版將於今年秋季作爲 iOS 18、iPadOS 18 和 macOS Sequoia 的內置功能推出,僅支持英語(美國)。部分功能、軟件平台和其他語言支持將於明年陸續推出。Apple Intelligence 將僅支持 iPhone 15 Pro、iPhone 15 Pro Max 以及搭載 M1 或後續芯片的 iPad 和 Mac 設備,需將 Siri 和設備的語言設置爲英語(美國)。
常見問題
延伸閱讀
- Apple Intelligence 官方網站
- 新聞稿 – Apple Intelligence 登陸 iPhone、iPad 和 Mac
- 蘋果智能背後模型公佈:3B模型優於Gemma-7B,服務器模型媲美GPT-3.5-Turbo