今天凌晨,蘋果召開了“WWDC 2025”全球開發者大會,并宣布在iPhone、iPad、Mac、Apple Watch和 Apple Vision Pro中集成全新Apple Intelligence功能,以提升用戶體驗。
這些功能包括ChatGPT圖像生成、實時翻譯、AI視覺、生成表情符號、快捷指令、Workout Buddy等眾多實用AI功能。最讓人驚喜的一個就是蘋果開放了Intelligence基礎模型訪問權,開發者可以開發適配蘋果生態的AI應用了。
蘋果公司軟件工程高級副總裁Craig Federighi表示,去年,我們邁出了第一步,為用戶提供既實用又相關、易于使用且在用戶需要的地方隨時可用的智能體驗,同時保護他們的隱私。今年,驅動 Apple Intelligence 的模型變得更加強大和高效,我們將其整合到各個操作系統的更多地方。
我們還向開發者開放驅動Apple Intelligence的設備端基礎模型的直接訪問權限,讓他們能夠利用這種強大、快速、注重隱私且離線可用的智能功能。我們相信這將激發開發者在用戶日常依賴的應用中創造全新的智能體驗。
ChatGPT圖像生成和表情符號
Genmoji和Image Playground 為用戶提供了更多自我表達的途徑。除了可以將文本描述生成Genmoji外,用戶現在還可以混合不同的表情符號,并結合文字描述創造新的內容。
當用戶使用Genmoji 和Image Playground 創作以家人和朋友為靈感的圖像時,還能更改表情或調整發型等個人特征,以匹配朋友的最新造型。
在Image Playground中,用戶可以通過ChatGPT 使用全新風格,例如,油畫風格、矢量以及火爆全球的吉卜力風格。如果用戶有特定的創意想法,可以點擊 “任意風格”并描述需求。
Image Playground 會將用戶的描述或照片發送給 ChatGPT,生成獨特的圖像。所有操作均由用戶掌控,未經許可不會向ChatGPT分享任何內容。
實時翻譯打破語言障礙
當語言障礙成為交流阻礙時,實時翻譯功能可以幫助用戶在消息傳遞或語音交流中進行跨語言溝通。該功能集成在信息、FaceTime 和Phone應用中,由完全在設備端運行的蘋果自研模型支持,確保用戶的私人對話保持私密性。
在信息應用中,實時翻譯可以自動翻譯消息。例如,用戶在國外旅行時與新朋友制定計劃,輸入消息時即可進行翻譯,并以收件人偏好的語言發送;
收到回復時,每條消息都能即時翻譯。在 FaceTime 通話中,用戶可以一邊聆聽發言者的聲音,一邊查看實時翻譯字幕。在電話通話中,翻譯內容會在整個對話過程中語音播報。
AI視覺助力用戶搜索和操作
基于 Apple Intelligence,視覺智能功能擴展到用戶的 iPhone 屏幕,使他們能夠對應用中正在查看的任何內容進行搜索和操作。
視覺智能此前已通過 iPhone 攝像頭幫助用戶了解周圍的物體和地點,現在更能讓用戶對屏幕內容進行更快捷的操作。
用戶可以針對屏幕上的內容向ChatGPT 提問以獲取更多信息,還能通過 Google、Etsy 或其他支持的應用搜索相似圖片和商品。如果用戶對某個物體(如臺燈)特別感興趣,可以通過高亮該物體搜索特定商品或類似物品。
視覺智能還能識別用戶正在查看的事件,并建議將其添加到日歷中。Apple Intelligence 會提取日期、時間和地點等關鍵信息,自動填充到事件中。
用戶只需按下與截取屏幕相同的按鈕,即可訪問屏幕內容的視覺智能功能。用戶可以選擇保存或分享屏幕截圖,或通過視覺智能進一步探索內容。
Apple Watch上新體驗Workout Buddy
Workout Buddy 是Apple Watch 上首款集成 Apple Intelligence 的健身體驗功能,它結合用戶的鍛煉數據和健身歷史,在鍛煉過程中生成個性化的激勵性洞察。
為了實時提供有意義的激勵,Workout Buddy 會分析用戶當前鍛煉數據及健身歷史,包括心率、配速、距離、活動圓環、個人健身里程碑等數據。全新的文本轉語音模型會將洞察轉化為動態生成的語音,該語音基于 Fitness + 教練的語音數據構建,具備適合鍛煉場景的活力、風格和語調。Workout Buddy 通過 Apple Intelligence 對數據進行私密且安全的處理。
Workout Buddy 將在配備藍牙耳機的 Apple Watch 上使用,且需要附近有支持 Apple Intelligence的 iPhone。該功能首發支持英語,適用于多種熱門鍛煉類型:戶外和室內跑步、戶外和室內步行、戶外騎行、高強度間歇訓練(HIIT)以及功能性和傳統力量訓練。
Intelligence內置模型現已向開發者開放
蘋果正開放對 Apple Intelligence 核心設備端基礎模型的訪問權限,任何應用都能直接調用該模型。
通過基礎模型框架Foundation Models framework,開發者可以基于 Apple Intelligence 構建新體驗,為用戶帶來智能、離線可用且保護隱私的功能,同時使用免費的 AI 推理服務。
例如,教育類應用可以利用設備端模型從用戶筆記中生成個性化測驗,無需支付云API費用;戶外類應用可以添加即使在離線狀態下也能使用的自然語言搜索功能。
該框架原生支持Swift語言,開發者只需三行代碼即可輕松訪問Apple Intelligence模型。框架內置引導式生成、工具調用等功能,讓開發者能更便捷地將生成式功能集成到現有應用中。
更智能快捷指令
快捷指令現在比以往任何時候都更強大、更智能。用戶可以使用由 Apple Intelligence 支持的全新 “智能操作”。用戶將看到專門用于寫作工具文本總結或圖像游樂場圖像創建等功能的操作選項。
現在,用戶可以直接調用 Apple Intelligence 模型(設備端或私有云計算)生成響應,并將其融入快捷指令的后續流程,同時確保快捷指令中使用的信息隱私。
例如,學生可以創建一個快捷指令,利用 Apple Intelligence 模型將課堂講座的音頻轉錄與自己的筆記進行對比,并添加可能遺漏的關鍵點。用戶也可以選擇調用 ChatGPT 生成響應并融入快捷指令。
Intelligence其他功能更新
提醒事項:現在可以識別電子郵件、網站、筆記或其他內容中的關鍵操作,并自動分類。
ChatGPT集成:在寫作工具和 Siri 中可直接調用 ChatGPT,無需切換工具即可使用其圖像和文檔理解能力。
蘋果錢包:可以識別并匯總商家或物流公司發送的電子郵件中的訂單跟蹤詳情。用戶可以在一個地方查看所有訂單的完整詳情、進度通知等信息。
信息應用:用戶可以在信息應用中為任何事項創建投票,Apple Intelligence 會檢測何時需要投票并提出建議。此外,信息應用中的“背景” 功能允許用戶用精美的設計個性化聊天界面,還能通過Image Playground 創建適合對話主題的獨特背景。
寫作工具:幫助用戶重寫、校對和總結文本。通過 “描述修改”功能,用戶可以描述具體修改需求,例如將晚宴邀請信改寫為詩歌風格。
圖像魔杖:將粗略的草圖轉化為精致圖像,與用戶的筆記相得益彰。
郵件摘要:點擊 “總結” 即可查看電子郵件或長線程的關鍵信息。
智能回復:在郵件和信息應用中提供快速回復建議。
Siri:更自然、更智能,支持向 Siri 打字提問,利用其產品知識解答蘋果設備的功能和設置問題;支持識別用戶表述中的停頓,并保持請求之間的上下文連貫。
通話轉錄摘要:生成通話轉錄摘要,突出重要細節。
蘋果還提供了很多其他好用的AI功能,總之非常多,有興趣的小伙伴可以看官網公告。
何時可以使用這些功能
所有新功能從即日起通過 Apple Developer Program提供測試,下個月將通過 Apple Beta Software Program推出公開測試版。
今年秋季,使用支持語言的兼容設備用戶將可使用這些功能,包括所有iPhone 16型號、iPhone 15 Pro、iPhone 15 Pro Max、配備A17 Pro 的 iPad mini,以及搭載 M1 及后續芯片的 iPad 和 Mac 設備,
且需將Siri 和設備語言設置為支持的語言,英語、法語、德語、意大利語、葡萄牙語(巴西)、西班牙語、日語、韓語或簡體中文。
到今年年底還將新增支持丹麥語、荷蘭語、挪威語、葡萄牙語、瑞典語、土耳其語、繁體中文和越南語。部分功能可能不適用于所有語言或地區,具體可用性可能因當地法律和法規而異。
本文素材來源蘋果,如有侵權請聯系刪除
報告下載
大 佬觀點分享
關于RPA、AI、企業數字化轉型
(點擊文字即可閱讀)
| |
| | |
| | |
| | |
| |
行業知識交流分享,結識擴展人脈圈層
公眾號后臺回復【RPA】或者【流程挖掘】
可受邀加入相關的交流群
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.