6月11日凌晨,OpenAI在官網(wǎng)宣布與蘋(píng)果達(dá)成技術(shù)合作,將ChatGPT深度集成在蘋(píng)果產(chǎn)品矩陣中,包括最新的iOS、iPadOS和macOS。
蘋(píng)果用戶可以在手機(jī)、平板和筆記本電腦中原生使用ChatGPT進(jìn)行圖片生成、文本生成以及文本摘要等。Siri在ChatGPT的加持下也將變得更智能,例如,讓其深度解讀文檔、圖像等內(nèi)容,都會(huì)直接給出答案。
據(jù)悉,蘋(píng)果本次使用的ChatGPT是由GPT-4o提供技術(shù)支持,這是OpenAI前不久剛發(fā)布的多模態(tài)大模型,支持跨文本、視頻、音頻進(jìn)行推理,也是專(zhuān)為移動(dòng)端打造的低消耗、高性能版本。

同時(shí),蘋(píng)果在今天凌晨舉辦的“WWDC24”也宣布了這一消息,重磅推出了“Apple Intelligence”。
這是一款內(nèi)置在iOS 18、iPadOS 18和macOS Sequoia中的強(qiáng)大生成式AI模型。使用的芯片是蘋(píng)果自研的M系列和專(zhuān)屬云服務(wù)器,并且蘋(píng)果制定了新的AI使用標(biāo)準(zhǔn)以保護(hù)用戶的隱私和數(shù)據(jù)安全。

iOS 18中的生成式AI功能展示
根據(jù)蘋(píng)果在大會(huì)上的展示,Apple Intelligence的功能主要涵蓋文本、語(yǔ)音助手、音頻、摘要等多種內(nèi)容。
例如,可以幫助用戶自動(dòng)生成求職信、郵件、博客內(nèi)容,同時(shí)可以根據(jù)不同的語(yǔ)氣、應(yīng)用場(chǎng)景進(jìn)行切換。
也可以對(duì)現(xiàn)有的文本內(nèi)容的語(yǔ)法、句子結(jié)構(gòu)和標(biāo)點(diǎn)符號(hào)等進(jìn)行校準(zhǔn),幫助用戶快速完成書(shū)寫(xiě)。

GPT-4o模型的最大技術(shù)優(yōu)勢(shì)是多模態(tài)推理,尤其是在視頻、音頻方面的表現(xiàn)非常優(yōu)秀,所以,蘋(píng)果用戶可以通過(guò)手機(jī)、筆記本對(duì)錄制的音頻進(jìn)行內(nèi)容總結(jié)。
例如,你在每周例會(huì)上開(kāi)啟了手機(jī)的錄音功能,在結(jié)束后會(huì)自動(dòng)幫你生成大會(huì)所有重要內(nèi)容。

蘋(píng)果在多種設(shè)備中內(nèi)置了“Image Playground”,用戶通過(guò)文本就能生成任意數(shù)量的圖像。
例如,用戶可以選擇不同的主題、服裝和裝飾,將自己的照片快速變成卡通、朋克等類(lèi)型的圖像。
你也可以在發(fā)送“消息”時(shí),加入一些自己生成圖片增加趣味性,例如,朋友過(guò)生日,生成一張圖片祝他生日快樂(lè)。

當(dāng)你的手機(jī)里存儲(chǔ)超過(guò)10000張圖像時(shí),想精準(zhǔn)搜索需要的圖像變得非常困難。借助新的功能,只需要用文本就能快速精準(zhǔn)完成。
例如,幫我搜索一下所有穿著紅色上衣、牛仔褲和運(yùn)動(dòng)鞋的照片。

Siri大更新,更智能
在生成式AI的加持下,Siri將提供前所未有的超強(qiáng)智能功能。
現(xiàn)在,用戶可以通過(guò)文本+語(yǔ)音的混合模式與Siri交流,讓其理解能力更加準(zhǔn)確。同時(shí)可以執(zhí)行跨應(yīng)用的自動(dòng)化操作。

例如,當(dāng)你在消息當(dāng)中收到一個(gè)電話號(hào)碼時(shí),可以讓siri把這個(gè)號(hào)碼自動(dòng)存儲(chǔ)在聯(lián)系人當(dāng)中。
或者從你的圖庫(kù)中提取某張旅游照片,然后發(fā)送給特定的人。

也可以讓Siri快速播放手機(jī)中的一首歌曲,用戶無(wú)需指定這個(gè)歌曲在哪個(gè)應(yīng)用中,只需要說(shuō)名字即可。
或者你可以向Siri詢問(wèn)某人的航班何時(shí)降落,Siri會(huì)自動(dòng)搜索該航班的所有信息并為你展示出來(lái)。
原生集成ChatGPT
蘋(píng)果會(huì)將 ChatGPT原生集成到 iOS 18、iPadOS 18和macOS Sequoia產(chǎn)品中,用戶無(wú)需在工具之間跳轉(zhuǎn)即可訪問(wèn)其專(zhuān)業(yè)知識(shí)以及圖像和文檔理解功能。

當(dāng)你用文本、語(yǔ)音模式與Siri交流時(shí),它會(huì)利用ChatGPT的知識(shí)為你回答各種內(nèi)容。例如,生成一份7天的旅行計(jì)劃;寫(xiě)一份關(guān)于鞋子的社交媒體平臺(tái)的宣傳稿等。
也可以為正在寫(xiě)的文檔,用文本提示的方式自動(dòng)生成一張插圖。

蘋(píng)果表示,最新的ChatGPT等功能將于今年秋天在iOS 18、iPadOS 18和macOS Sequoia系統(tǒng)中提供測(cè)試。M1及更高版本的iPhone 15 Pro、iPhone 15 Pro Max以及iPad和 Mac設(shè)備可以免費(fèi)使用。
雖然蘋(píng)果整整遲到了一年多才正式加入生成式AI(AIGC)賽道,但這對(duì)整個(gè)行業(yè)發(fā)展、應(yīng)用影響是巨大的,充分說(shuō)明它對(duì)我們工作、生活、娛樂(lè)的重要性。
