文章標籤：

蘋果

文章分享：

收藏0 分享

BIOSTAR映泰推出 MS-X7433RE 工業運算解決方案小巧設計完美結合空間利用與強大工業級效能

COUGAR 搖搖沙發 FIDOM 與 CROSSER GOLD 電競椅凳開箱

豪宅機殼的頂峰? LIANLI 聯力O11 Vision Compact 機殼，打造頂級視覺機殼的標竿

我超有形！NZXT H7 Flow 2024 開箱組裝 / 極簡美學俐落線條

+ MORE活動推薦：

: GEX PRO 850W玩家開箱體驗分享活動
卓越性能，超值選擇 GEX PRO 系列通過 80 PLUS 金牌認證，實現高達 ...

: 體驗極速WiFi 7！MSI Roamii BE Lite Mesh
第一名 guanrung1110 https://www.xfastest.com/thread-293988-1- ...

: 極致效能為遊戲而生 990 PRO SSD 玩家體驗
[*]極致效能固態硬碟 [*]PCIe 4.0 速度大幅提升 [*]優化的電源效率 ...

: Micron Crucial PRO D5 6400超頻版玩家開
解銷更快的遊戲速度！利用低延遲遊戲記憶體的強大功能利用 Cruci ...

[蘋果產品] 蘋果推出300億參數多模態AI大模型MM1.5：具備影像辨識、自然語言推理能力

[複製鏈接]| 回復

電梯直達

1^#

Martin 發表於 2024-10-14 13:11:03 | 只看該作者 |只看大圖回帖獎勵

|倒序瀏覽 |閱讀模式

近日，蘋果公司推出了300億參數的多模態AI大模型MM1.5，該版本是在前代MM1的架構基礎上發展而來的。

模型繼續遵循資料驅動的訓練原則，著重探究在不同訓練週期中混合各類資料對模型效能產生的影響，相關模型文件已在Hugging Face上發布。

MM1.5提供了從10億到300億的多種參數規模，擁有影像辨識和自然語言推理能力。

在新版本中，蘋果公司的研發人員改進了資料混合策略，大大增強了模型在多文本圖像理解、視覺引用與定位以及多圖像推理等方面的能力。

參考論文可知，團隊在MM1.5的持續預訓練階段引入了高品質的OCR資料和合成圖像描述，這顯著提高了模型對包含大量文字的圖像的理解程度。

此外，研究人員在監督式微調階段深入分析了不同資料類型對模型表現的作用，優化了視覺指令微調資料的混合方式，使得即便是小規模的模型（如10億、30億參數版本）也能有出色的發揮，實現了更高的效率。

值得一提的是，蘋果這次也推出了專門用於視訊理解的MM1.5-Video模型和專門處理行動裝置使用者介面（UI）理解的MM1.5-UI模型。

其中，MM1.5-UI模型未來有望成為iOS背後的「蘋果牌」AI，能夠處理各種視覺引用與定位任務，還能總結螢幕上的功能，或透過與用戶的對話進行互動。

儘管MM1.5模型在多項基準測試中表現優異，但蘋果團隊仍計劃透過進一步融合文字、圖像和使用者互動數據，並設計更複雜的架構，來提升模型對行動裝置UI的理解能力，從而讓「蘋果牌」AI更強大。