← AI 動態
The Decoder
研究人員訓練出僅需 12.5% 專家即可達近全性能的 AI 模型
研究人員開發出 EMO,一種混合專家模型,其內部模組專注於特定主題領域,實現近全性能只需 12.5% 的專家
AI
混合專家模型
語言模型
研究人員在艾倫人工智慧研究所和加州大學伯克利分校開發出了一種新的 AI 模型,稱為 EMO。這種模型的內部模組專注於特定主題領域,如醫學或政治,而不是僅僅學習語法規則。這使得模型可以在只有 12.5% 的專家情況下仍然保持近全性能。這項技術的突破對於 AI 的應用和發展具有重要意義,因為它可以使模型更小、更快、更省資源。同時,這也意味著 AI 可以更好地應對複雜的任務和多樣化的需求。