在諸多科技業者均提出可用於行動裝置上執行的大型自然語言模型之後,微軟 研究人員提出名為Phi-3 Mini、規模更小的大型自然語言模型,僅以38億組參數規模運作。
微軟研究人員表示,Phi-3 Mini 相比微軟推出參數規模為27億組的自然語言模型Phi-2,可用於手機或筆電裝置 強調比Google的Gemini Nano有更高效能表現先前推出的Phi-2參數規模更大一些,同時運作效能可比擬Meta提出的大型自然語言模型Llama 2,本身基於Phi-2模型設計,並且以嚴格過濾的網路數據與合成數據進行訓練,同時僅以38億組參數執行運作,能在行動裝置上以更輕巧形式使用。
而Phi-3 Mini的設計靈感來自兒童讀物,透過更簡單、容易理解語言描述複雜主題,讓人工智慧 能更快知曉實際執行需求。
雖然微軟強調Phi-3 Mini運作效能可比擬Llama 2,但整體運作效能仍無法與搭配網路協同運作的大型自然語言模型實際表現,香在數學計算、程式編寫與學術相關測試仍可超越Phi-2,以及包含Mistral、Gemma、Llama-3-In等規模較小的自然語言模型。
不過,由於本身對應參數規模較小,因此Phi-3 Mini對於處理涉及即時、事實相關知識的廣度相對較差,但優點在於可在行動裝置端有更好的執行效率表現。
微軟目前已經透過自身Azure雲端服務平台,並且藉由Hugging Face、Ollama等託管平台提供Phi-3 Mini模型,接下來更計畫推出數據規模達70億組的Phi-3 Small,以及參數規模達140億組的Phi-3 Medium。
《原文刊登於合作媒體mashdigi,聯合新聞網獲授權轉載。》
訂閱《科技玩家》YouTube頻道!
💡 追新聞》》在Google News按下追蹤,科技玩家好文不漏接!
📢 Netflix雙11送「漲價大禮」!月費最高悄漲18%超驚人 每月比Max貴161元
📢 【11月便宜資費懶人包/4G吃到飽488!5G搶市4百有找、再送千元小禮
📢 【雙11特價】OTT串流平台優惠 MyVideo低於3折、LINE TV免千元
📢 LINE免費貼圖精選12組!「我不雞道」大玩諧音哏 黑貓椒滴滴超Q
📢 你的iPhone正在追蹤你!3步驟甩開APP竊聽 不被掌握行蹤
📢 【雙11特價】手機殼省千元!CASETiFY三件7折、犀牛盾6折起、普格爾買1送1