今天小編分享的科技經驗:新加坡國立大學發布模型 Goat,基礎運算能力強過GPT-4,歡迎閲讀。
品玩 6 月 6 日訊,新加坡國立大學近日發表論文,發布模型 Goat。這款模型相比 GPT-4 有着更強的基礎運算能力。
雖然 GPT-4 等大語言模型有諸多亮眼的表現,但他們目前仍然很難處理基礎算數工作。而 Goat 在 LLaMA 模型的基礎上進行了微調,使其在算術方面有更好的表現,在基礎運算工作方面超過了 Bloom、OPT、GPT-NeoX 等大模型產品。
據論文顯示,研究團隊将運算工作分為可學習和不可學習兩種,并通過基礎算術原則将不可學習的工作再分解為一系列可學習的工作。而多次試驗顯示,這種分解步驟有效的提高了算術工作的準确性。