Claude Fable 5.2在互動式3D場景製作評測AA-3D中拿下1271 Elo,排名第一,較第二名Claude Sonnet 5.5高出67 Elo。
Artificial Analysis的AA-3D排行榜於10日查閱時顯示,Fable 5.2在「Max・預設回退」設定下獲得1271±25分。同一設定下,Claude Sonnet 5.5為1204±28分,Claude Opus 5.5為1202±28分。GPT-6 Astra為1168±28分,Gemini 4 Argon則為1147±30分。
AA-3D讓AI模型根據文字需求,在網頁中製作可互動的3D場景。評測方法涵蓋7個領域、共55項任務,包括旋轉黑洞、彈珠台遊戲與羅馬競技場等。
模型須在無法連上網路的環境中,以three.js製作場景。各模型收到相同需求與工具,每項任務只有一次作答機會,並須在最多3小時或250個代理執行步驟內完成。
完成的場景會先接受運作測試,再交由評審評估;無法運作的成果不列入偏好投票。
評審會在不知道模型名稱的情況下,比較同一任務製作的兩個場景;每個場景至少檢視30秒後,再投票選出偏好項目。Artificial Analysis會將投票結果換算為Elo分數。因此,1271分代表成果在這項評測中的相對偏好分數,不是答對率或整體智慧分數。
Anthropic於9日發布官方公告,推出Claude Fable 5.2,表示該模型面向複雜且耗時較長的技術工作。公司稱,相較前一版本,輸出速度最高提升30%。TokenPost先前也曾報導Claude Fable與Mythos 5.2推出及API降價。
Anthropic的Fable 5.2模型文件列出的基本費率為每100萬個輸入token 8美元(約1萬888韓元),每100萬個輸出token 40美元(約5萬4440韓元)。與前一版本輸入10美元、輸出50美元的費率相比,兩項價格各降20%;舊版費率列於Fable 5.1模型文件。
每token單價降低20%,不代表每項任務的實際成本也會按相同比例下降;用量會隨任務與模型設定而異。AA-3D也將Elo分數與每項任務的平均成本分開列示。此次排名反映的是模型在相同評測條件下製作的場景所獲偏好。
Comment 0