Surge AI 盲測編程能力:Mistral Large 4 位列總榜第二
Surge AI 為 Mistral AI 進行了一項盲測人工評估,聘用軟件工程師審核五款前沿模型的代碼質素。
Mistral Large 4(被 Mistral AI 稱為 Le Chonk)在開放權重模型中名列第一,總榜僅次於 Opus 5 位列第二。Surge AI 表示,此項評估衡量的是專業代碼審查標準與可交付代碼質素,而非單純依賴自動化單元測試。
Surge AI 為 Mistral AI 進行了一項盲測人工評估,聘用軟件工程師審核五款前沿模型的代碼質素。
Mistral Large 4(被 Mistral AI 稱為 Le Chonk)在開放權重模型中名列第一,總榜僅次於 Opus 5 位列第二。Surge AI 表示,此項評估衡量的是專業代碼審查標準與可交付代碼質素,而非單純依賴自動化單元測試。