離真正為程序員服務還很遠:Agent進入企業私有代碼,最高通過率也只有四成
2026-09-11 17:31:55
幣界網消息,OneMillion.AI發文稱,yc孵化的AI數據公司Specific Labs推出編程評測Real-Swe,專門測試真實公司的私有代碼。任務直接來自企業生產環境,包括算稅、賬單遷移、API計費和客戶數據遷移。結果顯示,Fable以51%排名第一,通過率為38.8%;Astra為33.8%,Gemini為38%,Flash為31.2%。GLM以28.8%排名第四,整體通過率低於15%的任務有6個,且有一個任務所有模型全部失敗。智譜研究員Xiaopu Peng表示,這更考驗Real-Swe在陌生項目中持續讀代碼、找規則和完成多步改動的能力。
利好 0
利空 0
來源:互聯網
本內容只為提供市場資訊,不構成投資建議。