Hacker News · AI 讨论· sanjays442·· 14 天前AI 评分22
AI 够便宜到取代开发者了吗?SWE-bench Pro 与 METR 数据给出答案
Is AI Cheap Enough to Replace Developers?
AI 导读
Claude Opus 4.8 在 SWE-bench Verified 上达 88.6%,但在私有代码库的 SWE-bench Pro 上无模型超过 47%,Gemini 3.1 Pro 也从 80.6% 跌至 32%-46%。
来源:Hacker News · AI 讨论 · zyvop.com