跳到正文
Hacker News · 首页· aid-ninja·· 9 天前AI 评分60

Verify, Then Vote:五款本地小模型加 Claude 核查,准确率从 77.1% 升到 85.0%

Claude was faster and cheaper. We took the scenic route anyway

AI 导读

作者让 Llama 3.2 3B、Mistral 7B、Gemma 2 2B、Phi-3 mini、Qwen 2.5 3B 五款本地模型经 Ollama 在 Apple M3 Pro 上回答同一批问题,再用 Claude Sonnet 5.5 逐条核查引用段落是否支持答案,按固定规则选答案,1000 道主题准确率从多数投票的 77.1% 升到 85.0%。

来源:Hacker News · 首页 · blog.grainulation.org