Verify, Then Vote:小模型加Claude核查提升准确率
热点事件历史事件
Verify, Then Vote:小模型加Claude核查提升准确率
1 篇报道1 个报道来源9 天前更新
先了解这件事
AI 综述
作者 aid-ninja 发布论文与代码,提出“Verify, Then Vote”方法:让 Llama 3.2 3B、Mistral 7B、Gemma 2 2B、Phi-3 mini、Qwen 2.5 3B 五款本地模型经 Ollama 在 Apple M3 Pro(36 GB 内存)上回答同一批问题,再用托管模型 Claude Sonnet 5.5 逐条核查引用段落是否支持答案,并按固定规则选答案。 作者称,在 1000 道主题题上,准确率从多数投票的 77.1% 升到 85.0%。论文、代码、证明和保存的运行记录已放在 GitHub,并附脚本供复现结果或在同一数据上试用自定义规则。
AI 根据报道生成 · 9 天前更新
最新进展11月6日 10:59
Verify, Then Vote:五款本地小模型加 Claude 核查,准确率从 77.1% 升到 85.0%报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- Hacker News · 首页Verify, Then Vote:五款本地小模型加 Claude 核查,准确率从 77.1% 升到 85.0%
作者让 Llama 3.2 3B、Mistral 7B、Gemma 2 2B、Phi-3 mini、Qwen 2.5 3B 五款本地模型经 Ollama 在 Apple M3 Pro 上回答同一批问题,再用 Claude Sonnet 5.5 逐条核查引用段落是否支持答案,按固定规则选答案,1000 道主题准确率从多数投票的 77.1% 升到 85.0%。