跳到正文
热点事件历史事件

Verify, Then Vote:小模型加Claude核查提升准确率

1 篇报道1 个报道来源9 天前更新

先了解这件事

AI 综述

作者 aid-ninja 发布论文与代码,提出“Verify, Then Vote”方法:让 Llama 3.2 3B、Mistral 7B、Gemma 2 2B、Phi-3 mini、Qwen 2.5 3B 五款本地模型经 Ollama 在 Apple M3 Pro(36 GB 内存)上回答同一批问题,再用托管模型 Claude Sonnet 5.5 逐条核查引用段落是否支持答案,并按固定规则选答案。 作者称,在 1000 道主题题上,准确率从多数投票的 77.1% 升到 85.0%。论文、代码、证明和保存的运行记录已放在 GitHub,并附脚本供复现结果或在同一数据上试用自定义规则。

AI 根据报道生成 · 9 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. Hacker News · 首页
    Verify, Then Vote:五款本地小模型加 Claude 核查,准确率从 77.1% 升到 85.0%

    作者让 Llama 3.2 3B、Mistral 7B、Gemma 2 2B、Phi-3 mini、Qwen 2.5 3B 五款本地模型经 Ollama 在 Apple M3 Pro 上回答同一批问题,再用 Claude Sonnet 5.5 逐条核查引用段落是否支持答案,按固定规则选答案,1000 道主题准确率从多数投票的 77.1% 升到 85.0%。