掘金· yunzerui·· 17 天前精选AI 评分71
一次 function-calling 失败归因:模型不调用工具的两个根因
模型不是选错,是干脆不调用:一次 function-calling 失败的真实归因
AI 导读
作者在一次企业内部试点中复盘 6 个工具、9 条用例的 function-calling 评测,基线选择准确率 78%,两条失败用例都是模型完全不调用工具。
借鉴点
能拿走三件事:required 参数来源要写进描述、相邻工具要写互斥边界、负例占比至少 20%,用 mf lint 和 mf coverage 静态查;代价是得先有一套单变量对照的评测套件。
来源:掘金 · juejin.cn