跳到正文
原文
Hacker News · AI· Zeruxe·· 10 小时前AI 评分59

开源工具 Zet 发布,可识别 AI 回答不确定性并分流人工复核

Zet, a layer on Jev and Laya that knows when the AI is guessing

AI 导读

开源 Python 工具 Zet 基于 Apache 2.0 协议发布并在本地运行,能够利用已知正确答案的样本评估模型输出的确定性,自动决定直接采纳或转交人工复核。在 350 条语音助手请求的基准测试中,模型单独产生了 45 次错误,接入 Zet 后成功将其中 41 次错误送入复核并自动采纳 227 条回答,仅遗漏 4 次错误,总计送审 123 条回答。

来源:Hacker News · AI · yoosseph.github.io