本文へスキップ
原文
arXiv 自然语言处理· Yuqin Dai, Zhanwei Zhang, Honghui Yang, Zhouheng Yao, Yueqi Zhang, Jingyu He, Chaoyang Shi, Fanding Wei, Boyuan Pan, Kai Xu, Yao Hu, Yongliang Shen·· 10 時間前AI スコア36

CARTBench:基于评分标准的复杂时序购物建议评测基准

CARTBench: Rubric-Based Evaluation of Shopping Advice for Complex and Ambiguous Requests with Timelines

未翻訳のため中国語で表示しています。

AI ガイド

研究团队推出购物评测基准 CARTBench,依托 17 个零售领域与 1,603 条商品记录,用于评估大语言模型处理复杂、模糊时序需求的能力。该基准包含 Core、Excellence 和 Safety 维度的 1,328 条专家准则,评测了 GPT-6.1-Sol、Claude-Opus-5 等 10 款商业及开源模型。

出典:arXiv 自然语言处理 · arxiv.org