arXiv 人工智能· P N Bhargav Teja, Velpula Lokesh Reddy, Madhu Basumata, Susen Sarkar, Rajasekhara Reddy Duvvuru Muni·· 8 小时前AI 评分35
SmartSalesBench:用于评估 LLM 销售智能体的抗拒性多轮评测基准
SmartSalesBench: A Resistance-Aware Multi-Turn Benchmark for Evaluating LLM Sales Agents
AI 导读
SmartSalesBench 是首个专门用于针对具心理学依据的抗拒型买家画像来评估大语言模型销售智能体的多轮对话评测基准。该基准包含 5 种智能体画像、12 种买家画像及跨 6 个价格层级的 15 款智能手机,支持多达 20 轮对话并经 RAG 增强,测试涵盖 4 个对比实验共 13,680 场会话。研究提出了分为三层的 9 项评估指标,并结合 LLM-as-judge 与人工评估进行验证。
来源:arXiv 人工智能 · arxiv.org