跳到正文
原文
arXiv 机器学习· Bhawani Shankar Leelar, Pawan Chorasiya, Davin Hill, Robert E. Tillman, Tamer Soliman·· 8 小时前AI 评分41

显式推理并非通用优化方案:分析代码生成中人设与思维依赖效应研究

Visible Reasoning Is Not a Universal Optimizer: Persona- and Thinking-Dependent Effects in Analytics Code Generation

AI 导读

一项针对 SQL 与 Python (pandas) 分析代码生成的评测研究表明,显式思维链(Visible CoT)并不能带来普遍的准确率提升,推理语言与目标语言匹配也未展现出一致优势。实验发现显式推理的效果高度取决于人设表述、目标语言、模型配置及内部推理设置。研究指出不应将显式推理作为通用默认选项,而需结合模型与任务特征进行联合选择。

来源:arXiv 机器学习 · arxiv.org