arXiv 自然语言处理· Lijia Liu, Kyohei Atarashi, Jiyi Li, Koh Takeuchi, Shunji Umetani, Hisashi Kashima·· 5 小时前AI 评分33
NLData2Opt：评测基于自然语言与数据构建优化问题的参数推导与预测基准
NLData2Opt: Benchmarking Parameter Derivation and Prediction for Modeling Optimization Problems from Natural Language and Data
AI 导读
研究人员推出评测基准 NLData2Opt，用于评估大语言模型（LLM）在实际优化工作流中的多阶段推理能力。该基准将问题拆解为描述与数据，要求模型从包含误导属性的数据中提取相关参数、计算缺失参数，并基于历史观测预测未来的未知数值。评测结果显示模型性能相比现有基准出现大幅下降，表明现有基准进展并未直接转化为实际优化建模的准确率。
来源：arXiv 自然语言处理 · arxiv.org