热点事件持续更新
研究利用开源LLM预测医学试题难度
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
2026年10月30日,相关研究公布了一种利用开源大语言模型(LLM)预测医学试题难度的方法。该研究让开源模型同时充当评判者与模拟受试者,对USMLE和PANCE医学执照试题的难度展开预测。通过结合成对难度比较与模拟答题信号,该方案在USMLE和PANCE数据集上的Spearman相关系数分别达到ρ = .447与.494,超越了2024 BEA共享任务的最佳水平,并比肩Claude Opus 5。由于该方法支持本地部署,为高保密性试题评估提供了实用方案。
AI 根据报道生成 · 1 小时前更新
最新进展10月30日 12:00
研究利用开源LLM兼任评判者与受试者预测医学试题难度,表现超越BEA基准并比肩Claude Opus 5。报道时间线
沿着报道,了解事件的不同侧面。
10月30日
- arXiv 自然语言处理LLM 兼任评判者与受试者用于医学试题难度预测
研究人员利用开源大语言模型同时充当评判者与模拟受试者,实现了对 USMLE 和 PANCE 医学执照试题难度的预测。结合成对难度比较与模拟答题信号后,模型在 USMLE 和 PANCE 数据集上的 Spearman 相关系数分别达到 ρ = .447 与 .494,超越 2024 BEA 共享任务最佳水平并比肩 Claude Opus 5。由于支持本地部署,该方法为高保密性试题评估提供了实用方案。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。