arXiv 人工智能· Linjian Yang, Xinyan Wang, Kunpeng Liu·· 1 天前AI 评分34
BoardSafety:用于开发板安全评估的厂商文档 AI 数据基准
BoardSafety: AI-Ready Data from Manufacturer Documentation for Development-Board Safety
AI 导读
研究人员推出 BoardSafety 评测基准,利用厂商数据手册和硬件指南构建安全规则库,以评估大语言模型(LLM)判断特定开发板操作安全性的能力。该基准将操作场景标注为 safe、unsafe 或 insufficient-info 三类安全等级,涵盖边界条件与信息缺失等用例。评测显示提供安全规则普遍能提升准确率,但受测模型目前仍无法可靠判断操作是否安全。
来源:arXiv 人工智能 · arxiv.org