arXiv 人工智能· Michal Orzechowski, Rund Tawfiq, Tomasz Kosciolek·· 10 小时前AI 评分42
本体能捕获什么?人工策展、LLM 生成与数据推导本体作为知识图谱 LLM 智能体检查器的研究
What Does an Ontology Catch? Curated, LLM-Generated and Data-Derived Ontologies as Checkers of LLM Agents over Knowledge Graphs
AI 导读
研究评估了人工策展、LLM 生成与数据推导的三种知识图谱本体,作为 LLM 智能体回答检查器的有效性。在包含近 10^9 个三元组的图谱测试中,人工策展本体易与自身数据冲突,在 UniProt 上误标正确答案的数量甚至多于数据推导和 LLM 生成的本体。针对真实智能体的回答,策展本体的报错精准度仅略高于随机标记。
来源:arXiv 人工智能 · arxiv.org