本文へスキップ
原文
arXiv 自然语言处理· Eunchan Kim, Inwhee Joe·· 8 時間前AI スコア38

剥开 Matryoshka:从检索嵌入中提取本体结构

Peeling the Matryoshka: Extracting Ontological Structure from Retrieval Embeddings

未翻訳のため中国語で表示しています。

AI ガイド

研究发现 Matryoshka 表征学习(MRL)检索嵌入的前缀长度与分类粒度天然对齐,并据此提出轻量探针方法 PEEL 来解码层次结构。PEEL 仅需概念词表而无需文档,通过序嵌入目标与最小生成有向树重构分类有向无环图(DAG)。该方法在两个 OLLM 基准上展现出高结构保真度,且无需目标边监督即可跨领域迁移。

出典:arXiv 自然语言处理 · arxiv.org