跳到正文
原文
arXiv 自然语言处理· Mahdi Naser Moghadasi·· 10 小时前AI 评分46

现代文本嵌入模型的几何盲区:语义丰富却在度量上对情感盲目

Semantically Rich, Metrically Affect-Blind: A Geometric Blind Spot in Modern Text Embedders

AI 导读

研究发现现代文本嵌入模型存在几何盲区:线性探针可解析出高达 91.3% 的情感极性,但余弦相似度区分间隔仅 0.003-0.064,导致检索和 RAG 等度量系统对此盲目。该现象涵盖 Qwen3-Embedding-4B 等 11 款模型。研究提出的 SISE 通过训练 0.13M-0.69M 参数轻量头,将检索 MAP 最高提升 26.0 点,相关代码已开源。

来源:arXiv 自然语言处理 · arxiv.org