论文研究 arXiv cs.CL Thu, 17 Sep 2026 正文 thin 4 words

2026 年英语词义消歧:当数据标注成为最大瓶颈

英文标题:English Word Sense Disambiguation in 2026: When the Labels Become the Bottleneck

本论文指出,在英语全词词义消歧(WSD)任务中,核心瓶颈已从模型能力转向标注数据本身。前沿大语言模型(LLM)的准确率已经达到极高水平,以至于基准测试黄金标准(Gold Standard)中遗留的人工标注错误反而决定了评测榜单的最终排名。这一结论表明现有 WSD 评测基准的上限已受限于数据质量,行业亟需更严格的基准清洗和重构。
打开原文相关 2.4 · 机会 0
media2.1 KB media612 B media380 B media9.1 KB media32.7 KB media22.8 KB media24.2 KB media34.7 KB

中文

论文编号:arXiv:2609.17554v1
发布类型:new

摘要

在英语全词词义消歧(All-Words Word Sense Disambiguation, WSD)任务中,成为瓶颈的已不再是模型本身,而是数据标注标签:前沿大语言模型(LLM)的准确率已经足够高,以至于基准黄金标准(Gold Standard)中残留的标注错误反过来左右了基准评测的最终排名——在我们所评测的测试集上……

English / 原文

BibTeX formatted citation

×