2026 年英语词义消歧:当数据标注成为最大瓶颈
英文标题:English Word Sense Disambiguation in 2026: When the Labels Become the Bottleneck
本论文指出,在英语全词词义消歧(WSD)任务中,核心瓶颈已从模型能力转向标注数据本身。前沿大语言模型(LLM)的准确率已经达到极高水平,以至于基准测试黄金标准(Gold Standard)中遗留的人工标注错误反而决定了评测榜单的最终排名。这一结论表明现有 WSD 评测基准的上限已受限于数据质量,行业亟需更严格的基准清洗和重构。
打开原文相关 2.4 · 机会 0
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
论文编号:arXiv:2609.17554v1
发布类型:new
摘要
在英语全词词义消歧(All-Words Word Sense Disambiguation, WSD)任务中,成为瓶颈的已不再是模型本身,而是数据标注标签:前沿大语言模型(LLM)的准确率已经足够高,以至于基准黄金标准(Gold Standard)中残留的标注错误反过来左右了基准评测的最终排名——在我们所评测的测试集上……
English / 原文
BibTeX formatted citation
×