LLM 何时真正有帮助？评估 LLM 作为数据质量标注器的表现

英文标题：When Do LLMs Actually Help? Evaluating LLMs as Data Quality Annotators

该研究考察大语言模型（LLM）能否稳定地用于自动发现数据质量问题。研究以电商领域的两项任务为例：实体匹配和品牌错误标注检测。作者指出，尽管 LLM 已被越来越多地用于数据质量检查，但其判断结果的一致性仍缺乏充分了解。该工作对开发者评估 LLM 在数据清洗、标注和质量控制流程中的可靠性具有参考意义。

2.1 KB 640 B 612 B 380 B 9.1 KB 32.7 KB 22.8 KB 24.2 KB 34.7 KB