推理之前的知识:面向 LLM 酶分类的免训练诊断基准 EC-Reason-Bench
英文标题:Knowledge before Reasoning: EC-Reason-Bench, a Training-Free Diagnostic Benchmark for LLM Enzyme Classification
EC-Reason-Bench 是一个面向大语言模型(LLM)酶分类能力的免训练诊断基准。酶功能预测属于具有层级结构、且高度依赖知识的蛋白质功能分类任务。论文指出,现有基准揭示出一种异常现象:通用 LLM 往往能够正确判断较粗粒度的第一级分类,但在要求给出完整 EC 编号时,准确率会明显下降。这表明,模型在该任务中的知识获取与多层级推理能力仍需被更细致地诊断和评估。
打开原文相关 2.4 · 机会 1
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
BibTeX 格式化引用
English / 原文
BibTeX formatted citation
×