MMOOC：用于多模态大语言模型脱离上下文评估的综合基准

英文标题：MMOOC: A Comprehensive Benchmark for Out-of-Context Evaluation in Multimodal Large Language Models

MMOOC 是一个面向多模态大语言模型（MLLM）脱离上下文（Out-of-Context，OOC）能力评估的综合基准。原文指出，MLLM 虽然已在多种视觉—语言任务中取得较强表现，但在上下文不完整或发生偏移时仍常常失效。可靠的 MLLM 应能够识别真正脱离上下文的问题，并作出拒答或适当响应。该基准有助于开发者评估和改进模型在非理想真实环境中的鲁棒性与安全性。

2.1 KB 612 B 380 B 9.1 KB 32.7 KB 22.8 KB 24.2 KB 34.7 KB