20260601
This commit is contained in:
43
concepts/sufficient-context-paradox.md
Normal file
43
concepts/sufficient-context-paradox.md
Normal file
@@ -0,0 +1,43 @@
|
||||
---
|
||||
title: "充分上下文悖论 (Sufficient Context Paradox)"
|
||||
created: 2026-05-21
|
||||
type: concept
|
||||
tags: ["lmm", "reasoning", "knowledge"]
|
||||
sources: ["[[when-large-multimodal-models-confront-evolving-knowledge]]"]
|
||||
---
|
||||
|
||||
# 充分上下文悖论 (Sufficient Context Paradox)
|
||||
|
||||
## 定义
|
||||
|
||||
充分上下文悖论是指:即使为 LMM 提供了**完整、准确回答所需的全部信息**(Sufficient Context),模型**仍然会产生错误答案**。
|
||||
|
||||
## MMEVOKE 上的证据
|
||||
|
||||
| 模型 | Sufficient Context CEM |
|
||||
|------|----------------------|
|
||||
| LLaVA-v1.5 | 56.78% |
|
||||
| Qwen-VL-Chat | **48.96%** |
|
||||
| Gemini-2.5-Pro | 72.15% |
|
||||
| GPT-4.1 | 75.02% |
|
||||
|
||||
即使是最强大的 GPT-4.1,仍有约 25% 的问题在"答案已在上下文中"时答错。
|
||||
|
||||
## 根本原因
|
||||
|
||||
这一现象与直觉相悖——人们通常认为"提供足够信息就能得到正确答案"。实验表明,问题不在**检索能力**,而在**推理和利用能力**:
|
||||
|
||||
- LMM 无法有效**提取**上下文中的关键信息
|
||||
- LMM 无法将上下文知识与视觉输入**对齐**
|
||||
- LMM 缺乏对进化知识的**深层语义理解**
|
||||
|
||||
## 启示
|
||||
|
||||
1. 仅靠 RAG 不够——需要提升模型的**知识利用**能力
|
||||
2. 知识注入应关注"理解"而非"记忆"
|
||||
3. 这对实际 RAG 系统的设计有直接指导意义
|
||||
|
||||
## 参见
|
||||
|
||||
- [[multimodal-rag|多模态RAG]]
|
||||
- [[knowledge-adaptation|知识适应]]
|
||||
Reference in New Issue
Block a user