上下文窗口
模型在一次处理里能“看到”的文本范围。
把它讲透
上下文窗口到底是什么?
模型在一次处理里能“看到”的文本范围。
超过窗口的内容无法被同时考虑,影响长文档处理、对话记忆和 RAG 的资料数量。 AI 基础概念层,帮助你建立后续学习所需的共同语言。
先建立一个直觉
不要把上下文窗口当成孤立的缩写。把它放回 AI 系统里看:比较模型时,Context Window 常被用来描述一次能输入多长的文档和对话。 它描述的是系统中的一个具体环节,而不是完整解决方案本身。
理解它的三步
- 先看它描述什么
模型在一次处理里能“看到”的文本范围。
- 再看它为什么重要
超过窗口的内容无法被同时考虑,影响长文档处理、对话记忆和 RAG 的资料数量。
- 最后放进真实场景
比较模型时,Context Window 常被用来描述一次能输入多长的文档和对话。
关键机制
上下文窗口 不是单独运作的。理解下面三点,就能判断它在方案里应该承担什么角色。
- 01 — 核心定义
模型在一次处理里能“看到”的文本范围。
- 02 — 系统作用
超过窗口的内容无法被同时考虑,影响长文档处理、对话记忆和 RAG 的资料数量。
- 03 — 所属层次
AI 基础概念层,帮助你建立后续学习所需的共同语言。
它如何参与 AI 系统?
比较模型时,Context Window 常被用来描述一次能输入多长的文档和对话。 常一起出现的概念包括:大语言模型、词元、检索增强生成、提示词。先理解这些概念之间的分工,再决定是否需要使用 上下文窗口。
容易误解
上下文窗口 是完整方案吗?
通常不是。上下文窗口 解决的是 AI 系统中的特定环节;实际产品还需要数据、模型、流程和评估等其他部分配合。
什么时候该重点关注 上下文窗口?
比较模型时,Context Window 常被用来描述一次能输入多长的文档和对话。 当这个环节成为效果、成本、速度或可靠性的瓶颈时,才值得把它作为重点优化对象。
记住:上下文窗口 模型在一次处理里能“看到”的文本范围;先判断它在系统中的位置,再决定是否需要使用它。
它解决什么问题?
超过窗口的内容无法被同时考虑,影响长文档处理、对话记忆和 RAG 的资料数量。
它通常出现在哪?
比较模型时,Context Window 常被用来描述一次能输入多长的文档和对话。