主题
Memory
要点
- 多轮对话不是自动成立的,模型本身没有记忆,每次调用默认都是独立的。
- 最原始的写法是手动维护消息数组,每次都把历史一起传进去,但这种方式难以接入 LCEL 链。
- 对 LCEL 链,最实用的选择是
RunnableWithMessageHistory。 - 对 Agent,更顺手的选择是
createAgent + checkpointer + thread_id。 - 这篇讲的都是短期会话记忆,长期记忆或持久化存储在下一篇展开。
1. 背景:多轮对话不是自动成立的
前面几篇基本都还是「单轮」视角:用户发一条消息,链路跑完,拿到一个结果。但 Agent 真正难的地方,不在单轮,而在多轮。
用户很少会把一件事一次说完。更常见的是:
- 第一轮只说「这个接口偶尔会返回 500」。
- 第二轮补一句「主要发生在支付流程里」。
- 第三轮又说「我怀疑是数据库连接池的问题」。
如果模型每次只看到当前这句话,它就不会知道:
- 这几句话其实在说同一件事。
- 「这个接口」指的是前面提到的接口。
- 排查方向是在逐步收敛,不是突然冒出来的。
问题不在模型「笨」,而在于模型本身没有记忆。每次调用默认都是独立的。要想让多轮对话接得上,就必须把历史重新带回去。
2. 最直接的办法:手动带历史
最原始的写法,就是自己维护一个消息数组,每次都把历史一起传进去:
typescript
import { ChatOpenAI } from "@langchain/openai";
const model = new ChatOpenAI({
model: "deepseek-chat",
apiKey: process.env.MODEL_API_KEY,
configuration: {
baseURL: process.env.MODEL_BASE_URL ?? "https://api.deepseek.com/v1",
},
});
const history = [
{ role: "user", content: "这个接口偶尔会返回 500" },
{ role: "assistant", content: "主要发生在哪个流程里?" },
];
const response = await model.invoke([
...history,
{ role: "user", content: "主要发生在支付流程里" },
]);
console.log(response.text);
history.push({ role: "user", content: "主要发生在支付流程里" });
history.push(response);这个方案能跑,但很快会出现几个问题:
- 每次都要自己拼历史。
- 每次都要自己写回新消息。
- 历史越来越长,token 会一直涨。
- 历史管理完全在链外面,后面很难继续接 LCEL。
所以真正的问题不是「能不能把历史传进去」,而是能不能让历史读写也进入同一条链。
3. 把历史读写放回链里:RunnableWithMessageHistory
如果你现在写的是 LCEL 链,这里直接用 RunnableWithMessageHistory。它做的事情很明确:
- 调用前先读取这段会话的历史消息。
- 把历史消息自动注入
MessagesPlaceholder。 - 调用结束后,再把本轮输入输出写回去。
typescript
import {
ChatPromptTemplate,
MessagesPlaceholder,
} from "@langchain/core/prompts";
import { ChatOpenAI } from "@langchain/openai";
import { RunnableWithMessageHistory } from "@langchain/core/runnables";
import { ChatMessageHistory } from "@langchain/classic/stores/message/in_memory";
const model = new ChatOpenAI({
model: "deepseek-chat",
apiKey: process.env.MODEL_API_KEY,
configuration: {
baseURL: process.env.MODEL_BASE_URL ?? "https://api.deepseek.com/v1",
},
});
const prompt = ChatPromptTemplate.fromMessages([
["system", "你是一个技术问题排查助手。"],
new MessagesPlaceholder({ variableName: "history" }),
["user", "{input}"],
]);
const chain = prompt.pipe(model);
// 这里用内存 Map 模拟会话存储。服务一重启,数据就会丢。
const store = new Map<string, ChatMessageHistory>();
function getMessageHistory(sessionId: string) {
if (!store.has(sessionId)) {
store.set(sessionId, new ChatMessageHistory());
}
return store.get(sessionId)!;
}
// 这层把「读历史」和「写历史」都包进 Runnable 体系里。
const chainWithHistory = new RunnableWithMessageHistory({
runnable: chain,
getMessageHistory,
inputMessagesKey: "input",
historyMessagesKey: "history",
});调用时只要给同一个 sessionId,历史就会接上:
typescript
await chainWithHistory.invoke(
{ input: "这个接口偶尔会返回 500" },
{
configurable: {
sessionId: "session-001",
},
},
);
await chainWithHistory.invoke(
{ input: "主要发生在支付流程里" },
{
configurable: {
sessionId: "session-001",
},
},
);这里最适合新手先记住的是:
sessionId决定这是哪一段对话。MessagesPlaceholder决定历史插到 Prompt 的哪个位置。RunnableWithMessageHistory负责自动读写。
4. 把它接回 Agent:checkpointer + thread_id
如果继续往 Agent 这边写,短期记忆就直接接到 Agent 里,不再单独管理 RunnableWithMessageHistory。核心是两样东西:
checkpointerthread_id
可以先把它理解成一句话:同一个 thread_id 代表同一段会话,checkpointer 负责把这段会话的状态存下来。
typescript
import { createAgent, summarizationMiddleware } from "langchain";
import { MemorySaver } from "@langchain/langgraph";
// checkpointer 负责保存这条会话线程里的短期状态。
const checkpointer = new MemorySaver();
const agent = createAgent({
model: "gpt-4.1",
tools: [],
// 对话变长以后,用 middleware 帮你做摘要压缩。
middleware: [
summarizationMiddleware({
model: "gpt-4.1-mini",
trigger: { tokens: 4000 },
keep: { messages: 20 },
}),
],
checkpointer,
});
const config = {
configurable: {
// 同一个 thread_id,就会读到同一段短期记忆。
thread_id: "agent-user-001",
},
};
await agent.invoke(
{
messages: [{ role: "user", content: "这个接口偶尔会返回 500" }],
},
config,
);
await agent.invoke(
{
messages: [{ role: "user", content: "主要发生在支付流程里" }],
},
config,
);
const result = await agent.invoke(
{
messages: [{ role: "user", content: "你还记得我们刚才在排查什么问题吗?" }],
},
config,
);
console.log(result.messages.at(-1)?.content);这段代码里可以分成三层理解:
checkpointer负责存线程状态。thread_id负责标识这是哪段会话。summarizationMiddleware负责在对话很长时压缩历史。
这样写以后,短期记忆已经不再是 classic Memory 那套类自己管,而是进入了 Agent 的线程状态层。
5. 什么时候用哪一种
如果你现在写的是 LCEL 链,本篇最实用的选择通常是 RunnableWithMessageHistory。如果你现在写的是 Agent,更顺手的选择通常是 createAgent + checkpointer + thread_id。
可以直接这样记:
- LCEL 链看
RunnableWithMessageHistory。 - Agent 看
checkpointer。
这两者解决的是同一类问题:怎么把前面的对话重新带回这一轮。只是接入位置不一样。
6. classic Memory 放在哪里理解
你前面如果看过旧教程,大概率会见过这些类:
BufferMemoryConversationBufferWindowMemoryConversationSummaryMemoryConversationSummaryBufferMemoryConversationChain
这些内容今天仍然有理解价值,但更适合放在「兼容层 / 旧资料对照」这个位置,而不是正文入口。它们分别代表的策略很容易概括:
BufferMemory:全量保留。ConversationBufferWindowMemory:只留最近几轮。ConversationSummaryMemory:把早期历史压成摘要。ConversationSummaryBufferMemory:最近保留原文,更早压成摘要。
如果你是在读旧文章、旧项目代码,这几个名字仍然值得认识。但如果你在写新代码,优先顺序应该反过来:
- 先学
RunnableWithMessageHistory。 - 再学
createAgent + checkpointer。 - 最后再把 classic Memory 当成旧体系补充理解。
7. 短期记忆与长期记忆的边界
这篇讲的,其实都还是「短期会话记忆」。它解决的是:当前这段聊天怎么接住上下文。它不解决的是:
- 三个月前提过的项目背景。
- 上周定下的技术决策。
- 用户长期偏好的交互方式。
这些已经不是短期会话记忆,而是长期记忆或持久化存储的问题。下一篇再接着讲这一层。