5.OpenClaw源码解析_提示词8层装载

上节课我们学习了路由的概念,通过路由表和binding规则,可以让不同的agent服务不同的租户,并通过tier进行逐级匹配, 今天我们来学习OpenClaw智能层的概念,其做法有如下:

  1. 初始化时加载记忆:通过8次提示词加载丰富人格
  2. 加载两部分记忆,分别是MEMORY.md长期记忆和memory/daily/xxx.jsonl每日记忆
  3. 每次用户提问时,都加载两部分记忆,然后先进行tf-idf+余弦相似度+关键词搜索的混合搜索机制,并对结果进行时间衰减和MMR重排序,最终将相关且多样化的记忆碎片注入系统提示词。

1. 整体背景

1.1. 前期8层记忆加载(对应BootstrapLoader)

前期8个文件分别对应如下:

文件 身份
SOUL.md 人格
IDENTITY.md 身份
TOOLS.md 工具
USER.md 用户信息
HEARTBEAT.nd 心跳配置
BOOTSTRAP.md 引导
AGENTS.md 多代理
MEMORY.md 静态长期记忆

这些文件在启动时只加载一起,后续将会组装成系统提示词发送给大模型

1.2. 记忆组装

记忆组装发生在build_system_prompt这个函数中,共分为两层记忆,一个是MEMORY.md的静态内容,另一个来自__auto_recall混合搜索的记忆

1.3. 混合搜索和排序

混合搜索策略在MemoryStore.hybrid_search中。 在该函数中,首先会load所有的chunk, 然后分别经过:

  1. 关键词搜索:使用tf-idf进行搜索,得到score
  2. 向量检索: 使用余弦相似度比较向量相似度
  3. 加权:vector_weights * 0.7, keywords_weights * 0.3
  4. 计算时间衰减:从记忆块的path中取时间,然后计算与当前时间的age_days, 应用指数衰减:score *= exp(-decap_rate * age_days), decay_rate=0.01, 越近的记忆得分衰减越少,越旧的记忆得分越低
  5. MMR:

目的是在保证相关性的同时增加结果的多样性,避免返回内容相似的记忆。

输入时经过时间衰减后的结果列表,每个结果包含score相关性分数 ,和chunk文本。

算法步骤: 首先对每条结果进行分词,然后初始化已选择集合为空。

重复如下步骤: 对于每个未选中的结果i,计算MMR:

其中 similarity 使用 Jaccard 相似度(基于分词集合的交并比),选择 MMR 最大的结果加入已选集合

MMR计算代码如下:

ini 复制代码
@staticmethod
def _mmr_rerank(results, lambda_param=0.7):
    tokenized = [MemoryStore._tokenize(r["chunk"]["text"]) for r in results]
    selected = []
    remaining = list(range(len(results)))
    reranked = []
    while remaining:
        best_idx = -1
        best_mmr = float("-inf")
        for idx in remaining:
            relevance = results[idx]["score"]
            max_sim = 0.0
            for sel_idx in selected:
                sim = MemoryStore._jaccard_similarity(tokenized[idx], tokenized[sel_idx])
                if sim > max_sim:
                    max_sim = sim
            mmr = lambda_param * relevance - (1 - lambda_param) * max_sim
            if mmr > best_mmr:
                best_mmr = mmr
                best_idx = idx
        selected.append(best_idx)
        remaining.remove(best_idx)
        reranked.append(results[best_idx])
    return reranked

2. 流程设计

相关推荐
深蓝AI29 分钟前
美团 LongCat-2.5 拆解:1.6T 参数只激活 3%,1M 上下文卖 0.3 美元,Agent 模型的账变了
人工智能·llm
小和尚同志5 小时前
54.6k star 的 Multica: 集多 Agent 和看板于一体的 AI 平台
人工智能·aigc·three.js
hpoenixf6 小时前
一个 null 如何让 Agent 工具调用失败:流式协议兼容性实战
agent
一枕槐安4876 小时前
少样本提示(Few-shot)在业务场景的落地实践
大数据·人工智能·意图分类·mmr多样性·knn检索·动态示例选择
王中阳Go7 小时前
后端转 Agent 岗面试怎么答:8 个高频问题与应答口径
人工智能·后端·python·大语言模型
hpoenixf7 小时前
Agent 的行动提醒:从生成建议到真正送达模型
agent
hpoenixf7 小时前
Agent 有这个工具,模型为什么还是看不到?——工具表面的演进
agent
海宇AI7 小时前
零信任架构实战:基于海宇个人风险报告构建自动化分期商城信用额度初审网关
运维·人工智能·架构·自动化
hpoenixf7 小时前
一份研究报告,为什么需要先变成「资产」?
agent
tellmewhoisi7 小时前
深度学习32:卷积神经网络:卷积层(卷积运算,填充,步幅)
人工智能·深度学习·cnn