mirror of
https://gitcode.com/JianFeeeee/HomeAgent.git
synced 2026-10-15 12:15:16 +00:00
## 问题
assets/docs/{zh,en}/OVERVIEW.md 的媒体记忆段仍在描述 v1.2.0 **已整体拆除**的机制,
且两份文档的第一读者入口(README「文档」区、site/index.html 的「项目概览」链接)
都指向它。docs/git-branching.md §七.7 的反例表里恰好列着这一条,说明这是
「文档当事实后反向误导」的复发项。
同时修掉同一批里其余过期的结构性断言(均为逐条回源码核实后改)。
## 改动(四份文件,7 处)
OVERVIEW.md(zh/en 对称):
- 媒体记忆段:「引用计数 GC + 描述文本才是持久语义记忆 + [<mime> <digest>] 标记」
→ 「一等记忆块:块自带向量与指纹直接检索;无独立 GC / 无引用计数 / 无 keep-set;
删除块即删内容」,并显式注明旧机制已在 v1.2.0 拆除
- 依据:internal/memory/block.go("不携带 Layer、Owner 或 RefCount")、
ARCHITECTURE.md 自身的「不再有描述式索引」段、
graphmedia_test.go:24「描述文本、marker 反解…全部已废弃」、
inputunify_test.go:226「不往文本里贴 marker」
- LLM Provider 段:「三种实现 OpenAIProvider/OllamaProvider/LuaAdaptedProvider」
→ 「唯一实现 LuaAdaptedProvider」
- 依据:internal/agent/api/provider.go 只有 LuaAdaptedProvider 一个实现类型
- 适配器:「内置 8 个」→「内置 10 个」并补全名单(+kimicode/server)
- 依据:ls internal/lua/adapters/*.lua = 10;README.md 同一处早已写「10 个」,
两份文档此前自相矛盾
- 「支持 8 个 LLM 源自动降级」→「多源自动降级」
- 依据:源数量由部署配置,默认 seed 仅 deepseek 一个
(registry.go defaultSources 唯一条目)
ARCHITECTURE.md(zh/en 对称):
- 代码结构树 internal/skill/(**该目录不存在**)→ 移入 plugins/skillmgr/
- 依据:internal/plugins/skillmgr/ 存在,internal/skill/ 不存在(README 亦写 plugins/skillmgr)
- dynamic.go 描述「.so 动态加载器」→「加载通道分派(proc/lua/skill);.so 仅剩给明确报错」
- 依据:dynamic.go 的 tryDynamic 实际只分派 proc 与 lua,.so 命中只为给出「请用新版
hmapdev 重编」的明确错误(legacyCABIEntries 注释)
- 配置系统「8 个 LLM 源的 seeds」→「含 1 个 LLM 源 seed,其余源由部署时添加」
- 适配器数 8 → 10
- Provider 分层图(仅 en 侧滞后):删掉不存在的 OpenAIProvider/OllamaProvider
- 依据:zh 侧同一图早已写作「LuaAdaptedProvider (唯一实现)」,en 侧未跟上
## 验证
- 全量残留扫描:OpenAIProvider / OllamaProvider / 引用计数 GC /
Reference-counted GC / 8 个 LLM / 8 LLM / internal/skill / .so 动态加载
→ 在 assets/docs/ 与两份 README 中均为 **0 命中**(改前分别为 3/2/2/1/2/1/2/2)
- 每条新断言逐条回源码核实(adapters=10、provider struct=1、skillmgr 存在、
internal/skill 不存在、defaultSources=1、无 marker 写入代码)
- 纯文档改动:不涉及 .go,不改变构建产物(assets/docs 未被 //go:embed 打包,
仅被 site/index.html 以 GitHub 链接形式引用)
- 未新增版本号字面量,符合 §七.7 的「模型或用户会当作事实的文本不得写死版本号」
## 分支归属
按 docs/git-branching.md §七.7:面向使用者的开发者文档先落 release 线、
再 cherry-pick 合入 main(不 merge)。本次提交在 release/v1.3.x。
6.7 KiB
6.7 KiB
English | 中文
HomeAgent — 项目概览
这是什么
HomeAgent 是一个持续运行的个人智能 Agent 框架。
核心架构:一个长时间运行的内核进程(homed),通过插件系统接入各种 IO 通道(QQ、Web、命令行等)。内核负责 LLM 调用编排、记忆管理、知识检索;插件负责所有外部 IO——收发消息、执行文件操作、搜索网络等。
设计要点
核心域与应用域分离 — 内核(核心域)不执行任何 IO 操作,所有 IO 能力归属插件(应用域)。边界通过 PluginSDK 明确定义:
- 插件向内核注册工具(Tool),供 LLM 调用
- 插件挂入处理管道(Stage),在各阶段拦截/改写消息流
- 插件订阅/发布事件(Event),松耦合通信
- 插件通过 IO API 排队或打断投递输入
这一划分的意义在于职责边界清晰:内核专注于编排与记忆管理,插件负责具体 IO 实现,二者互不耦合。
三层记忆架构 — 通过分级存储策略管理 Agent 长周期运行中的信息留存:
- Context 层:内存中预训练词嵌入评分的事件窗口(StaticEmbedder 词向量 → CosineSimilarity,TF-IDF 回退),实时维护最近上下文,低相关性事件自动下沉到下一层
- Document 层:JSON 文件 + TF-IDF 向量索引的临时记忆,支持显式提交和隐式归档,冷数据蒸馏到 Graph
- Graph 层:SQLite 图数据库,持久化实体(entities)和关系(relations),BFS 遍历召回,蒸馏管道从对话中提取三元组
三层递进:上下文 → 冷归档 → 长期图记忆,构成从短期到持久的信息衰减与整合管道。
媒体记忆(v1.2.0 起:一等记忆块) — 图片/音频不是附属物,而是记忆的一等节点:
- 内容寻址存储(CAS):digest 寻址,元数据在 SQLite、blob 在磁盘(两级分桶),相同字节只存一份,
每次
Get重校 digest(磁盘损坏静默返回脏数据比报错更危险) - 媒体块直接参与向量检索:块携带自己的多模态向量与指纹,正文里不再有任何媒体标记
- 无独立 GC、无引用计数、无 keep-set:记忆块遵循单层不变量——Context → Document → Graph 是块的迁移,不是复制、也不靠引用保活;删除块即删内容
- v1.1.1 起贯通插件边界:插件可通过
InsertWithMedia/InjectInputMedia读写媒体, 模型可用memory_commit/doc_commit的media_digests参数关联媒体 - 旧机制已整体拆除:此前把视觉模型生成的描述写进正文、以
[<mime> <短digest>] <描述>标记 参与检索的描述式索引,以及media_refs引用计数,均已在 v1.2.0 删除——描述是模型生成的 二手信息,检索「别人转述的图片」不如检索图片自己的向量
它实际做了什么
代码位于项目仓库根目录,Go 语言实现。
内核 (internal/agent/core/):
eventloop.go— 消息循环(eventLoop),从 IO 层排队接收输入process.go/stages.go— 处理管道:记忆召回 → 人格注入 → LLM 调用 → 工具执行 → 输出发送,7 阶段钩子toolcall.go— 工具调度与执行context.go— 上下文管理(预训练词嵌入评分 StaticEmbedder → CosineSimilarity,TF-IDF 回退),自动剪枝低相关性事件- LLM 调用通过 Provider 接口抽象,多源自动降级
记忆系统 (internal/memory/):
- GraphDB (
graph.go) — SQLite,entities + relations 表,BFS 遍历 - Document Store (
document/document.go) — 临时记忆,JSON 文件 + TF-IDF 向量索引,消费即删 - Text Memory (
text/text.go) — 原始对话日志,JSONL 文件轮转 - Social Store (
social/social.go) — 人格特质 + 关系网,包装 GraphDB - Memory Indexer (
indexer.go) — 自动将 GraphDB 实体向量化,用户输入时召回注入 system prompt
知识库 (internal/knowledge/knowledge.go):
- 文件系统目录
knowledge/<name>/content.md - TF-IDF 向量搜索,独立于记忆系统的索引实例
- LLM 通过
knowledge_search/knowledge_create/knowledge_list三个工具操作
插件系统 (internal/plugin/):
- 内置插件:Go
init()自注册,编译进内核 - 外部插件(v1.0.0 起):编译为普通 Go 二进制
plugin.bin,内核 spawn 为独立子进程, 经 stdio JSON-RPC(控制面)+ 共享内存段(数据面)+ 事件环(通知面)通信;也支持 Lua 脚本插件 (C ABI 动态库通道-buildmode=c-shared已在 v1.0.0 整体删除) - PluginSDK (
internal/sdk/) 定义四通道:RegisterTool / RegisterStage / Subscribe / RegisterOutputChannel - 阶段钩子 7 个:on_input → pre_action → post_action → before_toolcall → after_toolcall → before_output → after_output
LLM Provider (internal/agent/api/provider.go):
- Provider 接口:Name / Chat / ChatStream
- 唯一实现
LuaAdaptedProvider:所有源都经 Lua 适配脚本做请求/响应变换; 适配器脚本位于internal/lua/adapters/,每类协议一个.lua脚本 - 内置 10 个适配器:deepseek / openai / anthropic / gemini / mistral / groq / github / kimicode / ollama / server
- 源(
core.llm.sources.<name>.*)由部署时配置,数量不固定,不随内置适配器数绑定
WebUI (internal/plugins/webui/):
- 嵌入式 SPA 仪表盘(
dashboard.html通过//go:embed打包) - REST API:状态查询、配置管理、记忆操作、知识库管理、插件管理
- 兼容 OpenAI API 格式的
/v1/chat/completions端点 - SSE 事件流
/api/v1/chat/events
ClawHub 适配器 (internal/plugins/clawhubadapter/):
- 统一加载 OC 插件(Node.js)、Python sidecar、JS sidecar、SKILL 四种插件类型
- RegistryDispatcher 模式:Tool/Provider/Channel/Stage 注册通知分发
- ClawHub 市场搜索与安装:
clawhubadapter_search/clawhubadapter_npm_install - 9 种 Provider 类型映射为 LLM 可用工具(图片生成、搜索、语音等)
- OC 通道自动注册为 IO 设备,支持文本/文件/图片/音频能力标志
项目状态
核心功能已可运行。插件系统和 SDK 已就绪,可独立开发外部插件。
- 内置插件:webui / cli / timer / cmd / mcp / agentcli / healthcheck / pluginmgr / clawhubadapter / files / cfgmgr
- 外部插件示例(homeagent-sdk 仓库
example/,含 Go 和 Lua 两种类型):qq / files / a2a / ai_image / bili / browser / calendar / editdoc / memo / music / ocr / rss / sanitizer / weather / luademo - 打包分发:
.hmap插件包格式,通过 WebUI 安装