1674252d81
把"逐轮盲写抽取"升级为 Mem0 式对账(方案见 memory_industry_analysis.md 落地节):
mcp-go:
- Profile 加 Importance(1~10, poignancy) + LastSeenAt(为 Generative Agents 读路径
Score=w1·Relevance+w2·Recency+w3·Importance 铺路)。
- Upsert 收 importance + 每次置 last_seen(印证);新增 Delete(软删,BaseModel.DeletedAt
已具备,失效不物删可审计)+ Touch;memory_upsert 透传 importance、新增 memory_delete 工具。
dispatcher:
- extractMemory → consolidateMemory:一次 LLM 调用同时做 抽取+对账,输出
[{op:ADD|UPDATE|DELETE|NOOP,key,value,importance}];ADD/UPDATE→upsert、DELETE→软删;
sanitizeOps 防幻删(DELETE 须命中已有)/夹 importance[1,10]/同key保末个/丢 NOOP。
- 攒批:每 3 轮(per-session 计数)才 consolidate 一次,省成本,对齐 ChatGPT 周期整理。
从根上解决 exact-key 盲写的记忆腐烂。
验证:parseOps/sanitizeOps/parseProfile 纯逻辑单测;store 集成测试(真 PG)覆盖
importance/last_seen 写入 + 软删(live 0 / 物理 1);dispatcher -race 全过。
(注:完整多轮 LLM consolidate 未做实跑,属构造性验证 + 沿用已证 pool.Chat 模式。)
P2 待做:读路径按 Score(Recency+Importance) 排序/衰减/截断 + 桌面端记忆面板。
Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>
172 lines
6.3 KiB
Go
172 lines
6.3 KiB
Go
// Package memory 是偏好记忆的存储后端(第 5 层 I/O 型工具持有)。
|
||
// 常驻画像存 Postgres,按 sundynix_ 前缀约定 + AutoMigrate 自动迁移。
|
||
package memory
|
||
|
||
import (
|
||
"context"
|
||
"fmt"
|
||
"log"
|
||
"sort"
|
||
"strings"
|
||
"time"
|
||
|
||
"github.com/bwmarrin/snowflake"
|
||
"gorm.io/driver/postgres"
|
||
"gorm.io/gorm"
|
||
"gorm.io/gorm/clause"
|
||
"gorm.io/gorm/logger"
|
||
)
|
||
|
||
// sfNode 是本服务的雪花 ID 生成器。node=2 与网关(node=1)区分,避免共享 PG 中 ID 冲突。
|
||
var sfNode *snowflake.Node
|
||
|
||
func init() { sfNode, _ = snowflake.NewNode(2) }
|
||
|
||
// NewID 生成字符串型雪花 ID(项目级 DB 规约:主键统一用它)。
|
||
func NewID() string { return sfNode.Generate().String() }
|
||
|
||
// BaseModel 是所有 DB 映射结构体的基础字段(项目级规约):
|
||
// 字符串雪花 ID 主键 + 创建/更新时间 + GORM 软删(带索引)。与网关 store.BaseModel 同规约。
|
||
type BaseModel struct {
|
||
ID string `gorm:"primaryKey;size:24" json:"id"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
UpdatedAt time.Time `json:"updated_at"`
|
||
DeletedAt gorm.DeletedAt `gorm:"index" json:"-"`
|
||
}
|
||
|
||
// BeforeCreate 在插入前补雪花 ID。
|
||
func (b *BaseModel) BeforeCreate(*gorm.DB) error {
|
||
if b.ID == "" {
|
||
b.ID = NewID()
|
||
}
|
||
return nil
|
||
}
|
||
|
||
// Profile 是用户常驻画像的一条 key/value 偏好(always-on memory)。
|
||
// 套用 BaseModel 规约:雪花 ID 主键;(user_id, key) 唯一索引 —— 同一用户同一键 upsert 覆盖。
|
||
type Profile struct {
|
||
BaseModel
|
||
UserID string `gorm:"column:user_id;size:64;uniqueIndex:idx_profile_uk"`
|
||
Key string `gorm:"size:64;uniqueIndex:idx_profile_uk"`
|
||
Value string `gorm:"type:text"`
|
||
Importance float64 `gorm:"column:importance"` // 1~10,consolidate 时 LLM 打分(poignancy)→ 读路径权重
|
||
LastSeenAt time.Time `gorm:"column:last_seen_at"` // 最近被印证时间 → Recency 衰减依据
|
||
}
|
||
|
||
// TableName 固定表名,遵守 sundynix_ 前缀约定。
|
||
func (Profile) TableName() string { return "sundynix_user_profile" }
|
||
|
||
// Store 封装画像读写。db 为 nil 表示降级(无 Postgres 时记忆功能空转,不阻断工具服务)。
|
||
type Store struct{ db *gorm.DB }
|
||
|
||
// Open 连接 Postgres 并自动迁移 sundynix_user_profile。连接失败不 fatal:返回降级实例。
|
||
func Open(dsn string) *Store {
|
||
db, err := gorm.Open(postgres.New(postgres.Config{DSN: dsn}), &gorm.Config{
|
||
Logger: logger.Default.LogMode(logger.Silent),
|
||
})
|
||
if err != nil {
|
||
log.Printf("[memory] postgres 不可用,记忆降级(召回为空): %v", err)
|
||
return &Store{}
|
||
}
|
||
// 一次性迁移:旧表用复合主键 (user_id,key) 无 id/时间戳,与雪花规约不兼容。
|
||
migrateLegacyProfile(db)
|
||
if err := db.AutoMigrate(&Profile{}); err != nil {
|
||
log.Printf("[memory] AutoMigrate 失败,记忆降级: %v", err)
|
||
return &Store{}
|
||
}
|
||
log.Println("[memory] postgres connected, migrated sundynix_user_profile (雪花 id + 软删 规约)")
|
||
return &Store{db: db}
|
||
}
|
||
|
||
// migrateLegacyProfile 检测旧 Profile 表(无 id 列)则备份偏好 → 重建为雪花规约 → 回灌。
|
||
func migrateLegacyProfile(db *gorm.DB) {
|
||
m := db.Migrator()
|
||
if !m.HasTable("sundynix_user_profile") {
|
||
return // 全新库,AutoMigrate 直接建新表
|
||
}
|
||
if m.HasColumn(&Profile{}, "id") {
|
||
return // 已是新规约
|
||
}
|
||
log.Println("[memory] 检测到旧 Profile 表(复合主键无 id),迁移到雪花规约(保留偏好)")
|
||
var saved []struct {
|
||
UserID string `gorm:"column:user_id"`
|
||
Key string `gorm:"column:key"`
|
||
Value string `gorm:"column:value"`
|
||
}
|
||
db.Raw(`SELECT user_id, "key", value FROM sundynix_user_profile`).Scan(&saved)
|
||
if err := m.DropTable("sundynix_user_profile"); err != nil {
|
||
log.Printf("[memory] 迁移 drop 旧表失败: %v", err)
|
||
return
|
||
}
|
||
if err := db.AutoMigrate(&Profile{}); err != nil {
|
||
log.Printf("[memory] 迁移建新表失败: %v", err)
|
||
return
|
||
}
|
||
for _, r := range saved {
|
||
_ = db.Create(&Profile{UserID: r.UserID, Key: r.Key, Value: r.Value}).Error
|
||
}
|
||
log.Printf("[memory] 已回灌 %d 条偏好(新雪花 id)", len(saved))
|
||
}
|
||
|
||
// Get 返回某用户的画像,渲染为可直接注入 prompt 的多行文本(按 key 排序,稳定输出)。
|
||
func (s *Store) Get(ctx context.Context, userID string) (string, error) {
|
||
if s.db == nil || userID == "" {
|
||
return "", nil
|
||
}
|
||
var rows []Profile
|
||
if err := s.db.WithContext(ctx).Where("user_id = ?", userID).Find(&rows).Error; err != nil {
|
||
return "", err
|
||
}
|
||
sort.Slice(rows, func(i, j int) bool { return rows[i].Key < rows[j].Key })
|
||
var b strings.Builder
|
||
for _, r := range rows {
|
||
fmt.Fprintf(&b, "- %s:%s\n", r.Key, r.Value)
|
||
}
|
||
return strings.TrimRight(b.String(), "\n"), nil
|
||
}
|
||
|
||
// Upsert 写入/更新一条画像偏好((user_id,key) 冲突即覆盖 value/importance,保留原 id;
|
||
// 置 last_seen=now 作"印证")。importance<=0 时不覆盖旧值(NOOP 印证场景只 bump 时间)。
|
||
func (s *Store) Upsert(ctx context.Context, userID, key, value string, importance float64) error {
|
||
if s.db == nil {
|
||
return fmt.Errorf("memory store disabled")
|
||
}
|
||
now := time.Now()
|
||
updates := map[string]any{"value": value, "updated_at": now, "last_seen_at": now}
|
||
if importance > 0 {
|
||
updates["importance"] = importance
|
||
}
|
||
return s.db.WithContext(ctx).Clauses(clause.OnConflict{
|
||
Columns: []clause.Column{{Name: "user_id"}, {Name: "key"}},
|
||
DoUpdates: clause.Assignments(updates),
|
||
}).Create(&Profile{UserID: userID, Key: key, Value: value, Importance: importance, LastSeenAt: now}).Error
|
||
}
|
||
|
||
// Touch 仅刷新某条偏好的 last_seen(NOOP 印证:被再次提及但内容不变,强化 Recency)。
|
||
func (s *Store) Touch(ctx context.Context, userID, key string) error {
|
||
if s.db == nil {
|
||
return nil
|
||
}
|
||
return s.db.WithContext(ctx).Model(&Profile{}).
|
||
Where("user_id = ? AND key = ?", userID, key).
|
||
Update("last_seen_at", time.Now()).Error
|
||
}
|
||
|
||
// Delete 软删一条偏好((user_id,key))—— 置 deleted_at,行保留可审计/恢复,正常查询自动过滤。
|
||
func (s *Store) Delete(ctx context.Context, userID, key string) error {
|
||
if s.db == nil {
|
||
return nil
|
||
}
|
||
return s.db.WithContext(ctx).Where("user_id = ? AND key = ?", userID, key).Delete(&Profile{}).Error
|
||
}
|
||
|
||
// Close 释放连接。
|
||
func (s *Store) Close() {
|
||
if s.db == nil {
|
||
return
|
||
}
|
||
if sqlDB, err := s.db.DB(); err == nil {
|
||
_ = sqlDB.Close()
|
||
}
|
||
}
|