灵光一闪想到一个让 AI 在有限上下文里实现像人类一样无限记忆的能力 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
这是一个专门讨论 idea 的地方。

每个人的时间,资源是有限的,有的时候你或许能够想到很多 idea,但是由于现实的限制,却并不是所有的 idea 都能够成为现实。

那这个时候,不妨可以把那些 idea 分享出来,启发别人。
chairuosen
V2EX    奇思妙想

灵光一闪想到一个让 AI 在有限上下文里实现像人类一样无限记忆的能力

  •  
  •   chairuosen 165 天前 2801 次点击
    这是一个创建于 165 天前的主题,其中的信息可能已经有所发展或是发生改变。

    不知道你们有没有玩过这个玩具

    N 个齿轮串联,第 1 个齿轮转 10 圈第二个齿轮转 1 圈,以此类推第 N 个齿轮宇宙毁灭也不会转一圈

    定义一个二维数组存记忆[[],...]每个数组定义一个最大长度 L ,AI 经历的每个记忆(问答)先记录到第 0 个数组,记满 L 后就把其中的后一部分 M 个拿出来让 AI 自己总结成一条记忆 push 到下一个记忆数组里,以此类推。

    这样用有限的二维数组就可以近乎于无穷的记录记忆,只是像人类一样,越久的记忆会丢失细节或者遗忘。

    可能还需要一个一维数组存储重要时刻,像结婚,大学毕业等场景可能一生都记忆犹新。在 AI 总结多条记忆时,判断其中是否有重要时刻单独提出来,和已存在的重要时刻数组成员比较大小后塞入并排序,并 pop 出最不重要的重要时刻。

    12 条回复    2025-07-24 21:29:17 +08:00
    wysnxzm
        1
    wysnxzm  
       165 天前
    你是否听说过 古戈尔齿轮
    cxsz
        2
    cxsz  
       164 天前
    这不就是 GPT 的记忆功能么 https://help.openai.com/en/articles/8590148-memory-faq
    chairuosen
        3
    chairuosen  
    OP
       164 天前
    @cxsz 文章里没提到实现方式。它也是这么实现的么?
    dongdong12345
        4
    dongdong12345  
       164 天前
    可以从用户发送的内容中提取出记忆存储到向量库,需要用到记忆时去向量库相似度查询就行了
    chairuosen
        5
    chairuosen  
    OP
       164 天前
    @dongdong12345 向量库的问题是要先知道要查询什么,寻找特定记忆片段这个过程可以用向量库来替代,但是不知道查询什么内容的时候,向量库就没用了。比如你问 A ,向量库能搜到 A 的知识补充到上下文,但是有记忆的 AI 可能会关心下你昨天的 B 进行到什么情况了。B 跟 A 毫无关系。用向量匹配不了。
    teenthsch
        6
    teenthsch  
       164 天前
    这个 m 怎么定义的
    chairuosen
        7
    chairuosen  
    OP
       164 天前
    @teenthsch 调呗。。多试试,看 l 和 m 还有 n 之间怎么配效果好
    chairuosen
        8
    chairuosen  
    OP
       164 天前
    @chairuosen M 的定义就是每次 L 满了后,拿多少出来从数组[0]放到数组[1],不能全拿了,也不能只拿一部分,我感觉在 L/2 到两三个之间。 太小了压缩比不高,太大了数组[0]的短期记忆就容易出现波动太大的情况。
    chairuosen
        9
    chairuosen  
    OP
       164 天前
    @chairuosen 笔误:也不能只拿太小的一部分
    yutou527
        10
    yutou527  
       164 天前
    "记满 L 后就把其中的后一部分 M 个拿出来让 AI 自己总结成一条记忆 push 到下一个记忆数组里"
    这总结过程是有损的吧,能无损还原?
    chairuosen
        11
    chairuosen  
    OP
       164 天前
    @yutou527 肯定是有损的,人类也是有损的,记个大概就行
    H0TSp1RnG
        12
    H0TSp1RnG  
       78 天前
    For your information, 人类没有无限记忆
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2687 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 15:06 PVG 23:06 LAX 08:06 JFK 11:06
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86