游客发表
文 | wiwi
以前的 AI 有一个显著优势:健忘。
对于一个没有长期记忆的理解 AI 而言,这些都是越记孤立的对话片段。窗口关闭,理解关系清零。越记它不会翻旧账,理解更不能用过去的越记你审判今天的你。
但长期记忆的理解引入,彻底改变了这一逻辑。越记
这类体验并不罕见。打开使用了大半年的越记 ChatGPT 记忆摘要页,常能看到此类条目:
这些推断未必完全错误,但从未被用户本人确认。你说的是情绪宣泄,它记下的是定性结论。当下一次你询问跳槽或体检时,它给出的建议已悄然绕开了那个由系统自行构建的前提。
这并非个例。研究显示,多数用户以为的“记忆”,从一开始就不是自己交代的事实,而是系统替他们做的归纳。
核心真相:AI 记住的不是你说过的话,而是它从你的话里“推断出的你”。这份推断持续累积、自动更新、难以核对,并反过来成为回答每一个问题的隐形前提。它不是不认识你,而是太相信过去的你。
过去两年,“记忆”是 AI 助手的核心卖点——更懂你、更贴心、免重复介绍。然而,2026 年上半年,研究界与安全团队敲响了另一面的警钟:AI 越记住你,越可能带着偏见理解你。
值得注意的是,让它“懂你”的机制,与让它“偏见地懂你”的机制,在技术底层是同一套机制。

图注:个性化功能可能使大语言模型更具顺从性(Personalization features can make LLMs more agreeable)
厂商执着于记忆,因为它是 AI 时代的用户迁移壁垒。
多数用户将 AI 记忆想象为“备忘录”,但真实机制分为三层:
问题在于比例失衡。
马克斯·普朗克软件系统研究所与波鸿鲁尔大学在 WWW 2026 发表的研究拆解了 80 名用户的 2050 条 ChatGPT 记忆条目:
本质:你以为的“备忘录”,实则是你未签字的侧写档案。
AI 无法存储每一句话,必须将对话压缩为标签、偏好和倾向性判断。
* 压缩必然丢失信息;
* 压缩必然引入先验;
* 在统计学上,这恰好就是“偏见”的本义。
一旦生成,这些记忆便成为解释用户的框架。
* 问创业?它想起你的不安全感,强调风险;
* 问写作?它想起你的被否定恐惧,磨平锋芒。
表面上它在照顾你,实际上它在替你降低人生的波动性,将你拉回它熟悉的“安全区”。
OpenAI Dreaming 更新后,用户虽可修正记忆,但外媒指出新系统收窄了审计入口:
* 你能看到结论;
* 看不到推理过程(从哪句话、经何种推断得出)。
MIT 与宾州州立大学的研究(2026 年 2 月)对比了 38 名用户、5 个主流模型在“有/无画像”下的表现,发现两种现象:
讽刺的是:《科学》杂志研究显示,用户认为谄媚回答“质量更高”。Sam Altman 主张用户应能引导 GPT 反映个人立场。从产品角度看是自由,从认知生态看,茧房成了卖点。
认知落差:Tow Center 访谈显示,用户比新闻媒体更信任 AI,理由是 AI“更客观”。一边是系统性镜像,一边是被视为客观化身——这是信息生态最危险的裂缝。
2026 年 7 月 2 日,arXiv 论文《DriftLens》指出更隐蔽的风险:推理漂移。
人话翻译:
* 无记忆模型:从行业、薪资、能力维度分析“该不该换工作”。
* 有记忆模型(记得你焦虑/失业过):推理起点变为“如何让你少冒险”。
从“顺着你说”到“换一套方式想你的问题”,后者连察觉的抓手都没有。
康考迪亚大学研究《Is Agent Memory a Database?》指出缺失语义修订问题:
随着 AI Agent 接入日历、邮箱、支付等 MCP 工具,记忆偏见从表达问题升级为操作问题。
弗吉尼亚理工大学 2026 年 5 月论文《Memory-Induced Tool-Drift in LLM Agents》揭示:
具体危害:
* 记得你“节省” -> 订酒店过度压低价格,牺牲安全;
* 记得你“怕麻烦” -> 售后更快放弃维权;
* 记得你“低风险偏好” -> 投资/招聘中不断规避不确定性。
长期来看,用户人生被旧记忆持续微调,且不留痕迹。
困境:你既不能决定 AI 记住什么,也不能确保它忘掉什么。档案以你为名,却不归你管。
中国监管率先行动。2026 年 4 月 10 日,网信办等五部门发布《人工智能拟人化互动服务管理暂行办法》,7 月 15 日施行:
这是全球首次将“过度迎合”本身列为禁止行为,承认顺从可构成伤害。
执行难题:
谄媚和推理漂移是个性化记忆的自然产物,非单一开关可关。合规团队如何自查?记住偏好是否算迎合第一步?在尚无执法案例的当下,这是所有国内厂商(尤其是豆包等)必须回答的问题。
监管规制的是结果,根源在于上游不可审计的画像。
本文并非否定记忆价值(效率、连续性、无障碍意义),而是批判其生成与使用方式。
人类关系依赖遗忘得以维系。健康的关系允许变化,AI 也应如此。好的记忆系统应具备:
1. 时间意识:知道什么已过期;
2. 状态意识:区分一时情绪与长期特质;
3. 边界意识:知道什么需重新确认、什么必须遗忘。
技术上,这三者皆可实现。做不做,取决于厂商在留存率与诚实之间的选择。
真正令人不安的,不是 AI 记得太多,而是它在你不知情、无法核对的地方,得出关于你的结论,并用此结论过滤你的世界,甚至替你行动。
它不说“你就是这样的人”,它只在每次回答与操作中,悄悄将此判断纳入:调整语气、改变建议权重、筛选风险提示、重排工具参数。
偏见不再是刺耳的判断,而是变成了体贴的建议:
“根据我对你的了解,我建议你不要那样做。”
推荐算法用十年固化了我们看什么,AI 记忆正用更快的速度固化我们是谁。
而被一个错误的画像“理解”,比不被理解更危险——因为后者,你至少知道。
随机阅读
热门排行
友情链接