网易首页 > 网易号 > 正文 申请入驻

问项目进度,它给我一张买菜清单

0
分享至

周六下午,我正调试自己的 Qdrant 配置,心里还挺得意——一套自托管的 AI 记忆系统,跑在 NAS 上,不花一分钱 API 费用。我随口问了一句:"我最近那些项目跟进是什么状态?"


它返回了一条笔记:要买鸡蛋、希腊酸奶,还有我太太指定那个牌子的燕麦奶。

不是幻觉,不是 bug。这是一次数学上完美无缺的余弦相似度匹配。

那张买菜清单里用了"事项""待办""需要确认""跟进"这些词——和一条项目状态笔记的词汇指纹一模一样。嵌入模型找到了模式,找到了它在向量空间里的最近邻,然后满怀信心地把结果交给了我。

按它唯一知道的衡量标准,它是对的。那一刻,幻觉破了。

先说清楚我拿它干什么

在建这套东西之前,我的目标很具体:上下文初始化。每次新会话开始,第一件事就是根据我当天在忙什么,去知识库里查相关背景。这一次查询大概 5 秒,替代的是我花 10 分钟重新解释项目历史、做过的决定、试过什么、放弃了什么。

系统构成是这样的:

  • Qdrant 跑在 NAS 上
  • 嵌入模型用 nomic-embed-text,本地跑在 Ollama 上,无 API 调用、无成本
  • 两个集合:个人知识库(数千个点,存会话笔记、任务结果、项目摘要),以及一个研究档案库
  • 运行成本:硬件本来就在跑,只多一点点电费

集合是自动填充的。每次会话结束后,后台脚本会从会话记录里抽出关键事实和决定,整理成结构化笔记,生成嵌入,再写入 Qdrant。没有手动整理这一步。整理发生在更上游——会话进行时,我明确说清楚自己决定了什么、为什么。

垃圾进,买菜清单出。结构化的好笔记进,有用的记忆出。

它不记得,它只是检索

嵌入模型把文本转成一串数字——一个向量,意思相近的文本会产生相近的向量。向量搜索找出离你的查询向量最近的已存向量。就这样。这是一个最近邻问题,不是记忆。系统对你的工作任务一无所知,就像谷歌并不"记得"你的搜索历史——它只是找出和你所问在数学上最相似的东西。

余弦相似度衡量的是两个向量之间的夹角,也就是它们在高维空间里的方向有多接近。它非常擅长捕捉语义相似性。它也会在你问项目跟进时,信心十足地返回一张买菜清单——只要这两样东西恰好住在模型概念空间里的相邻位置。

相似不等于相关。这个区别会击垮那些没考虑它的系统。

那次事故的检索结果排名是这样的:买菜清单 0.847,求职申请 0.831,智能体记忆会话笔记 0.802,工作流筛选配置 0.789。买菜清单赢了。

没人告诉你的分块问题

索引文档做向量搜索前,你得先把它切成块。块的大小是你将做出的最重要的决定之一——而网上几乎没人告诉你该怎么选。

太小:一个 64 token 的块可能只有一句话,"项目暂停了"。检索出来几乎没意义——因为什么暂停?哪个项目?谁决定的?

太大:一个 2048 token 的块塞了 15 个不同主题。嵌入试图表示全部,结果哪个都没表示好。检索信号被稀释在塞进去的所有东西里。

我实测出来的数字:事实性笔记和项目摘要用 256 到 512 token,重叠 10%;对话类内容用 512 到 1024 token。重叠不是可选项——它防止相关上下文被切在块边界上丢掉。我的知识库集合在拿真实查询反复测试后,定在 384 token、15% 重叠。你的内容类型会得出不同的数字。拿你自己的真实数据测,别用合成样本。没有通用答案,谁给你一个通用答案,谁就没测过。

修法:先过滤,再搜索

买菜清单事故有一个明确的根因:知识库是一个扁平的单一命名空间。个人提醒、买菜清单、基础设施决策、项目笔记全住在同一个向量空间里,用同一个相似度指标竞争。一张用了任务追踪语言的买菜清单,在查询时和工作笔记无法区分。

修法是给每个存储点加一个 domain 元数据字段——取值比如 jobs、infra、personal、research——然后重写所有查询,在跑向量搜索之前先按 domain 过滤。混合检索:先元数据过滤,再在过滤后的子集里做向量搜索。误报率降到了接近零。

改之前:查询"最近项目任务状态",在全集合上按余弦相似度排名,买菜清单靠词汇重叠胜出。

改之后:查询先过滤到 domain = "jobs",再在这个子集里做向量搜索。候选池里只有工作相关笔记,买菜清单根本不会被评估。正确结果每次都在前三。

教训不是向量搜索有缺陷,而是跨不相关领域的语义相似度,本身就是个错误的检索问题。给你的数据分命名空间。先过滤,再搜索。当向量相似度在一个连贯的领域上运作,而不是在一锅你写过的一切的大杂烩里运作时,它干得很好。

Qdrant 是优秀的软件。我 NAS 上这套自托管配置运行可靠,不额外花钱,而且让每次会话都更高效——它消掉了那种每次对话都悄悄吃掉 10 到 15 分钟的上下文重建开销。

但那张买菜清单是这个项目里发生过的最有用的事。它在我把生产管线建在一个错误假设上之前,先击碎了我的心智模型——那个假设是:向量相似度等于相关性。加一个 domain 字段。搜索前先过滤。存储时写具体、写结构化。做到这三件事,记忆幻觉就足够好用,好用到真的有用。

不做,你就会收到买菜清单。事后想想,能早早抓到一个根本性的设计缺陷,这结局还挺不错。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
民调:若勒庞赢得总统大选,近半数居住在法国的穆斯林会考虑离开

民调:若勒庞赢得总统大选,近半数居住在法国的穆斯林会考虑离开

像梦一场a
2026-10-17 10:22:56
卢秀燕出手挺蒋万安,确定接掌竞总主委,明天公布干部名单

卢秀燕出手挺蒋万安,确定接掌竞总主委,明天公布干部名单

台海新时光
2026-10-18 11:10:05
果然傍大款这碗饭,也不是谁都能吃的,网友:这泼天的富贵我接不住

果然傍大款这碗饭,也不是谁都能吃的,网友:这泼天的富贵我接不住

水泥土的搞笑
2026-10-10 00:32:42
一旦开战,中国若发射一枚东风41,得付出多大的代价?

一旦开战,中国若发射一枚东风41,得付出多大的代价?

墨策讲历史
2026-10-05 20:39:53
鲁比奥:白宫无人下令降低乌克兰接入“星链”的速度

鲁比奥:白宫无人下令降低乌克兰接入“星链”的速度

环球网资讯
2026-10-18 09:00:06
唐艺的腰已经撑不起高腰裤了,挣钱面前,身材只能往后排

唐艺的腰已经撑不起高腰裤了,挣钱面前,身材只能往后排

乡野小珥
2026-10-14 07:40:39
一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

梦在深巷aqa
2026-10-17 05:48:42
13岁女孩被约到酒店喝酒,两男子先后和她发生关系,完事还把她手机抢走卖了5300

13岁女孩被约到酒店喝酒,两男子先后和她发生关系,完事还把她手机抢走卖了5300

一丝不苟的法律人
2026-10-12 11:41:38
还是被裁了!波兰冠军前锋,要跟杨瀚森说再见!

还是被裁了!波兰冠军前锋,要跟杨瀚森说再见!

德译洋洋
2026-10-18 11:10:36
画面不堪入目,地下人奶交易乱象,成年人躺进怀里吃奶的灰色黑产

画面不堪入目,地下人奶交易乱象,成年人躺进怀里吃奶的灰色黑产

易玄
2026-09-12 10:24:46
毛主席当年曾说:中国赶上美国,至少要75年,也就是15个五年计划

毛主席当年曾说:中国赶上美国,至少要75年,也就是15个五年计划

一曲一场談
2026-10-02 23:16:36
冯远征感叹:“我招不到一米五几,一米六几的女演员,都一米七几了”

冯远征感叹:“我招不到一米五几,一米六几的女演员,都一米七几了”

韩小娱
2026-10-17 07:40:50
印度专家被气晕:中国用人民币买油93美元,印度用美元买121美元,说好的大国呢?

印度专家被气晕:中国用人民币买油93美元,印度用美元买121美元,说好的大国呢?

林杰论事
2026-10-11 10:07:30
你曾说过爱我,你会一直履行你的承诺吗

你曾说过爱我,你会一直履行你的承诺吗

疾跑的小蜗牛
2026-10-17 18:12:40
第一集就要打码!这部9.6分成人神作,后劲太大了

第一集就要打码!这部9.6分成人神作,后劲太大了

i书与房
2026-10-18 10:37:07
美国防长感慨:过去不知道势均力敌是什么感觉,直到如今碰上中国

美国防长感慨:过去不知道势均力敌是什么感觉,直到如今碰上中国

观史搜寻着
2026-10-16 21:38:59
因为“真有人用”,所以取消了所有福利?这波操作太真实了

因为“真有人用”,所以取消了所有福利?这波操作太真实了

夜深爱杂谈
2026-10-03 20:30:57
沙特阿拉伯判处一名男子死刑,原因是他在15岁时参加了抗议活动

沙特阿拉伯判处一名男子死刑,原因是他在15岁时参加了抗议活动

花寒弦絮
2026-10-17 01:59:53
平民GL8真来了!五菱星光M正式申报,5米大七座+170km纯电,家用闭眼冲

平民GL8真来了!五菱星光M正式申报,5米大七座+170km纯电,家用闭眼冲

味健的汽车
2026-10-18 11:20:13
66岁的费翔采访中,被问到“你看到别人有儿子、有孙子的时候,羡慕吗?遗憾吗?”,他回答得很平静

66岁的费翔采访中,被问到“你看到别人有儿子、有孙子的时候,羡慕吗?遗憾吗?”,他回答得很平静

孙琬童
2026-10-17 06:25:12
2026-10-18 11:59:00
固件更新中
固件更新中
有态度网友ytd
215文章数 80关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

00后女演员被传与郭麒麟结婚 曾出演电视剧《赘婿》

头条要闻

00后女演员被传与郭麒麟结婚 曾出演电视剧《赘婿》

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

本地
游戏
健康
手机
军事航空

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

外媒报道中国“假GTA6光盘”开卖:他们太爱实体盘

看着很健康的人,怎么会突然猝死?

手机要闻

荣耀WIN 2系列手机官宣搭载荣耀鸿燕通信,配备全新自研射频增强芯片HONOR C3

军事要闻

“星盾”限速事件加剧美乌裂痕

无障碍浏览 进入关怀版