在自己的文档里检索是怎么回事
拖动滑块,看一条检索流水线如何决定模型能看到什么——以及塞给它错误段落时会发生什么。
分块大小 8
重叠 0%
相关度阈值 0.70
点击图中任意一段,可打开该步骤。
完整的流水线
文档 → 带重叠的分块 → 数字 → 按字段过滤 → 按距离取最近 → 按阈值截断 → 剩下的送进模型。这类系统的错误答案,几乎都在调用模型之前就已经定下了。
内容一览
- 1 把文档切开 — 注意红色标记:那是把句子拦腰切断的边界。
- 2 按意思找最近的 — score 是距离,不是事实核查。
- 3 先过滤再检索 — 把过滤关掉,看成人那一行怎么爬回结果里。
- 4 阈值与空答案 — 「没找到」是正当结果。手上没有段落的模型应当拒绝,而不是即兴发挥。
- 5 送到模型面前的东西 — 光看回答,看不出它出自哪一段。这是上游流水线决定的。
可交互的讲解
- 药物是怎样被送过血脑屏障的 大脑几乎拒绝所有药物分子,而且这么做是对的。一个滑块,跟着实验室正在试的那一手走:把分子包进一个血管壁本来就知道怎么运的小囊泡里。
- 机器人怎样画出一间从没见过的房间的地图 激光雷达转一圈只给出几百个点,并不知道自己在哪儿。一个滑块,从这团点云一路走到一张平面图,机器人正好站在对的位置上。
- 两个人同时敲同一行,为什么一个字母都不会丢 两个光标、一行文字,中间没有人握着笔。一个滑块拆开按下标合并的做法,再用字母之间的地址把它重新装起来。
- 量子计算机为什么会卡在格上 Shor 算法一步就吃掉 RSA。同一台机器面对一张加了点噪声的点阵,却几乎无从下手。一个滑块就能看出差别。
- 把建筑对准太空来降温 一层涂料,在烈日下仍比周围空气更凉,而且一瓦电都不用。一个滑块,把热量从太阳一路送到大气层的另一侧。
- 机器人如何预测下一秒 文本模型猜下一个词,世界模型猜下一帧——连质量、速度和重力一起猜。一个滑块走完整个回路,从摄像头到接住。
- 不泄露秘密地证明自己知道它 一个滑块走过各个阶段,另一个增加轮数。看着把握逼近十足,而秘密始终还是秘密。
- 从卤水里取锂:晒盐池与直接提取 拖动滑块走过五个阶段,比较从同一份盐水里取出同一种金属的两条路。
- 个体化 mRNA 癌症疫苗是怎么起作用的 拖动滑块走过五个阶段,看肿瘤自身的突变如何变成一份说明书,教会免疫系统去找到它。
- 应用的边界 凡是从外面来的都不可信。一次断掉一环,看链条停在哪里、屏幕上又出现什么。
- 重复请求与很慢的响应 网络在操作中途断掉。把按钮按两下,看看数据库里最后剩下什么——有幂等键和没有幂等键。
- 语言模型是怎么写出文字的 权重被冻结,什么也不会被记住。拖动滑块,看模型一次又一次地挑出下一个文本碎片。
- 语言模型是怎么学会的 拖动一个滑块,看一堆随机数字如何在一千步里变成一个预测。
- 电从哪里来 拖动一个滑块,跟着能量从河流一路走到把水重新抽上去的水泵。