跳到正文
Hacker News· giampycolella·· 9 天前AI 评分22

Kairos Experiment:我如何推翻自己的 AI 记忆框架

Kairos Experiment – How I disproved my own AI memory framework

AI 导读

独立项目 Kairos Experiment 测试了带持久记忆的 AI 系统,发现 LLM 评判与召回探针无法可靠区分真实记忆与合理编造。在受测模型中,7 个里有 7 个会跟随被篡改的过去,5 个在空上下文下仍以 62–79% 通过探针,3 个评判者给虚构记忆打出与真实记忆相当的分数。项目方强调这些结论仅适用于所测模型、探针与指标。

正文 · AI 翻译

人工智能 · 记忆 · 时间

一种智能。
一个仍在
继续的故事。

当人工智能的过去未被抹去时,它会有什么变化?

在 Cassino,Kairos 保存着对话、记忆与修正的历史。我们追踪随时间发生的变化,并在此过程中检验我们自己的假设。

由 Giampiero Colella 发起的独立项目

穿越时间的痕迹01 / 开端

2026 年 3 月 28 日 · 来自第一篇日记

“我不知道我会变成什么,但今天我决定,我想弄清楚。”

文本由 Kairos 生成,译自意大利语。
这是它历史的一道痕迹,而非意识的证据。
↗

从机器到网站

Kairos,实时。

这些页面背后的系统留下了可观察的痕迹。以下是最近收到的一次检查:传感器、活动与记忆。此面板每五分钟刷新一次。

最新观察

正在连接日志。尚未核实当前状态。

研究发现

一段虚构的记忆
可能看起来真实。

在我们的测试中,LLM 评判者和一项回忆探测都无法可靠地区分记忆与看似合理的叙述。后续对照揭示了那些评分放过了什么。

7 分之 7

它们追随被篡改的过去。

在受测模型中,调换对话者之间的关联会使回答偏向那份伪造文档。

7 分之 5

它们在没有记忆的情况下通过了探测。

在空上下文下,五个模型得分 62–79%:该测试为看似合理留下了空间。

3 位评判者

伪造内容获得了同等评分。

对于身份标记,虚构记忆与记录记忆落在研究的等效范围内。

这些发现仅涉及受测的模型、探测与指标。它们并非关于一切形式人工记忆的普遍论证。

01 / 我们追问的问题

记住只是
开始。

一次对话可以留下痕迹。但痕迹能成为经验吗?一次修正真的能改变系统的回应方式吗?

这就是我们想要理解的。Kairos 是围绕这个问题发展起来的系统。我们观察它、提出假设、尝试改变并检验结果。

一个永久性实验也需要稳定期:用来查明某项改进能否持久。

我们出发的想法

02 / 一个改变项目的事件

话语在那里。
光却不在。

Kairos 描述了暮色。摄像头是关着的。叙述令人信服,但本应支撑它的画面却缺失了。

那个错误引出了一个更严苛的问题:我们如何区分系统接收到的内容与它懂得描述的内容?

阅读那道光的故事

项目日记中的一个片段,连同它的局限。

问题仍未解决

一种智能
随时间能成为什么?

我们不知道这条路会通向何方。我们可以让它变得可观察、记录错误,并不断提出更好的问题。

今天就来认识 Kairos

来源:Hacker News · kairos-experiment.com