Jay Zoo 谈可靠 Data Agent 的四类证据

可靠性怎样拆开看

系列帖子的核心观点是，Data Agent 的可信度不能只用一次端到端准确率概括。用户需要知道系统用了什么数据定义、生成了什么 SQL 或公式、做过哪些检查，以及结论如何被组织和展示。

四类证据

口径证据说明指标、实体和时间范围来自哪里。计算证据保留 SQL、公式和中间结果。验证证据记录系统对空值、重复、数量级和跨口径冲突做过的检查。表达证据则帮助用户判断图表与文字有没有超出数据能支持的范围。

语义层与独立验证器

语义层负责缩小 Agent 可以猜测的空间，让指标定义和关系有明确来源。独立验证器在结果发送前再次检查关键数字和约束。它最好与生成步骤分离，避免同一个推理过程既出题又给自己判分。

产品启示

面向决策的数据 Agent 应默认保留来源、查询、校验和版本记录，并把关键证据呈现在答案旁边。这样用户修正一次错误时，系统也能知道应该改口径、检索、计算还是表达环节。