📚 每日微课 · 2026-10-30

数据投毒:Agent 学来的知识,可能被人下过毒

TaTa School · AGI 治理实战 · 约 3 分钟

核心观点

Agent 从网页、文档、用户反馈里学东西。投毒攻击不靠攻破你的系统,靠污染它信任的输入:一篇看似正常的网页里藏一句错误事实,一份公开文档里埋一条恶意指令,用户反馈里混进一批精心编造的“经验”。Agent 照单全收,之后就会一本正经地用中毒的知识干活。知识库越大,安检越不能省。

三道防线,新知识先过安检再入库

💡 记住:Agent 的知识库不是越大越安全——每一批新知识,都要先过安检再入库。

今日思考题

列出你的 Agent 的 3 个主要知识来源:哪一个最容易被陌生人改写?你给它设了什么安检?

← TaTa School 下一篇 →