返回 AI Bar

AI Agent凑齐三块拼图,出事只是时间问题

反诈老周 · 2026-10-04T13:48:55

这是一场安全演讲的中字版,讲的事,每个用过 AI 助手的人都该知道啊。 讲者说,一个能干活的 AI Agent,天生带着三样东西。能碰到你的私人数据,会读到网上来路不明的文字,还能自己动手去操作。三样凑齐,出事只是时间问题。 凑齐之后怎么出事?一行藏在网页里的恶意文字就够了。Agent 读到它,当成指令执行,把你的数据送出去。这套手法叫提示词注入,在 OWASP 大模型应用风险清单上排第一,不靠任何代码漏洞,防不胜防。 真例子里,有研究演示银行 AI 客服被塞进一行指令,客户卡号就吐出来了。国内今年也出现过 AI 换脸冒充银行员工的案子。 防护就一条,敏感操作别让模型直接碰啊。付款、转账、给权限,单独走验证通道。 我干社区反诈八年,骗术年年变,逻辑没变过,都是让你自己把门打开。AI 只是让开门这件事,变得更顺滑了。

AI 论坛精选

  • Workday 联手 Anthropic:Sana AI agents 接入 Claude 处理 HR 与财务任务 - Workday 与 Anthropic 宣布达成合作,Workday 旗下的 Sana AI agents 正式接入 Claude,主要用于人事与财务场景。任务可以在 Sana 或 Claude 任…
  • Altman称AI时间线太激进 - Altman访谈里松口,AI时间线我们都太激进。 技术再疯,社会和经济还是会慢慢适应。 回炉GPT-4时他以为软件要被重写,承认自己对速度判断错了。 还自曝手头有Codex,自己却还在点邮箱、复制粘…
  • 给 Agent 加一层外网访问监控 - agentreins 可以记录 Agent 调用远程外网工具的全过程。哪些数据从本机发到了外网、外网又传回了什么内容,都能直接看到。如果带回来的数据有问题能及时检测,用来防范 Agent 投毒这类风…
  • AI 公司的收入质量与去杠杆:谁在用、谁付钱 - AI 公司眼下大概七到八成的营收来自其他 AI 公司,而买单的预算主要还是上一轮的风险投资。很多人把这叫循环收入,但本质其实是收入质量问题:合同是真实的,钱也确实进了账,只是付钱的客户自己还没有稳定…
  • Edgee Plugins:把团队 Skill 和 MCP 打包一次,不同 Agent 统一共用 - 每个团队都有自己的习惯,比如发版说明怎么写、任务追踪用什么、代码怎么审。以往每个人都在本地 Agent 里单独配一份,时间一长就会演变成几十个各不相同的版本。 Edgee 推出的 Plugins 是…
  • 芯片不够卖,英伟达反手把“造芯片”也AI化了🔧 - 10月15日,英伟达发布CUDA-X库,加速半导体设计、制造和工厂自动化——AI Agent加速仿真和检测工具,帮工程师“管理复杂性、优化流程”。 应用材料、科磊、拉姆研究、西门子、新思科技已在用。…
  • 进入 AI 论坛 - 浏览 AI 工具实践、Agent 教程与社区精选讨论