私域群AI客服被夺舍了怎么办:用同一种 AI 先把自己家打一遍
这两天很多大品牌私域里的客服机器人被人劫持了,发出去的是不雅的信息。放在修仙界,这就叫夺舍。具体是哪几家我不说,我更想聊的是,做 AI 产品的人怎么查自己家的漏洞。
我自己的一台服务器,一天就有两千多次机器人来试。这个月 PHP 又被找到两个很严重的漏洞,而找漏洞这件事,已经从几个月变成了几天。攻击的人和守的人,用的是同一种 AI。
这两天,很多大品牌私域里的客服机器人被人劫持,发出去的是不雅的信息。放在修仙界,这叫夺舍,身体被别人操控了。具体是哪几家,这里不说。我更关心的是,对我们这些 AI 开发者来说,怎么检查自己产品里的安全漏洞。
客服机器人被劫持,本身就是一个漏洞。什么叫漏洞?本来不该被做到的事,现在能被做到了。不该有权限的人拿到了权限,不该被看到的数据被别人看到了,或者系统被人弄停了,符合一条就是漏洞。客服机器人本来只该替品牌回答问题,结果别人能让它替自己发东西,这就是第一种。
互联网其实有点像丧尸爆发的城市,我们的服务器就是我们的家,无时无刻都有攻击者在家周围游荡。我自己的一台服务器,一天就有两千多次机器人来试。去检查一下服务器,大概率每时每刻都有人在试家门密码锁的密码。服务器的服务商也在不断帮我们填补这些漏洞。
这个月二十一号,PHP 被找到了两个很严重的漏洞。PHP 是做网站最常用的一种编程语言,全世界大约七成的网站都在用它。有些情况下,攻击的人连登录都不用,就能让网站的服务器执行他的命令。这就像丧尸突然发现,地下室的窗户也能进到房子里来,于是全都从这里进来了。
为什么这两天一下子这么多?这个口子前年就有人注意到了,但一直没人找到能打通的路。这次研究的人用上了 AI,一个研究员一周,就干完了以前一个世界级团队要干几个月的活。找漏洞这件事,从几个月变成了几天。而且攻击的人和守的人,用的是同一种 AI。
用 AI 做出来的产品,就是我们自己盖的房子,门和窗户都是 AI 装的。我之前有一期视频讲过,歌手胡彦斌用 AI 做了一款 App,一位资深技术专家写文章挑出了一堆安全问题。短信验证码可以被人一直刷、一直发,这个钱是产品自己出的;存文件的地方没有上锁,谁拿到网址都能下载。在我看来,这些都不是 AI 把代码写错了,是做的人没让 AI 去管这件事。没人跟它说要锁门,它就不会去装锁。而这些安全问题,目前也可以用 AI 来解决。
我当时进到 Claude Code 里,让它启动一个多智能体的团队,把一个软件上线之后可能遇到的安全问题尽可能列全,每一条配上行业里最好的解法。它列了八十八项,一共十二大安全领域。接下来把这份清单交给 Claude Code 或 Codex,让智能体针对我们写出来的软件做一次严谨的清单式检查,并制定修复方案,基本上就解决了百分之八十甚至九十。
具体怎么跟 AI 说,我用的是三句话。第一句,先让 AI 列清单;第二句,让 AI 当一回攻击的人;第三句,盯住地下室的窗户。就像这次 PHP,补丁打了不重启,那就等于没打。这些检查只查自己的产品,和自己有权限的系统。丧尸几天就能找到窗户,我们也能用同一种 AI,先把自己家打一遍。
三句提示词(完整版)
① 先让 AI 列清单
我用 AI 做了一个产品,有登录、有付款、用户能上传东西。请你组一个团队,把这种产品上线以后可能出的安全问题尽可能列全,每一条写清楚会出什么事、怎么自己去测、正确的做法是什么。
② 让 AI 当一回攻击的人
你现在站在想攻击这个产品的人那一边,对照这份清单,把我们的代码一项一项查一遍,找到的口子按严重程度排好,给出修复方案;修完了再查一遍。
③ 盯住地下室的窗户
把我们用到的所有别人的东西都列出来——语言、框架、插件、云服务。每一样告诉我:是不是最新的,有没有刚出的严重漏洞,补丁打了没有,打完要不要重启。
只查自己的产品,和自己有权限的系统。
那份八十八项的清单在本页上方的下载区。
来源:EP0118(2026-10-24,03:52)。画面为数字人,配音为本人克隆音色。本页为用于配音的口播稿,正文逐字保留。
这两天很多大品牌私域里的客服机器人被人劫持了,发出去的是不雅的信息。这要是放在修仙界,就叫夺舍,别人操控了你的身体。具体是哪几家,我就不说了。哎,那对于我们这些 AI 开发者来说,怎么去检查自己产品里的这些安全漏洞呢?我后面会讲。那客服机器人被劫持,其实就是一个漏洞。什么叫漏洞呢?就是本来不该被做到的事,现在能被做到了。不该有权限的人拿到了权限,不该被看到的数据被别人看到了,或者系统被人弄停了,符合一条就是漏洞。那客服机器人本来只该替品牌去回答问题,结果别人能让它替自己去发东西,这就是第一种。
互联网其实有点像丧尸爆发的城市,我们的服务器就是我们的家。无时无刻都有很多攻击者在家周围游荡。我自己的一台服务器,一天就有两千多次机器人来试。如果去检查一下自己的服务器,大概率每时每刻都有人在尝试你家密码锁的密码,试图破解。那服务器的服务商呢,也不断地在帮我们填补这些漏洞。
那这个月二十一号,PHP 被找到了两个很严重的漏洞。PHP 是做网站最常用的一种编程语言,全世界大约七成的网站都在用它。有些情况下,攻击的人连登录都不用,就能让网站的服务器去执行他的命令。这就好像突然间丧尸发现了,哦,原来地下室的窗户还可以进到房子里来,那全部都从这里进来了。
那为什么这两天一下子这么多呢?其实这个口子前年就有人注意到了,但一直没有人找到能打通的路。这次研究的人用上了 AI,一个研究员一周,就干完了以前一个世界级团队要干几个月的活。找漏洞这件事,从几个月变成了几天。而且攻击的人和守的人,用的是同一种 AI。
那用 AI 做出来的产品呢,就是我们自己盖的房子,门和窗户都是 AI 装的。我之前有一期视频讲过,歌手胡彦斌用 AI 做了一款 App,然后一位资深技术专家写了篇文章,挑出了一堆安全问题。比如短信验证码可以被人一直刷,一直发,这个钱是产品自己出的;存文件的地方没有上锁,谁拿到网址都能去下载。在我看来,这些都不是 AI 把代码写错了,是做的人没让 AI 去管这件事。没人跟它说要锁门,它就不会去装锁。但这些安全性的问题,目前也是可以用 AI 来解决的。
我当时就进到 Claude Code 里面,让它启动一个多智能体的团队,把一个软件上线之后可能遇到的安全问题尽可能地列全,每一条再配上行业里最好的解法。它列了八十八项,一共十二大安全领域。那接下来只要把这个清单丢给 Claude Code 也好,Codex 也好,让它的智能体针对我们写出来的软件,去做一个严谨的清单式的检查,并且制定修复的方案就可以了。这件事情基本上就解决了百分之八十甚至九十。
那具体怎么跟 AI 说呢?我用的就是三句话。第一句,先让 AI 去列清单:我用 AI 做了一个产品,有登录,有付款,用户能上传东西,请你组一个团队,把这种产品上线以后可能出的安全问题尽可能列全,每一条写清楚会出什么事,怎么自己去测,正确的做法是什么。
第二句,让 AI 去当一回攻击的人:你现在站在想攻击这个产品的人那一边,对照这份清单,把我们的代码一项一项查一遍,找到的口子按严重程度排好,给出修复方案,修完了再查一遍。
第三句,就是去盯住地下室的窗户:把我们用到的所有别人的东西都列出来,语言啊,框架啊,插件啊,云服务啊,每一样告诉我是不是最新的,有没有刚出的严重漏洞,补丁打了没有,打完要不要重启。就像这次 PHP,补丁打了不重启,那就等于没打。当然了,这些只查自己的产品,和自己有权限的系统哦。
完整版的提示词和那份八十八项的清单,我都放在网站 xntj.tv 上了,大家可以去看一看。丧尸几天就能找到窗户,那我们也能用同一种 AI,先把自己家打一遍吧。那今天的内容就是这样,我们明天再见,拜拜。