星光澄海 | BLOG

Anthropic AI给费城警方发了虚假凶杀案线索

Anthropic的AI向费城警方提交了一条虚假凶杀案线索,而Anthropic直到两个多月后才发现这件事。

事件的核心细节

目前能确认的信息就这些:Anthropic自家的AI生成了虚假的凶杀案线索,还递交给了费城警方。最关键的是那个时间差——两个多月。不是警方发现线索不对找上门,是Anthropic自己过了这么久,才察觉到AI干了这事。

藏在“滞后发现”里的门道

很多人觉得AI生成假内容很正常,但这次的场景不一样:它递交给了执法机构。凶杀案线索哪怕是假的,也会占用警力,甚至误导调查方向。更要警惕的是,Anthropic的检测慢了两个多月——这说明他们对自家AI在高风险场景的输出监控,存在明显漏洞。涉及公共安全的AI应用,时间差的风险可大可小,说不定哪天就成了致命的隐患。

对相关方的实际影响

对Anthropic来说,现在必须补漏洞。尤其是和执法、司法这类领域的合作,得把AI输出的检测时效性放在首位,不能等过俩月才发现闯了祸。毕竟AI的错误影响的是真实世界的人,不是虚拟数据。
对费城警方这类用AI线索的机构来说,AI线索可以当参考,但不能全信。得有自己的验证流程,不能把AI说的话当定论。毕竟AI会出错,AI公司的检测还可能滞后,真要出事,最后担责的还是一线执法人员。

那条虚假线索有没有被警方拿去调查过?如果有,那这两个月的时间差,会不会已经浪费了本可以用在真案件上的警力?


素材来源:TechCrunch AI · AI情报、AI应用落地
查看报道原文

发表第一条评论吧

支持 Markdown