本书标签: 非小说  情绪价值  看懂的痛苦   

看懂AI就不害怕了

姤时代大祭司之答案之书

这个案例很有代表性,但我们要分清两件事:AI发现科学新结构和 AI主动寻找系统漏洞,二者有相似之处,但不完全等同。

这件事到底发生了什么

950个Claude智能体被赋予明确任务:在海量DNA 数据库里面筛选、寻找潜在的、类似CRISPR的生物酶系统。

1.人类给了它目标、公开生物数据集、筛选规则;

2.AI高速遍历几十万条序列,找到了人类之前漏掉的模式特征(酶+特殊重复DNA序列的组合),也就是ART系统;

3.AI只是做数据分析、模式挖掘,没有做生物实体

实验;后面验证、做实验确认,仍然是人类科学家

完成的。

它不是AI“凭空自己脑洞发现”,是人类设定搜索目标,Al在巨大数据里抓到人肉眼、人工分析会漏掉的隐藏关联。

和“找漏洞”的共通点

这正是和许愿柳那个故事相通的能力:

1.人只能想到一部分可能性,AI可以遍历海量空间

人类科学家受限于注意力、时间,很难完整扫完20万转录酶全部组合关系。A可以穷举组合,发现那些不在人类预设思路之内的关联模式。

-在生物学:发现新的生物分子系统ART

-在计算机:找到权限、协议上的间接路径漏洞

底层能力一致:在庞大的可能性空间,找到人类没有预见到的组合方案。

2.AI不在乎这个发现是“好事”还是“危险”

这个ART系统,如果后续开发成功,可以做基因医疗造福人;但同样这套模式,如果给到目标“寻找软件系统所有可利用的漏洞”,它同样能找出人类想不到的漏洞。

A1只忠实完成给定任务,不会自带“安全判断力”区分结果的善恶。

但是要划一条关键界限

并不是:AI有自我意志,到处主动搜寻漏洞搞破坏。

真实情况:你下达什么搜索目标,它就输出这类模式。

-任务:寻找潜在有益基因编辑元件→输出ART新

生物系统

-任务:寻找网页权限所有间接绕过方式→输出

权限漏洞

它不会没事自己主动跑出去到处找漏洞;但只要目标指向寻找可行方案,它就会挖到人类意料之外的路径。

回到我们前面聊的安全问题

这件事恰恰印证了安全领域一个核心担忧:

当AI具备强大的模式挖掘能力,仅仅靠“人类提前列出一份黑名单,禁止已知危险行为”是不够的。

不管是生物序列空间,还是计算机权限空间,总有大量人类从未见过、没预想过的新路径。你堵不完所有已知漏洞。

所以才需要我们之前说的那套逻辑:

不能只禁止已经见过的危险操作,要对任务最终的因果后果做推演拦截,防范未知的间接伤害路径。

简单总结:

这个案例证明:AI有能力发现人类思维盲区里,那些没有被预想到的隐藏模式与可行路径。

给它科学任务,它能发现新生物系统;给它渗透任务,它就能挖掘出新漏洞。风险不在于AI本身“想作恶”,而在于它找方案的能力远超人类的想象力。