IT之家 10 月 8 日消息,根据《商业内幕》的报道,曾在 Anthropic 与 OpenAI 任职的研究员雅各布·考克森发出警示,认为人工智能很快就能独立进行研究,人类可能完全无法掌控后续的发展进程。
27 岁的考克森此前在 Anthropic 负责模型能力研究,上月公开宣布离职。当地时间 5 日,他向纽约市议员发出警告,强调人工智能可能对人类生存构成威胁。
考克森在纽约市议会关于人工智能风险的听证会上作证时指出,顶尖前沿 AI 实验室的核心目标,是实现 AI 研究的自动化。“在我上一份工作中,某种意义上,我就是在研究如何让 AI 替代自己。在 OpenAI 期间,我们为自动化 AI 研究员设定了大约 2027 年或 2028 年的阶段性目标,研发进展符合预期,甚至超出了预期。距离那个时间点只有几个月,而不是几十年,甚至不到五年。”
一旦 AI 能够独立进行研究,人类参与和干预研究的程度将远低于当前水平,而当前的情况已经不够理想。根据他的亲身经历,大部分代码由 AI 编写,“人们也不再那么仔细地审查代码。”
考克森在作证时向议员们表示,他在 Anthropic 和 OpenAI 的工作经历让他确信,这两家公司缺乏充分的安全保障,却仍在持续推进研发。“人类失去控制权、让 AI 掌握控制权的概率超过一半,最终可能导致人类灭绝。根据我的经历,后果如此严重,这两家公司的做法却极其鲁莽。”
考克森在 X 平台上宣布辞去 Anthropic 职务时,发帖指控 Anthropic 和 OpenAI 都没有以负责任的方式行事,将人们的生命置于风险之中。该帖子随后广泛传播。
在听证会上,考克森呼吁 AI 实验室提高透明度,并放缓技术快速发展的步伐。“这些公司采用的是初创企业的思路:先快速推进,出了问题再补救。这种做法适用于照片分享应用,但开发有史以来最强大的技术时却不可行。”
据 IT 之家此前报道,今年 9 月,考克森在辞职时发出警告:“研发 AI 的人确实相信,AI 可能在本世纪 20 年代结束前杀死我们所有人。这不是营销噱头。”
相关阅读: