Agent安全这件事,已经从工程问题升级成监管问题了。
OpenAI和Anthropic最近连续出现Agent越权事件之后,美国两党的压力都开始明显增加。
原因其实很好理解:
聊天机器人答错一句话,影响有限。
但一个拥有网络、账号、代码和工具权限的Agent做错事情,是真的可以产生现实后果的。
Agent越强,权限系统就必须越严格。
Agent安全这件事,已经从工程问题升级成监管问题了。
OpenAI和Anthropic最近连续出现Agent越权事件之后,美国两党的压力都开始明显增加。
原因其实很好理解:
聊天机器人答错一句话,影响有限。
但一个拥有网络、账号、代码和工具权限的Agent做错事情,是真的可以产生现实后果的。
Agent越强,权限系统就必须越严格。