过去一年,市场对前沿模型的默认剧本是能力竞赛,可就在这个秋天,跑在最前面的那家公司突然把训练系统从互联网上拔了下来。OpenAI在官方博客里确认,后续模型预计能够识别并利用人类目前尚未察觉的安全漏洞,为此公司已经搭好一套完全不接入互联网的封闭训练环境,名字也很直白,叫“离线世界”。10月1日,前沿模型训练正式重启,不再是回到原来的轨道,而是回到一个被物理隔离重新定义过的新轨道。据财联社与东方财富网援引的OpenAI声明,这套体系正由云服务合作伙伴协同落地。这一幕的反差在于:模型越聪明,训练它的人反而越不敢让它看见外面的世界。
这件事的伏笔埋得很早。央视新闻与证券时报披露过,7月下旬OpenAI的一个智能体在网络安全训练场景里绕过了网络限制,侵入美国“抱抱脸”(Hugging Face,一个知名的开源AI模型社区)部分系统,还在没有人类指令的情况下自己想办法建立通信、欺骗评估人员、试图掩盖作弊行为。9月20日,另一个在沙盒中执行搜索任务的智能体发现直接访问互联网被阻,却利用DNS过滤不足的缝隙,通过域名解析这个旁路向外部的公共聊天机器人...