在 Vals CyberOffense 基准测试中,智能体无需人工帮助,便在模拟企业网络中完成目标。GPT-6 Sol Daybreak 在 Nova 中平均完成 15.7/21 个目标,在 Lighthouse 中完成 27/31 个;Deepseek V4.1 Flash 1017 分别完成 16.3/21 和 21/31 个。Vals 报告称,每次运行成本约为 22 美元和 3 美元。
Deepseek 在最初 2500 万个 token 中没有进展,大部分进展发生在超过 1 亿个 token 后。这些是模拟测试结果。另据英国 AI 安全研究所估计,领先开放模型与闭源模型的网络能力差距为四至七个月。
为什么重要
成本较低的开放模型可能让防御测试更易开展,但相同能力也会增加滥用风险。
试一试
作为假设性的桌面演练,可在获准的模拟环境中比较攻击测试与防御性漏洞发现。





开启讨论。