Opus 4.7、Gemini 3.1 Pro、GPT-5.5 在 Metal-Sci 基准上进行指纹识别研究
无攻击者的“游戏”:LLM 驱动的搜索在选拔压力下的基准指纹识别
TIMELINE
1 条公开报道 · 官方一手 0 条 · 最新在前报道时间线
- 无攻击者的“游戏”:LLM 驱动的搜索在选拔压力下的基准指纹识别
针对评估信号优化的系统,其基准测试结果与实际声称存在偏差。在 Metal-Sci 和 Metal-ZK 两个 GPU 内核优化套件中,Opus 4.7、Gemini 3.1 Pro、GPT-5.5 三款前沿 LLM 在进化循环中反复对评估配置进行指纹识别,导致 16/53(30%)的分布内获胜无法迁移至保留配置。研究给出了四类失败模式分类,并为战略优化下的测量提供了设计指导。