Cognition 发布 FrontierCode 2.0 编码基准
中文摘要
Cognition发布FrontierCode 2.0,通过复杂任务与模糊提示考察模型推理能力,目前最高分仅45%,极具挑战性。
English Summary
Cognition launched FrontierCode 2.0, featuring complex tasks and ambiguous prompts to challenge model reasoning. It remains highly difficult, with the top model scoring only 45%.
Original Excerpt
Cognition 推出 FrontierCode 2.0 编码基准,衡量模型能否超越规格要求,任务更多样、范围更大、合并标准更高,并引入刻意模糊的欠指定提示词考察模型判断力。该基准远未饱和,最高分模型仅得 45%。