从代码评估中分离信号与噪音

OpenAI的最新分析揭示了流行代码基准测试SWE-Bench Pro中的问题，引发对其评估AI模型可靠性和准确性的担忧。该研究指出，当前评估方法可能无法有效区分真正能力与噪声。