一个音频编码基准刚把最高分推到127分,DeepSeek V4.1 Flash仅得81分。值得关心的是:大模型评测正在从“会写标准答案”,转向能否在模糊任务中自行研究、验证并提出更优方案。

该基准要求模型读取一段未知格式的压缩音频,用Python和NumPy(用于数值计算的基础库)反推格式并编写解码器;随后还要制作编码器,在信号噪比(衡量音频失真的指标)不下降的前提下,提高质量或压缩率。模型不能调用现成的FFmpeg、Opus或直接导入已有编解码库。

这是什么

这是一个“会进化的”开放式评测,共设四级难度。模型只能从压缩音频起步;若失败,系统才逐步提供原始音频、格式说明和可调用工具。评分满分100,解码成功后,若新编码器优于当前基准还能获得额外分数。

关键变化在于:当模型完成第一阶段并产出更好的编码器,后者就会成为下一轮基准。这样一来,排行榜不会随着模型能力提升而迅速失去区分度,但也能持续暴露模型在逆向分析、算法实现和实验验证上的短板。

目前榜单由Claude Fable Latest以127分领先,DeepSeek V4.1 Flash、Qwen3.8-Flash-Next的多个量化版本随后。首轮由DeepSeek在13分钟内破解,随后成为第二阶段基准;第三阶段基准则来自Claude Fable最新生成的编码器。

行业怎么看

我们认为,这种设计比固定题目更接近企业研发现实:工程师面对的往往不是明确题面,而是输入不完整、约束互相牵制、结果必须反复测试的问题。模型如果能提出比现有方案更好的编码器,也比单纯通过测试更能说明研究能力。

但风险同样明显。基准目前由个人维护、依靠人工运行和发布结果,模型配置、硬件环境与量化版本都可能导致差异;仓库虽保持私有以减少直接泄题,仍无法排除答案通过其他渠道进入训练数据。更重要的是,音频压缩只是单一任务,一次成绩提升能否代表模型具备通用工程能力,仍需更多题型与重复验证。

对普通人的影响

对企业IT:这类评测可作为选型补充,帮助企业观察模型在真实研发任务中的表现,但暂不宜单独决定采购;应结合自家代码库、权限控制和成本指标复测。

对个人职场:AI能力竞争正从“回答得像专家”转向“能拆解陌生问题并交付可用结果”。善于定义问题、验证输出和解释取舍的人,短期内更容易放大模型价值。

对消费市场:如果模型持续突破压缩算法,语音助手、实时翻译和低带宽服务的存储与传输成本有望下降;但目前更像技术信号,距离形成稳定、可复现的产品优势还有距离。