跳到正文

#评测/基准

今日 0 条
9月22日周二
8月28日周五
8月21日周五
  1. Hugging Face Blog75

    Hugging Face 研究量化语音识别中的基准优化

    Hugging Face 最新研究测试了 11 个开源 ASR 模型,发现部分高分模型会复现 VoxPopuli 和 LibriSpeech 参考文本中的错误、补回音频中被静音的数字,或根据数据集线索切换拼写形式。

    推荐理由:研究用三项测试量化语音识别模型的基准优化现象,展示公开测试集得分与新音频泛化能力之间的偏差。

8月17日周一
  1. Import AI45

    Import AI 469:DiG-bench 测试 AI 的科学发现能力,RSI Simulator 模拟递归自我改进

    DiG-bench 推出包含 70 个隐藏规则游戏的基准,评估 AI 在陌生环境中通过探索发现规则、更新先验的能力;当前 frontier models 仍难以通关,Opus 5 和 Fable 5 表现最佳,GPT-5.5 紧随其后。文章还介绍 Paradigm Research 的 RSI Simulator,以及 Inherent 用开放权重模型构建 AI 科学家 Faraday 的研究。