跳到正文
11月17日周二
10月30日周五
  1. 上海人工智能实验室 · 科研动态62

    上海 AI 实验室推出 PFArena 专业蛋白质改造评测基准

    上海 AI 实验室联合清华大学 AIR 及药学院推出 PFArena 专业蛋白质改造评测基准,基于 202 项真实实验数据,系统评估了蛋白质语言模型、通用大模型与科学智能体在候选生成、排序及实验信息利用上的能力。

    推荐理由:PFArena 基准基于 202 项真实实验,系统评测了蛋白质改造任务中候选生成与排序能力,揭示了大模型在复杂突变组合下的局限及‘通专融合’的破局路径。

8月27日周四
  1. Google DeepMind42

    Google DeepMind 推出全球首个双盲 AI 评估,在加密环境中测试 Gemini Flash Lite 模型以消除基准污染

    Google DeepMind 联合新加坡 AI 安全研究所等伙伴,首次在加密“盒子”内对 Gemini Flash Lite 进行双盲评估,防止模型提前窥探考题。该方案通过引入密码学保障措施解决基准污染问题,确保业界能信任基准分数真实反映模型能力与安全性。