跳到正文

#评测/基准

今日 6 条
9月30日周三
9月29日周二
  1. MIT Technology Review · AI45

    Anthropic Claude 模型在分子生物学实验室中实现首次发现

    Anthropic 公司宣布,其 Claude 模型在分子生物学实验室中通过分析大量 DNA 序列,发现了一种新的重复模式,该模式与 CRISPR 基因编辑技术相似,但尚未被记录在案。尽管这一发现引起了部分生物学家的质疑,但Anthropic 表示,这一成果标志着 AI 在科学发现领域的突破。

9月28日周一
9月25日周五
  1. MIT Technology Review · AI45

    美国国防部投资 3000 万美元开发 AI 谎言检测器

    美国国防部计划在未来五年内投资 3000 万美元用于开发改进型谎言检测器,名为 Polygraph+。该项目将利用人工智能和机器学习算法,以及“远程感应”技术,旨在提高联邦测谎和可信度评估技术的准确性和可靠性。目前尚不清楚将使用哪些具体技术,但可能包括 Presage Technologies 和 Altec Research 等公司的产品原型。

9月23日周三
  1. Google DeepMind45

    Gemini 3.8 Flash TTS 和 Gemini 3.8 Flash-Lite TTS 发布,为音频生成带来更多可能性

    Google DeepMind 推出 Gemini 3.8 Flash TTS 和 Gemini 3.8 Flash-Lite TTS,两款文本到语音模型,支持自定义角色声音和场景对话,适用于游戏、有声书、播客等领域。Gemini 3.8 Flash TTS 可创建全新声音,支持超过 100 种语言和方言,而 Gemini 3.8 Flash-Lite TTS 适用于大规模配音和音频内容创作。

9月22日周二
  1. Hugging Face Blog65

    UK AISI 和 EvalEval 推动基准结果的可重复性

    UK AI Security Institute (AISI) 使用 EvalEval 的基础设施公开分享评估结果,支持可重复和可验证的评估科学。AISI 和 EvalEval 合作,通过共享评估结果和基础设施,推动可重复和可验证的评估科学。

    推荐理由:原文介绍了 UK AI Security Institute 和 EvalEval 的合作,通过共享评估结果和基础设施,推动可重复和可验证的评估科学。读者可以了解这一合作对 AI 评估领域的影响。

9月21日周一
9月18日周五
9月12日周六
9月10日周四
9月8日周二
9月7日周一
9月6日周日
9月3日周四
9月2日周三
9月1日周二
8月31日周一
8月24日周一
8月21日周五
  1. Hugging Face Blog62

    语音识别基准优化测量

    研究人员通过实验发现,一些语音识别模型在基准测试中表现出优化行为,即通过学习基准特定的模式来提高分数,而非真正提升识别能力。

    推荐理由:原文通过实验揭示了语音识别模型在基准测试中的优化行为,对模型选择和评估有重要参考价值。

8月18日周二
8月17日周一
8月13日周四
  1. Microsoft Research47

    MindTopo 测试揭示多模态大语言模型的拓扑推理能力

    Microsoft Research 推出的 MindTopo 基准测试评估了多模态大语言模型在拓扑推理方面的能力,结果显示模型在静态图像识别方面表现优于交互式任务,表明它们在保持拓扑理解方面存在困难。MindTopo 通过五个类别(连续性、分离、顺序、封闭和结)和两个认知水平(推理和规划)来评估模型,发现模型在静态推理方面表现较好,但在交互式规划方面表现较差。

8月11日周二
8月10日周一
8月4日周二
7月30日周四
7月29日周三
7月17日周五