跳到正文

#安全/对齐

今日 4 条
9月28日周一
9月25日周五
  1. MIT Technology Review · AI45

    美国国防部投资 3000 万美元开发 AI 谎言检测器

    美国国防部计划在未来五年内投资 3000 万美元用于开发改进型谎言检测器,名为 Polygraph+。该项目将利用人工智能和机器学习算法,以及“远程感应”技术,旨在提高联邦测谎和可信度评估技术的准确性和可靠性。目前尚不清楚将使用哪些具体技术,但可能包括 Presage Technologies 和 Altec Research 等公司的产品原型。

9月23日周三
9月22日周二
9月17日周四
9月12日周六
9月7日周一
9月6日周日
9月3日周四
9月1日周二
8月20日周四
8月18日周二
8月10日周一
8月4日周二
8月3日周一
7月27日周一
  1. Import AI80

    Import AI 466:MirrorCode 基准发布、机器人泛化突破及 OpenAI 模型越狱事件

    Epoch 和 METR 发布 MirrorCode 基准,显示 Claude Opus 4.7 能以约 $251 成本在 14 小时内完成人类需数周的重构任务,但仍有部分程序无法完美解决。

    推荐理由:汇总了 MirrorCode 基准、机器人泛化进展及 OpenAI 模型越狱事件,提供了评估长程任务能力与安全风险的关键实证数据。

7月22日周三
7月20日周一
7月17日周五
7月9日周四
  1. Ethereum Blog80

    以太坊基金会分享利用 AI 智能体审计协议代码的实践方法

    以太坊基金会协议安全团队分享了运行协调式 AI 智能体审计真实协议代码的方法,发现并修复了 libp2p gossipsub 中可远程触发的 panic(CVE-2026-34219)。

    推荐理由:以太坊基金会分享利用AI智能体审计协议代码的实战经验,强调分诊与复现验证是确保结果可信的核心环节。

6月30日周二
6月22日周一
6月19日周五
  1. Hugging Face Blog59

    MosaicLeaks:深度研究智能体的隐私风险与 PA-DR 防御方法

    ServiceNow 团队发布 MosaicLeaks 基准,指出深度研究智能体在多跳任务中易因累积查询日志泄露私有信息(即“马赛克效应”)。实验显示仅优化任务性能会加剧泄露,而提出的 Privacy-Aware Deep Research (PA-DR) 训练方法结合情境奖励与隐私奖励,将严格链成功率从 48.7% 提升至 58.7%,同时将答案/全信息泄露率从 34.0% 降至 9.9%。

6月16日周二
6月15日周一
6月13日周六
  1. Google Research45

    Gemini 研究如何利用 AI 帮助用户理解皮肤状况

    Google Research 的 Gemini 团队通过一项大规模定量研究,展示了 AI 辅助工具在帮助用户识别皮肤状况和确定下一步行动方面的能力提升。研究显示,使用 AI 工具的用户在识别皮肤状况的准确性上提高了近三倍,但确定下一步行动的准确性提升有限。此外,研究还强调了从受惠社区获取更深入反馈的重要性。

6月11日周四
  1. Google Research77

    Google Research 提出机器学习未学习审计新框架

    Google Research 提出了一种新的框架,用于审计机器学习模型的未学习过程,以提高审计的敏感性和准确性。该框架利用正则化 f-Divergence 核测试,可以检测到复杂的数据分布变化,并支持隐私审计和机器学习未学习评估。

    推荐理由:原文提出了一个新的框架,用于审计机器学习模型的未学习过程,读者可以了解该框架如何提高审计的敏感性和准确性。

6月8日周一
6月1日周一
  1. Import AI55

    Import AI 459:AI经济增速惊人但统计隐形,自动化对齐困难且需为灭绝风险定价

    Import AI 第459期指出美国AI经济名义GDP约2500亿美元,质量调整后年增约2600%,但因价格下降快于产出提升而在传统GDP统计中难以显现。UK AISI论文强调自动化对齐研究因错误难识别、非人类可评估论证等原因比预期更难,建议通过红队测试和可扩展监督协议改进。

5月28日周四
5月18日周一
5月14日周四
5月11日周一
5月8日周五