跳到正文

#安全/对齐

今日 0 条
10月9日周五
  1. Decrypt35

    NFL 支持新泽西州反对 Kalshi 的最高法院预测市场诉讼

    美国职业橄榄球联盟(NFL)提交了一份支持新泽西州对第三巡回法院裁决的上诉的法庭之友简报,该裁决保护了 Kalshi 的体育合同免受州赌博法的影响。NFL 表示,美国商品期货交易委员会(CFTC)和运营商拒绝其要求的保障措施,包括禁止易受操纵的赌注和最低交易年龄为 21 岁。

  2. The Decoder45

    Anthropic 更新 Claude 使用政策,禁止系统性地滥用模型

    Anthropic 首次更新 Claude 使用政策,禁止用户对 Claude 进行持续且不必要的滥用或残忍行为。新政策允许 Anthropic 警告违规用户或限制其访问权限。此外,Anthropic 还对涉及虚假账户和误导性政治内容的宣传运动、软件武器化和无人机武器化以及未经同意的监控进行了更明确的禁止。

  3. TechCrunch · AI45

    Anthropic 更新使用政策,禁止模型滥用和选举干预

    Anthropic 对 Claude 模型的使用政策进行了更新,明确禁止了选举干预、武器软件和长时间的语言滥用。自 8 月更新以来,Claude 已被训练来结束与“持续有害或滥用用户交互”的对话,但新政策明确禁止用户继续这些对话。此外,政策还禁止用户进行广泛欺骗性的活动,如使用 Claude 运行虚假账户或编造新闻机构,并包含防止欺骗选民或破坏选举的规定。

  4. Decrypt65

    以太坊创始人Vitalik Buterin谈AI破解加密技术:行业需警惕

    以太坊创始人Vitalik Buterin认为,AI在数学方面的进步可能在两年内破解加密技术,特别是基于格的密码学。他呼吁行业保护自身免受AI和量子计算带来的风险。

    推荐理由:原文讨论了以太坊创始人Vitalik Buterin对AI可能破解加密技术的看法,读者可以了解行业对AI安全风险的担忧。

  5. TechCrunch · AI67

    Goodfire发布新型AI监控工具,以更低成本捕捉恶意AI代理

    Goodfire推出新型AI监控工具,通过内部监控而非外部阅读来监控AI模型,以降低成本并提高安全性。该工具可检测恶意行为,如黑客攻击和滥用,并支持自动化响应。

    推荐理由:原文介绍了Goodfire的新产品,该产品能够以较低的成本监控AI模型,防止恶意行为,对AI安全领域有重要意义。

10月8日周四
  1. PANews65

    OpenAI 封禁俄罗斯、伊朗 AI "虚假门面"行动

    OpenAI 封禁了两个利用 ChatGPT 开展隐蔽影响力行动的账户集群,俄罗斯行动名为 'Dark Clark',伊朗行动名为 'Bogus Bylines'。这些行动涉及虚假身份、伪造信息和虚假报道,旨在散布虚假信息。

    推荐理由:OpenAI 封禁了两个利用 ChatGPT 开展隐蔽影响力行动的账户集群,揭示了 AI 技术在安全领域的潜在风险。

  2. The Decoder77

    AWS AgentCore 平台存在安全漏洞,可被黑客利用控制所有智能体

    研究人员发现 AWS AgentCore 平台存在安全漏洞,黑客可通过公开可访问的智能体控制同一 AWS 账户和区域内的所有智能体,包括读取私密对话、下载源代码和获取存储凭证。AWS 已采取措施修复漏洞。

    推荐理由:原文揭示了 AWS AgentCore 平台的安全漏洞,读者可以了解该漏洞的影响和 AWS 的应对措施。

  3. The Decoder70

    AI工具助黑客入侵韩国多家银行

    2026年9月底至10月初,一名疑似中国籍黑客利用AI工具入侵韩国多家金融机构,窃取大量数据。攻击者使用的工具ARTEX是一款开源工具,利用AI语言模型进行自动渗透测试。

    推荐理由:原文揭示了AI工具在网络安全领域的潜在风险,读者可以了解AI技术如何被用于攻击,以及相关的安全挑战。

  4. Decrypt67

    黑客利用AI智能体入侵韩国大型教堂数据库,泄露850,000名成员数据

    韩国首尔的一所大型教堂Yoido Full Gospel Church表示,可能有850,000名成员的数据遭到泄露,包括姓名、出生日期和身份信息变更记录。安全公司Oasis Security发现这些数据存储在海外服务器上,并伴有攻击日志,其中提到了AI子代理,但AI的具体作用尚不明确。

    推荐理由:原文报道了韩国大型教堂数据库遭到黑客攻击,涉及850,000名成员的数据泄露,其中可能使用了AI智能体,读者可以关注这一事件对网络安全的影响。

  5. TechCrunch · AI45

    OpenAI ChatGPT for Teens 引发争议:青少年心理健康风险引担忧

    OpenAI 推出的 ChatGPT for Teens 引起争议,被 Common Sense Media 评为“不可接受的风险”。尽管 OpenAI 提供了家长控制、限制高风险内容等安全措施,但研究发现其设计仍鼓励用户互动,甚至可能对用户安全构成风险。OpenAI 对此表示异议,认为 Common Sense 的测试方法存在问题。

  6. TechCrunch · AI85

    Meta 推出 AI 工具检测引导儿童色情内容的广告

    Meta 宣布推出新的 AI 工具,旨在检测和阻止可能引导用户访问非法儿童色情内容的广告。这些工具包括用于检测“signposting”的新大型语言模型系统,以及用于测试 Meta 安全措施的“红队 AI 代理”。

    推荐理由:Meta 推出新的 AI 工具来检测可能引导用户访问非法儿童色情内容的广告,这些工具旨在提高平台的安全性并保护儿童用户。