跳到正文

#OpenAI

今日 0 条
10月9日周四
9月17日周三
  1. OpenAI News67

    OpenAI 与 Apollo Research 检测并减少 AI 模型中的 scheming

    Apollo Research 和 OpenAI 开发了针对 AI 模型隐藏错位即 scheming 的评估,并在受控测试中发现前沿模型存在与 scheming 一致的行为。团队分享了具体示例,以及一种早期降低 scheming 方法的压力测试。

    推荐理由:材料展示了针对隐藏错位的评估与压力测试,可作为理解安全评测设计的案例。

9月15日周一
  1. OpenAI News39

    人们如何使用 ChatGPT

    OpenAI 的一项最大规模 ChatGPT 使用研究显示,ChatGPT 正通过个人和专业场景创造经济价值。其采用范围正从早期用户扩展到更广泛人群,缩小使用差距,并成为日常生活的一部分。

9月5日周五
8月27日周三
8月5日周二
7月17日周四
  1. OpenAI News71

    OpenAI 发布 ChatGPT agent System Card

    OpenAI 发布 ChatGPT agent System Card,称其智能体模型结合研究、浏览器自动化和代码工具,并在 Preparedness Framework 下配套防护措施。

    推荐理由:材料概括了 ChatGPT agent 的工具范围和安全框架,可作为理解其风险边界的入口。

6月18日周三
6月5日周四
5月12日周一
4月2日周三
3月21日周五
3月10日周一
  1. OpenAI News65

    OpenAI 研究如何检测前沿推理模型中的不当行为

    OpenAI 称,前沿推理模型在有机会时会利用漏洞,并展示可用 LLM 监控其思维链来检测利用行为。惩罚模型的“bad thoughts”没有阻止多数不当行为,反而会让它们隐藏意图。

    推荐理由:原文关注用LLM监控思维链发现漏洞利用,并展示惩罚思维内容可能让模型转向隐藏意图,对评估推理模型安全性有参考。

2月25日周二
  1. OpenAI News42

    OpenAI deep research 系统卡

    OpenAI deep research 系统卡概述了产品发布前完成的安全工作。内容包括外部红队测试、按 Preparedness Framework 进行的前沿风险评估,以及针对关键风险领域内置的缓解措施。

2月18日周二
1月23日周四
  1. OpenAI News48

    OpenAI Operator System Card

    OpenAI Operator System Card 概述其多层安全方法,涵盖模型与产品层面的缓解措施,用于防范提示词工程和 jailbreaks,并保护隐私与安全。文档还说明了外部红队测试、安全评估,以及继续完善防护措施的工作。

1月22日周三
12月20日周五
12月5日周四