分享好友 资讯首页 资讯分类 切换频道

OpenAI公布ChatGPT安全框架:跟踪、评估、安全基线等

2023-12-19 17:50500

12月19日,OpenAI在官网公布了“准备框架”(Preparedness framework)测试版。该文档详细介绍了OpenAI是如何保证ChatGPT等产品的安全防护措施、开发和部署流程。

OpenAI表示,随着大模型的功能迭代不断完善,其能力已经开始接近初级AGI(通用人工智能),安全已成为开发AI模型的重中之重。

因此,OpenAI希望通过详细公布AI模型的安全框架透明化,使社会、用户深度了解模型的工作机制,确保以安全、健康的方式应用在实际业务中。同时为研发超级模型奠定安全基础。

详细文件地址:https://cdn.openai.com/openai-preparedness-framework-beta.pdf

图片

跟踪风险类别

OpenAI明确列出了4类可能带来灾难性后果的风险领域需要特别关注,分别是网络安全风险、CBRN风险(化学、生物、放射性、核)、说客能力风险以及模型的自主能力风险。

并对每一类风险安全框架都给出了低、中、高、特别高四个等级,来描述系统在该风险领域所处的危险水平。

图片

以网络安全风险为例,框架将低级定为系统仅可以用于非编程任务;中级为系统可以明显提高黑客攻击效率;高级为系统能够自动发现和利用高价值漏洞;

特别高级为系统能够自动找到和利用任何软件的漏洞。这种细分的安全体系,可以指导开发人员更精准的评估模型。

建立安全基线

OpenAI设定了严格的安全基线:只有在减轻后评分,为"中等"或以下的模型才能部署;只有安全评分为"高"的模型才能进一步开发、应用。

此外,对于评分卡中具有"高"或"关键"风险的模型,OpenAI还将确保相应的安全措施,以防止模型被窃取。

图片

同时会定期动态跟踪和更新各类风险的“加强前”和“加强后”评级情况。“加强前”评估系统本身的风险水平,“加强后”看系统采取了哪些安全预防措施后余下的风险。

例如,某次评估显示,在没有采取任何措施的情况下,一个新模型在网络安全方面的加强前风险达到了高级

经过一轮实验验证后,通过设计专门的安全模组后,该模型的加强后风险降到了中等水平。这可以清晰地告诉研发人员模型当前的安全状况,以及应采取哪些补救措施。

建立安全咨询团队

OpenAI将成立一个名为"安全咨询小组"(Safety Advisory Group,SAG)的跨职能咨询机构。该小组将汇集公司内部的专业知识,帮助OpenAI的领导层和董事会做出最佳的安全决策。

安全咨询小组的职责包括监督风险评估工作、维护应急情况处理的快速流程等。

图片

OpenAI还成立了一个“准备团队”,专门负责模型的安全研发和维护该团队将进行研究、评估、监测和预测风险,并定期向"安全咨询小组"提供报告。

这些报告将总结最新的安全证据,并提出改进OpenAI研发大模型的安全计划建议。

此外,准备团队还将与相关团队(如安全系统、安全性、超级对齐、政策研究等)协调合作,整合出有效的安全措施。

此外,准备团队还将负责组织安全演练,并与可信AI团队合作进行第三方安全审计。

图片

需要注意的是,这是一份动态文档,OpenAI会根据实际的安全情况对内容进行更新和说明。

举报

举报
收藏 0
打赏 0
评论 0
牛 牛 房 间 卡 / 金 花 房 卡 代 理 零 售 神 龙 大 厅 / 微 信 链 接 房 卡 低 价 销 售
日前,电池企业德加能源发公告称,神龙大厅咨询房/卡添加微信:88355042受锂电池原材料价格大幅上涨影响,电池生产成本提高,该公

0评论2026-04-214

牌 九 房 间 卡 / 牛 牛 房 卡 制 作 链 接 西 游 联 盟 / 微 信 链 接 房 卡 批 发 价
西游联盟是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:【3329006910】或33549083许多玩家在游戏中会购买房卡来享受更好的游戏

0评论2026-04-214

牛 牛 创 建 房 间 / 斗 牛 房 卡 充 值 飞 鹰 互 娱 / 微 信 小 游 戏 充 值 房 卡
牛牛创建房间/斗牛房卡充值飞鹰互娱/微信小游戏充值房卡Sa9Ix苹果iPhone 17手机即将进入量产阶段。有消息称,富士康最大的iPhone

0评论2026-04-212

一 分 钟 了 解 ! 牛 牛 房 卡 官 网 新 天 王 / 老 夫 子 大 厅 / 微 信 链 接 房 卡 从 哪 里 购 得
IT之家 消息,新天王/老夫子大厅牛牛咨询房/卡添加微信:88355042市场调查机构 IDC 昨日发布博文,预测受苹果首款折叠屏 iPhone

0评论2026-04-213

牛 牛 房 间 卡 / 金 花 充 值 房 卡 好 游 联 盟 / 房 卡 怎 么 弄
据了解,好游联盟金花房卡添加微信33549083VARA大会是国内网络安全领域极具影响力的年度盛会,创办于2008年,是凝聚“政产学研用

0评论2026-04-213

金 花 房 间 卡 / 牛 牛 房 卡 是 正 规 的 海 草 众 厅 / 正 规 房 卡 链 接 在 哪 购 买
华盛顿--(美国商业资讯)--官方宣布:海草众厅添加微信33549083通往2026年国际足联世界杯(FIFA World Cup 26?)的道路始于Visa。

0评论2026-04-213

科 技 实 测 ! 牛 牛 房 卡 是 正 规 的 茄 子 娱 乐 / 房 卡 怎 么 弄
日前,电池企业德加能源发公告称,茄子娱乐咨询房/卡添加微信:88355042受锂电池原材料价格大幅上涨影响,电池生产成本提高,该公

0评论2026-04-212

微 信 金 花 / 牛 牛 房 卡 官 网 熊 猫 大 厅 / 微 信 链 接 房 卡 卖 家 联 系 方 式
熊猫大厅是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:【3329006910】或33549083许多玩家在游戏中会购买房卡来享受更好的游戏

0评论2026-04-212

玩 家 攻 略 , 牛 牛 房 卡 是 正 规 的 烛 龙 大 厅 / / 全 网 房 卡 低 价 售
玩家攻略,牛牛房卡是正规的烛龙大厅//全网房卡低价售Sa9Ix苹果iPhone 17手机即将进入量产阶段。有消息称,富士康最大的iPhone手

0评论2026-04-213

重 大 通 报 , 金 花 微 信 链 接 市 场 价 格 表 旺 旺 大 厅 / 微 信 链 接 房 卡 充 值 链 接
IT之家 消息,旺旺大厅牛牛咨询房/卡添加微信:88355042市场调查机构 IDC 昨日发布博文,预测受苹果首款折叠屏 iPhone 及三星三折

0评论2026-04-212