论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
朋友圈
看朋友圈动态,了解ToB世界。
ToB门户
了解全球最新的ToB事件
博客
Blog
排行榜
Ranklist
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
导读
Guide
相册
Album
记录
Doing
搜索
本版
文章
帖子
ToB圈子
用户
免费入驻
产品入驻
解决方案入驻
公司入驻
案例入驻
登录
·
注册
只需一步,快速开始
账号登录
立即注册
找回密码
用户名
Email
自动登录
找回密码
密码
登录
立即注册
首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
圈子
SAAS
ToB企服应用市场:ToB评测及商务社交产业平台
»
论坛
›
安全
›
终端安全
›
[AI OpenAI] 掩护前沿AI研究基础办法的安全 ...
[AI OpenAI] 掩护前沿AI研究基础办法的安全
惊落一身雪
金牌会员
|
2024-8-28 23:58:32
|
显示全部楼层
|
阅读模式
楼主
主题
851
|
帖子
851
|
积分
2553
我们概述了支持前沿模子安全训练的架构。
我们分享了一些关于我们研究超级计算机安全架构的高级细节。
OpenAI运营着一些最大规模的AI训练超级计算机,使我们能够提供在能力和安全性方面均处于行业领先地位的模子,同时推进AI前沿的发展。我们的使命是确保先辈AI惠及每个人,而这一工作的基础是支持我们研究的基础办法。
为了安全地实现这一使命,我们优先考虑这些系统的安全性。这里,我们概述了当前支持大规模前沿模子安全训练的架构和操作。这包括计划用于在安全情况中掩护敏感模子权重的措施以促进AI创新。尽管这些安全功能将随着时间的推移而发展,但我们以为提供当前对我们研究基础办法安全性的见解是有代价的。我们盼望这些见解能帮助其他AI研究实行室和安全专业人员在保障他们本身的系统时(我们也在招聘)。
威胁模子
研究基础办法由于实行工作负载的多样性和快速演变性,呈现出独特的安全挑战。
研究基础办法是几个告急资产的故里,这些资产必须得到掩护。其中,未发布的模子权重是最告急的掩护对象,因为它们代表焦点知识产权,必要防止未经授权的泄露或粉碎。
出于这个目标,OpenAI创建了一系列专门用于前沿模子开发和安全的研究情况。研究基础办法必须支持掩护模子权重、算法机密和其他用于开发前沿模子的敏感资产,防止其被未经授权的外泄和粉碎。同时,研究人员必须有充足的资源和基础计算办法访问权限,以确保他们的生产力和效率。
架构
我们的研究技能架构创建在Azure上,利用Kubernetes举行编排。我们利用这两者来实现一个符合我们的威胁模子的安全架构。
1. 身份基础
我们的身份基础创建在Azure Entra ID(以前的Azure Active Directory)上。Azure Entra ID与内部认证和授权框架及控制集成。Azure Entra ID在会话创建时启用基于风险的验证、使用身份验证令牌以及检测非常登录。这些功能补充了我们内部的检测工具,用于辨认和阻止潜在威胁。
2. Kubernetes架构
我们使用Kubernetes在我们的基础办法中编排和管理工作负载。研究工作负载受到Kubernetes角色基于访问控制(RBAC)政策的掩护,以遵循最小权限原则。准入控制器政策为工作负载设定了安全基线,控制容器权限和网络访问以低沉风险。
我们依赖现代VPN技能为我们的研究情况提供安全网络连接。网络政策定义了工作负载怎样与外部服务通信。我们接纳默认拒绝出口计谋并明确列出授权的外部通信路径。我们广泛使用私有链接网络路由,减少必须的互联网路由,并使这个白名单尽可能简短。
对于一些高风险任务,我们使用gVisor(一个容器运行时)提供额外的隔离。这种多层次的防御方法确保了工作负载的强大安全性和高效管理。
3. 存储敏感数据
像凭证、机密和服务账户等敏感数据必要额外掩护。我们使用密钥管理服务在我们的研究基础办法中存储和管理敏感信息,并通过角色基于访问控制限定访问,使只有授权的工作负载和用户才能检索或修改这些信息。
4. 研究人员和开发人员的身份和访问管理(IAM)
访问管理对于管理上述系统的研究人员和开发人员访问至关告急。任何IAM解决方案的安全目标是跨资源实现时限的“最小权限”访问计谋、高效管理和可审计性。
为此,我们构建了一个名为AccessManager的服务,作为管理内部授权和实现最小权限授权的可扩展机制。该服务将访问管理决策联邦化给根据政策定义的审批者。这确保了对敏感资源(包括模子权重)的访问授权决策由具有适当监督的授权人员做出。
AccessManager政策可以定义得严格或灵活,具体取决于相干资源。哀求和被授予访问敏感资源(如包含模子权重的研究情况存储)必要多方批准。对于敏感资源,AccessManager授权在指定时间后到期,这意味着如果不续期,权限将规复为无权限状态。通过实行这些控制,我们低沉了未经授权的内部访问和员工账户被粉碎的风险。
我们将GPT-4集成到AccessManager中,以促进最小权限角色分配。用户可以在AccessManager中搜索资源,服务将使用我们的模子建议可授予该资源访问权限的角色。将用户连接到更具体的角色有助于减少对广泛、通用和权限过大的角色的依赖。在初始角色哀求和多方批准步调中(如果指定角色的政策要求),人的参与低沉了模子建议错误角色的风险。
5. CI/CD安全
我们的基础办法团队使用持续集成和持续交付(CI/CD)管道来构建和测试我们的研究基础办法。我们在保障我们的基础办法CI/CD管道方面举行了投资,使其更具抗潜在威胁的能力,同时保持我们的研究人员和工程师的开发和部署过程的完整性和速率。
我们限定创建、访问和触发与基础办法相干的管道的能力,以防止访问CI/CD服务可用的机密。CI/CD工作人员的访问也同样受到限定。合并代码到部署分支必要多方批准,增长了额外的监督和安全层。我们使用基础办法即代码(IaC)范式,以同等、可重复和安全的方式配置大规模基础办法。CI在我们基础办法的每次变更中多次强制执行预期配置。
6. 灵活性
同时,研究必要推动前沿。这可能必要对我们的基础办法举行快速迭代,以支持不断变革的功能需求和限定。这种灵活性对于实现安全和功能需求至关告急,在某些情况下,为实现这些目标,答应适当的补偿控制的例外是至关告急的。
掩护模子权重
从研究情况中防止模子权重被外泄必要多层次的安全方法。这些定制控制旨在掩护我们的研究资产免受未经授权的访问和偷窃,同时确保它们在研究和开发过程中保持可访问性。这些措施可能包括:
授权:对包含敏感模子权重的研究存储账户的访问授权必要多方批准。
访问:研究模子权重的存储资源通过私有链接接入OpenAI的情况,以减少对互联网的暴露,并通过Azure举行身份验证和授权以举行访问。
出口控制:OpenAI的研究情况使用网络控制,只答应出口流量到特定预定义的互联网目标。对未列入白名单的主机的网络流量将被拒绝。
检测:OpenAI维护了一套综合的检测控制措施来支撑这一架构。出于安全原因,这些控制的详细信息不予公开。
审计和测试
OpenAI使用内部和外部红队模拟对手测试我们的研究情况安全控制。我们已约请领先的第三方安全咨询公司对我们的研究情况举行了渗透测试,而我们的内部红队对我们的优先事项举行了深度评估。
我们正在探索研究情况的合规制度。由于掩护模子权重是一个定制的安全标题,创建覆盖这一挑战的合规框架必要举行一些定制。现在,我们正在评估现有的安全标准和特定于掩护AI技能的自定义控制。这可能会扩展到包括针对AI系统独特安全挑战的AI特定安全和监管标准,如Cloud Security Alliance的AI安全倡议或NIST SP 800-218 AI更新的最新努力。
未来控制的研究与开发
掩护日益先辈的AI系统必要持续的创新和适应。我们在开发新的安全控制方面处于前沿,如我们在“重新构想先辈AI的安全基础办法”博客文章中所述。我们对研究和开发的承诺确保我们始终领先于新兴威胁,并继续增强我们的AI基础办法的安全性。
加入我们
在OpenAI,我们致力于不断发展和掩护先辈的AI。我们约请AI和安全社区加入我们的使命。通过申请我们的网络安全资助计划或加入我们的团队,您的贡献可以帮助塑造AI安全的未来。
开放职位:
软件工程师,安全
安全工程师,检测与相应(美国、英国、日本)
企业安全工程师
研究工程师,隐私
原文
博客 - 从零开始学AI
公众号 - 从零开始学AI
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
回复
使用道具
举报
0 个回复
倒序浏览
返回列表
快速回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
or
立即注册
本版积分规则
发表回复
回帖并转播
回帖后跳转到最后一页
发新帖
回复
惊落一身雪
金牌会员
这个人很懒什么都没写!
楼主热帖
腾讯叶聪:朋友圈爆款背后的计算机视觉 ...
处理接口幂等性的两种常见方案 ...
图文结合带你搞懂InnoDB MVCC
一个故事看懂CPU的SIMD技术
看完这个,还不会DVMA,请你吃瓜 ...
Kubernetes(k8s)CNI(flannel)网络 ...
如何获取iphone的UUID
关于 Java 的简介(评论抽奖送书) ...
聊一聊 TLS/SSL
数据湖选型指南|Hudi vs Iceberg 数据 ...
标签云
挺好的
服务器
浏览过的版块
运维.售后
快速回复
返回顶部
返回列表