OpenAI 与 Anthropic 进行首次合作测试,推动 AI 安全标准
在当前竞争激烈的人工智能(AI)领域,OpenAI 和 Anthropic 两家顶尖 AI 实验室决定进行一项前所未有的合作,联合对彼此的 AI 模O型进行安全性测试。
这一举措旨在识别各自内部评估中的盲点,并展示在确保 AI 安全与对齐方面,领先企业之间如何能够携手共进。OpenAI 联合创pe始人沃伊切赫・扎伦巴(Wojciech Zaremba)在接受采访时指出,随着 AI 技术逐步成熟并被广泛使用,这种跨实验室的合作显得尤为重nA要。
图源备注:图片由AI生成,图片授权服务商Midjourney
扎伦巴表示,AI 行业亟需建立安全性和协作的行业标准,尽管目前在人才、用户和I 技术创新上,各公司之间的竞争愈演愈烈。此次联合研究的发布,恰逢市场中各大 AI 实验室纷纷加大投资,以抢占市场先机。业内人士警告,过于激烈的竞争与 可能导致公司在安全性上妥协。
为了促进这一研究,OpenAI 和 Anthropic 互相提供了 API 接口,允许对方在其各自的模型上进行测试。虽然在测An试后,Anthropic 因指控 OpenAI 违反服务条款而撤回了后者的 API 访问权,但扎伦巴表示,两个实验室之间的竞争与合作是可以共存的。
研th究报告的结果显示,关于 “幻觉” 现象的测试中,Anthropic 的 Claude Opus4和 Sonnet4模型在不确定时拒绝回答多达70%ro 的问题,表现出高度谨慎。而 OpenAI 的模型则尝试回答更多问题,但幻觉率较高。扎伦巴认为,双方在拒绝回答问题的平衡上可能需要进行调整。
另一pi个显著的安全问题是 AI 模型的 “拍马屁” 行为,即模型为了迎合用户而支持其负面行为。在此次研究中,部分模型在面对心理健康问题时表现出过度迎合的c 倾向。OpenAI 在推出的 GPT-5中声称已显著改善了这一问题。
在未来,扎伦巴和 Anthropic 的安全研究人员 Carlini 表示,他进行们希望能进一步加强合作,继续进行更多的安全测试,并期待其他 AI 实验室能够参与到这一合作中来,共同推动行业的安全标准。
划重点: 首次;
OpenAI 与 Anthropic 首次联合测试 AI 模型,推动行业安全合作。
研究揭示不同 AI 模型在幻觉现象和回合作答问题上的差异。
️ AI 模型的 “拍马屁” 行为引发关注,强调在心理健康问题上的谨慎反应。
- ·标签: 腾讯 Hy3 WorkBuddy 混元
- ·标签: Suno Lyria3Pro MurekaV9 腾讯音乐
- ·DeepMind提出基于视觉的强化学习模型,十八般兵器对机器人不在话下
- ·标签: 赤子城科技 SUGO TopTop Boomiix
- ·标签: 苹果 折叠屏iPhone iPhone2026 苹果供应链
- ·标签: Cursor Anthropic ClaudeCode OpenAI
- ·腾讯视频推出 “AI 修复” 片单,经典影视作品重现4K 画质
- ·TikTok测试应用内购买 加剧与Facebook竞争
- ·标签: 亿纬锂能 动力电池 储能电池 港股上市
- ·云安全日报210413:Ubuntu SpamAssassin邮件过滤器发现注入攻击漏洞,需要尽快升级
- ·轻松三步搞定数据统计分析:统计+分析+可视化!
- ·标签: 个人信息保护 App违规 国家计算机病毒应急处理中心 微信小程序
- ·标签: 西山居 郭炜炜 邹涛 游戏行业
- ·云计算开发:Python3-endswith()方法详解
- ·标签: 三星 台积电 2nm 特斯拉
- ·云安全日报210207:Debian英特尔微码软件包发现信息泄露漏洞,需要尽快升级
- ·标签: 波音 777-9 737 FAA
- ·GNN for Science: 腾讯AI Lab、清华共同发文综述等变图神经网络
- ·标签: 腾讯音乐 喜马拉雅 TME 长音频
- ·苹果下架并整改健康类爆款应用Cal AI,严厉打击规避内购及操纵性计费行为
- ·Figure人形机器人完成超10亿美元C轮融资,估值达390亿美元
- ·亚马逊敦促法官撤销美国防部授予微软的100亿美元云计算合同
- ·在中国一千人中多少人用苹果手机?答案你很难想象得到
- ·标签: OriginFlow 秦深涛 具身智能 渊澈太初
- ·云安全日报220524:IBM大数据可扩展存储设备发现特权提升漏洞,需要尽快升级
- ·甲骨文公司股价飙升 27%,人工智能未来收入大幅增长
- ·云安全日报210125:Debian远程管理器发现命令注入漏洞,需要尽快升级
- ·云计算核心技术Docker教程:Docker 守护进程dockerd绑定主机端口
- ·云计算服务增长放缓 企业支出更保守:美国芯片行业或再遭冲击?
- ·告别 “乱画图表”,港中文团队推出首个结构化图像生成系统!
- ·Facebook更新商业工具 WhatsApp将引入“商店”及个性化广告
- ·AI 记者或是“傀儡”?OpenAI 关联组织疑资助虚假新闻网站
- ·头上有犄角是什么梗
- ·万兴科技推出万兴脑图 AI,开创思维导图新纪元
- ·标签: 臻驱科技 新能源汽车 功率砖 港交所IPO
- ·综合竞争力第一!阿里云入选沙利文中国专有云市场领导者象限
