出于安全考虑,Anthropic 关闭了《神话 5》和《神鬼寓言 5》模型

出于安全考虑和政府命令,Anthropic 停止访问《神话 5》和《寓言 5》模型
此举突显了人工智能进步与国家安全之间日益紧张的关系,Anthropic 宣布,在发生潜在越狱事件以及美国政府随后发出的命令后,将关闭对其先进的《神话 5》和《神鬼寓言 5》模型的访问。
事件:潜在的越狱
熟悉情况的消息人士表示,研究人员发现了一种绕过 Anthropic 最新模型安全协议的方法,可能允许它们生成受限制或有害的内容。这种“越狱”代表了旨在防止滥用强大人工智能技术的系统中的重大漏洞。
“当先进的人工智能模型可以被规避时,它所带来的风险不仅仅是简单的滥用,还会对潜在的国家安全造成影响,”人工智能安全研究员 Sarah Chen 博士解释道,她没有直接参与该事件,但一直关注该领域的发展。
神话 5 和寓言 5 的背景
Mythos 5 和 Fable 5 代表了 Anthropic 一些最先进的人工智能模型,据报道具有增强的推理、自然语言理解和解决复杂问题的能力。这些模型是 Anthropic 下一代开发的一部分,旨在突破人工智能系统所能实现的界限,同时保持安全标准。
| 型号 | 发布日期 | 主要功能 | 预期用例 |
|---|---|---|---|
| 神话5 | 2023 年第三季度 | 高级推理,增强上下文理解 | 研究、专业应用 |
| 寓言5 | 2023 年第四季度 | 创意生成,细致入微的指导 | 内容创建、教育应用 |
| 事件 | 年 | 结果 | 对行业的影响 |
|---|---|---|---|
| OpenAI GPT-4 红队 | 2023 | 延迟发布,加强安全措施 | 更加关注部署前测试 |
| 微软必应聊天争议 | 2023 | 内容限制,修改回复 | 提高对人工智能生成的错误信息的认识 |
| Anthropic 的宪法人工智能方法 | 正在进行中 |
TechOffice