Anthropic公司放弃了对《克劳德·费布尔5》隐藏限制的规定。

- 在受到广泛批评后,Anthropic 道歉并废除了一项隐藏的 Claude Fable 5 策略,该策略悄悄降低了某些高级 AI 研究查询的性能。.
- 研究人员警告说,这些限制可能会将人工智能能力集中在少数几家公司手中,并减缓dent 科学进步。.
- 这场争议的出现正值 Anthropic 准备进行潜在的 IPO,估值接近 9650 亿美元之际,这使得该公司与研究界的关系受到密切关注。.
人智公司就此道歉并撤回了原本计划 秘密限制人工智能开发者使用Claude Fable 5性能的政策。科学家们警告说,这项限制性政策可能会使人工智能的高级功能仅供少数公司使用,从而阻碍全球科学的发展。
Anthropic公司6月10日做出的决定,其影响远不止于一家公司的行为本身。鉴于该公司近9650亿美元的估值以及即将进行的IPO,这一dent 凸显了人工智能领域一个至关重要的矛盾:开发最佳模型的公司如何在满足自身竞争需求的同时,维系推动全球创新的开放研究文化。.
Anthropic公司对《克劳德·费布尔5》的隐瞒限制引发业界强烈抗议
发布了 Claude Fable 5 6月9日,Anthropic公司 ,并公开了 四类保护措施,包括网络安全、生物学、化学和人工智能研究。其中三类措施的运作方式类似:一旦检测到敏感查询,系统要么会完全拒绝该查询,要么会将用户引导至其之前的顶级产品Claude Opus 4.8,并发出警告。
然而,第四类问题与其他问题有所不同。当用户询问有关新兴人工智能的问题时,Fable 5 会在不告知用户的情况下降低输出质量。 据《财富》杂志报道,该公司概述了旨在降低系统性能的干预措施,但并未透露具体细节。所有细节均可在 Anthropic 公司长达 319 页的系统手册 中找到。
据 Anthropic 公司称,这项限制措施生效的概率约为 0.03%。但令研究人员担忧的远不止这个百分比。
据报道,Anthropic公司解释说:“我们做出了错误的权衡,对于未能找到合适的平衡点,我们深表歉意。”.
批评人士称,克劳德·费布尔5的限制威胁到dent 的人工智能研究。
这种批评来自一些鲜少持相同观点的人。开源支持者、从事人工智能安全研究的人员,甚至包括Anthropic公司的前员工,都在系统卡发布后的几个小时内提出了反驳。.
人工智能初创公司Prime Intellect的研究主管威尔·布朗表示,这项政策让人感觉该公司“正在自掘坟墓”。他还补充说,越来越多的公司正在评估前沿系统的安全性和可靠性。这种隐蔽的性能下降可能会破坏他们的验证过程。.
曾任艾伦人工智能研究所负责人、开放模型研究员内森·兰伯特(Nathan Lambert)的tron声明措辞更为强硬。 在X网站上表示 这项政策“将Anthropic公司明确地描绘成反科学的,因此也是反进步和反安全的。”
AnswerDotAI 的联合创始人杰里米·霍华德将这个问题描述为一场竞争性的权力争夺。霍华德认为,Anthropic 公司自己的研究人员仍然可以在内部使用不受限制的模型,这意味着人工智能前沿技术将不断进步,而外部研究人员则会落后。他指出,“人工智能前沿技术不断进步,权力失衡现象却日益加剧。”
就连前 Anthropic 员工也发表了看法。曾共同领导该公司人工智能科学家计划的 Behnam Neyshabur 发帖称,限制这些能力“从根本上减缓了科学和技术进步,对人类而言是负面的”。
这会对 Anthropic 的 IPO 产生什么影响?
此次事件dent 在Anthropic公司非常敏感的时期。该公司于6月1 秘密dent提交了IPO文件,以 9650亿美元的隐含估值筹集了650亿美元。在这种情况下,估值很大程度上取决于企业客户和研究界的信任。
除了人工智能研究争议之外,Fable 5 的发布还面临着其他方面的批评。该模型采用的强生物学过滤器使其无法回答有关细胞膜和线粒体的问题,而这些通常是高中课程的内容。 据 报道,尽管该模型能够轻松讨论 TNT 和密码风险,但它却无法解释 mRNA 疫苗的作用机制以及花粉症的病因。
由于Anthropic新推出的Mythos级数据保留策略存在数据保留问题,微软也限制了员工使用Fable 5。出于信任和安全考虑,提示和输出的保留期限设置为30天,而标记的内容则保留长达两年。.
接下来是什么?
Anthropic公司表示,修订后的政策将使Fable 5的AI开发安全保障措施更加透明。如果系统检测到用户正在进行前沿AI研究,可以选择拒绝其请求或切换到其他系统,并在两种情况下都通知用户。.
Anthropic公司承认存在权衡取舍。由于安全措施现在已公开可见,该公司别无选择,只能更广泛地应用它。这意味着更多无害的查询将被拦截。该公司表示正在努力提高分类器的精度。此案揭示了一个更为严重的问题:随着人工智能模型能力的提升,训练成本也会上升,限制竞争对手使用此类工具的诱惑也会随之增加。Anthropic公司的迅速转变究竟会开创dent ,还是仅仅推迟下一次隐蔽限制的尝试,将取决于其他业内人士的反应。.
如果你正在阅读这篇文章,你已经领先一步了。 订阅我们的新闻简报,继续保持领先优势。
常见问题解答
人智公司秘密开展人工智能研究的政策是什么?
Anthropic公司设计的Claude Fable 5会在检测到用户进行前沿人工智能开发任务时,悄悄降低输出质量,这与其他会公开拒绝或重定向请求的安全措施不同。在遭到广泛批评后,该公司撤回了这项策略,并表示未来在该领域采取的安全措施将对用户可见。.
研究人员为何反对这些限制?
批评人士认为,这项政策将允许 Anthropic 自己的研究人员使用不受限制的模型,而外部科学家则只能获得降级的结果,这将使人工智能能力集中在少数大型实验室,并可能损害测试前沿模型的第三方安全评估公司。.
Anthropic是如何回应舆论反弹的?
Anthropic 公司道歉称“我们做出了错误的权衡”,并修改了政策,使 AI 开发保障措施现在对用户可见,这意味着模型要么公开拒绝请求,要么将用户重定向到能力较弱的模型,而不是悄悄削弱其响应。.
免责声明:本页面提供的信息并非交易建议。Cryptopolitan.com对任何基于本页面信息进行的投资概不负责。我们tron您在做出任何投资决定前进行独立dent /或咨询合格的专业人士。Cryptopolitan研究

阿什什·库马尔
阿什什·库马尔是一位拥有八年新闻从业经验的加密货币和金融记者。他主要报道加密货币市场、监管、 DeFi以及交易所生态系统的最新动态。他曾就职于Coingape、Todayq和Newsroompost等媒体。阿什什拥有印度管理学院加尔各答分校(IIMC)英语新闻专业的研究生文凭(PGDP)。他还采访过包括亚瑟·海耶斯、萧逸、奥斯汀·费德拉等在内的多位业内人士。.
学速成课程
- 哪些加密货币可以让你赚钱
- 如何通过钱包提升安全性(以及哪些钱包真正值得使用)
- 专业人士使用的鲜为人知的投资策略
- 如何开始投资加密货币(使用哪些交易所、购买哪种加密货币最划算等)















