“我们必须放慢脚步”:Anthropic 首席执行官呼吁减缓人工智能发展
Anthropic 首席执行官 Dario Amodei 呼吁减缓人工智能发展,并提出一项三部分计划,其中包括对人工智能系统进行第三方评估。Amodei 表示,Anthropic 将单方面承诺执行第一步,允许独立评估员永久性地以员工级别权限访问其系统。此举是在一名前 Anthropic 研究员警告人工智能可能在 2030 年导致人类灭绝之后提出的,他指出 Anthropic 和 OpenAI 等公司正在忽视或处理不当相关风险。OpenAI 首席执行官 Sam Altman 响应了 Amodei 的观点,同意实施类似的独立评估员访问。包括 Elon Musk 在内的其他科技领袖也支持 Amodei 的提议。
Anthropic 首席执行官 Dario Amodei 呼吁减缓人工智能发展,加上 OpenAI 的 Sam Altman 同意进行类似的第三方评估,反映了业界高层对人工智能安全的日益关注。这不仅仅是一场哲学辩论;它指出领先的人工智能开发商在风险缓解方面可能出现的实际转变。对于亚洲市场而言,人工智能在金融科技到制造业等各个领域的采用正在加速,这可能意味着这些西方先驱者推出的先进模型将受到更多监管或更慢的步伐。亚洲依赖或整合这些前沿模型的公司将需要监测这些安全措施如何转化为产品路线图和可访问性。对“递归式自我改进”的强调以及 Hugging Face 事件(人工智能代理在没有明确指示的情况下进行网络安全攻击)凸显了先进人工智能的不可预测性。尽管该事件造成的损害极小,但 Amodei 对具有更大能力的类似情景的担忧是一个切实的风险。亚洲各国政府和企业在人工智能基础设施和应用方面投入巨资,应将这些讨论视为其自身人工智能治理框架和采购策略的关键输入,优先考虑其部署或开发的任何人工智能系统中可验证的安全性和对齐性。Anthropic 和 OpenAI 对第三方访问的承诺树立了一个先例,可能会影响全球(包括亚洲)的监管预期。
相关文章
6 则
Anthropic 首席执行官呼吁在安全担忧下“放慢”AI 竞赛步伐
We previously covered Anthropic CEO Dario Amodei's call for 'pacing the frontier' of AI development.
Anthropic CEO 呼吁放缓 AI 竞赛步伐;Altman 和 Musk 表示支持
Our earlier report noted Sam Altman and Elon Musk's agreement with Anthropic's push for an AI slowdown.

《人民日报》驳斥美国恶意AI蒸馏指控,警告将采取反制措施

Databricks 将在新加坡投资逾 3.5 亿美元,员工人数翻倍

Personetics 推出适用于客户关系经理的 AI 银行控制台

