顶级 AI 巨头联合签署“ AI 危险声明”公开信


全球的顶级 AI 领导人在一起签署了一封公开信,信中强调了人工智能的危险,以及它可能对人类造成的巨大伤害。

信中的引言呼吁全球的 AI 商业决策者“公开地讨论人工智能会带来的最大风险”,使更多业内人士和普通民众对人工智能的风险有充足的了解,从而减轻人工智能对人类生存构成的威胁。

但公开信的正文内容并不多,只有寥寥几句话:

Mitigating the risk of extinction from AI should be a global priority alongside other societal-scale risks such as pandemics and nuclear war.

减轻人工智能灭绝的风险应该是全球的优先事项,正如流行病、核战争等其他全人类社会规模的危险一样。

该公开信的参与人都是 AI 领域的名人,比如被称为人工智能“教父”的 Geoffrey Hinton,以及

  • OpenAI 的 CEO 兼联合创始人 Sam Altman
  • Anthropic 的首席执行官 Dario Amodei、
  • Google DeepMind 的首席执行官 Demis Hassabis
  • 微软的首席技术官 Kevin Scott

此外还有一大堆涉略或 AI 领域的名校教授、官员记者、社会学家,其中亦有乏国内的清华大学教授、中国科学院教授等人士参与。

比起“正式公告”,这份公开信更像是一份“共识声明”:集合 AI 巨头们的话语权,来呼吁业内人士正视 AI 的发展风险,避免因 ChatGPT 等 AI 技术的狂热浪潮冲昏了头脑。


在此之前,AI 教父、图灵奖得主、深度学习先驱 Geoffrey Hinton 就辞去了在谷歌长达十余年的 AI 开发工作,并公开讨论 AI 所带来的危害。

在一个 MITEmTech 数字会议上,他表达了对当前 AI 发展的恐惧:

过去,我认为计算机模型不如大脑,所以一直改进模型,以让 AI 更多地了解并接近大脑。但现在 GPT-4 等模型的性能让我惊觉,计算机模型以可以使用反向传播,而大脑不行,反向传播可能比人类更擅长学习

已经能够进行常识性推理的 ChatGTP 非常可怕;继续发展之后,AI 或将可能操纵人类做坏事。

另一方面,缺乏控制的数字智能(Geoffrey Hinto 认为数字智能不同于人类智能),很可能会自行设定与人类目标相冲突的目标,从而使非人类智能在与人类的交互中占据上风。


相關推薦

2023-06-28

27 日早间,大数据巨头 Databricks 宣布已签署最终协议,将以 13 亿美元收购生成式 AI 创业公司 MosaicML。此笔交易是截至目前生成式 AI 领域内所公布的最大一笔收购案。 收购完成之后,MosaicML 将成为 Databricks Lakehouse 平台的一部分

2023-04-01

得主 Yoshua Bengio 等上千名行业高管和专家签署了一封公开信,呼吁所有 AI 实验室立即暂停对比 GPT-4 更强大的 AI 系统的训练至少 6 个月。并表示,这种暂停应该是公开的和可验证的,且包括所有关键参与者。如果不能迅速实

2024-10-24

” 由 60 多家公司、非营利组织和大学组成的联盟在一封公开信中呼吁美国国会在今年年底前颁布法律,将 AISI 编入法典。签名者包括 OpenAI 和 Anthropic,这两家公司都已与 AISI签署协议,在 AI 研究、测试和评估方面展开合作。微

2024-07-04

《Nature》的一篇报道指出,很多科技巨头宣称他们的AI模型是开源的,但实际上并不完全透明。这些模型的数据和训练方法往往没有公开,这种做法被称为“开源洗白”,严重妨碍了科学研究的可复现性和创新。 研究发现,在

2024-08-23

epMind 内部近 200 名员工签署了一封联名信,呼吁这家科技巨头取消与军事组织的合同。这封信是在 AI 实验室内部越来越担心其技术被出售给参与战争的军方的情况下流传开来的,工作人员称这违反了谷歌自己的 AI 规则。 DeepMi

2024-09-30

OpenAI 联合创始人兼首席科学家 Ilya Sutskever 辞职。OpenAI 顶级研究科学家之一 Jan Leike 也辞职。 2024年8月5日 OpenAI 联合创始人兼总裁 Greg Brockman 开始休假,直至年底。联合创始人兼备受尊敬的研究员 John Schulman 离职。 2024年9月25

2023-02-02

,欢迎更多企业伙伴加入,携手共建,打造桌面操作系统顶级社区,推动国产操作系统产业生态健康发展。详情可查看:【https://mp.weixin.qq.com/s/yk82DEQSG0knaQNKyc-vsg 】 openKylin(开放麒麟)社区旨在以“共创”为核心,在开源

2022-04-12

源和商业解决方案。Puppet 的首席执行官 Yvonne Wassenaar 在公开信中表示,Puppet 已获得 1 亿美元的年度经常性收入。且自 2011 年以来,Puppet 的年度 DevOps 状态报告也一直被认为是行业的标志性报告。 Wassenaar 称,“曾几何时,我

2023-02-04

,欢迎更多企业伙伴加入,携手共建,打造桌面操作系统顶级社区,推动国产操作系统产业生态健康发展。详情可查看:【https://mp.weixin.qq.com/s/yk82DEQSG0knaQNKyc-vsg 】   openKylin(开放麒麟)社区旨在以“共创”为核心,

2024-07-27

资,并表示参投方有阿里、腾讯、小米等科技巨头及多家顶级投资机构。 此前,国内已有两家大模型创业公司在以约200亿元的估值水平进行新一轮融资,即智谱AI与月之暗面。此外,新晋大模型公司阶跃星辰也跻身AI独角兽序列

2023-03-28

那我必须支持。”据王慧文透露,公司75%的股份用于邀请顶级研发人员。 2月15日,光年之外迎来一位技术骨干——北京智源人工智能研究院副院长刘江,其在朋友圈发文表示加入王慧文的光年之外团队:“将帮助老王(王慧文

2023-10-18

融资金额3亿美元,阿里、腾讯、小米等科技巨头及多家顶级投资机构均参与了本轮融资。加上天使轮的5000万美元,百川智能的融资金额已达3.5亿美元。 百川智能成立于2023年4月10日,由前搜狗公司CEO王小川创立。其核心团队由

2023-04-07

式与企业构建合作伙伴生态体系,共同打造桌面操作系统顶级社区,推动Linux开源技术及其软硬件生态繁荣发展。 社区首批理事成员单位包括麒麟软件、普华基础软件、中科方德、麒麟信安、凝思软件、一铭软件、中兴新支点

2022-09-25

式与企业构建合作伙伴生态体系,共同打造桌面操作系统顶级社区,推动Linux开源技术及其软硬件生态繁荣发展。社区首批理事成员单位包括麒麟软件、普华基础软件、中科方德、麒麟信安、凝思软件、一铭软件、中兴新支点、