Cointime

扫码下载App
iOS & Android

谷歌突失Hinton!深度学习之父警告AI风险,对毕生工作表示遗憾

最新推文中透露了原因:为了自由地讨论人工智能的风险。

消息一出,整个科技圈炸了,人们震惊于AI已经让Hinton感到害怕了。

有网友直接懵住:到底发生了什么?还是我漏掉了什么?你不是曾说过GPT-4为人类的蝴蝶吗?

不少人还认为Hinton此举有待商榷,应该将关注人工智能安全工作常态化而不是离职。

甚至还有人劝他理解AI,而不是通过延迟研究来限制。现在潘多拉魔盒已经打开。

但Hinton的态度似乎十分坚定,在访谈中直言:对自己毕生的工作感到后悔。

而另一位巨头LeCun这边也表示,对Hinton的离职并不惊讶。

不少网友在底下已经开始就AI的各种问题寻求Hinton的见解:

你对开源AI有什么看法?你觉得需要注意和避免的最大危险是什么?

“对自己毕生的工作感到后悔”

据《纽约时报》消息,Hinton的离职是在4月提出的。辞职的理由一言以蔽之,是对人工智能风险的担忧。

这种忧虑甚至让这位深度学习之父表示:

我对自己毕生的工作,感到非常后悔。

我用一个借口来安慰自己,如果我没有这么做,还会有其他人。

梳理来看,引发Hinton担忧情绪的因素,有近期和远期两个方面。

先说近期影响,就是ChatGPT趋势下的新一轮AI竞争。

在微软将ChatGPT引入Bing后,挑战了谷歌的核心业务搜索引擎,然后谷歌马上推出了Bard作为应对。这让Hinton觉得,谷歌似乎不再扮演AI“好管家”的角色了。

而且科技巨头们正在掀起一场无法停止的角逐。由此带来的影响,将是生成式AI生产出非常多真假难辨的内容。

而从长远来看,Hinton认为,AI将会对就业市场造成巨大影响。如助理、翻译等各行各业都可能被扰乱。

再进一步,AI或许也会对人类构成威胁。

因为个人和企业不仅允许AI生成代码,实际上AI也有能力运行这些代码。因此Hinton认为有朝一日那种具有自主能力的杀手机器人,会成为现实。

他表示,AI实际上可以比人类拥有更聪明的想法——一些人相信这一点。但是他没有预料到人工智能的发展速度会像过去7个月那样快。

我曾以为这需要30-50年之久,但是现在我不这么想了。

这种想法,和之前十余位美国人工智能协会专家联名发出的警告,有些相似之处。不过在那时,Hinton并没有参与这项活动。

据《纽约时报》消息,离职前,谷歌CEO桑达尔·皮查伊和他通过电话,但具体内容Hinton不愿透露。

这场离职风暴中,谷歌研究首席科学家、谷歌高级副总裁Jeff Dean发表了一份声明,表示:

我们仍会坚持对AI采取负责任的态度。我们在不断学习理解新出现的风险时,也在大胆创新。

对于Hinton的离职,另一位深度学习三巨头之一LeCun表示,Hinton并没有和他透露要离开谷歌的打算,不过他对此并不感到十分惊讶。

OpenAI首席科学家是他学生

此番离职,或许对于Hinton来说,也是时候了。

ChatGPT、大模型让全球对于通用人工智能的想象更加具象,其背后的安全与风险等问题也被搬上日程。

一直以来,Hinton对于通用人工智能抱有赞叹和期待。

早在GPT-3刚出炉,其他两位图灵奖得主LeCun和Bengio都持不看好态度时,Hinton却表示,从GPT-3出色的性能可以推断,生命、宇宙和万物的答案“不过是4.398万亿个参数而已”。

直至ChatGPT出现时,他还将GPT-4比作人类的蝴蝶:

毛毛虫提取营养物质,然后转化为蝴蝶。人们已经提取了数十亿的理解金块,而 GPT-4 是人类的蝴蝶。

他惊叹其效果的同时也透露出不少隐忧。

RLHF机制是在培养一个超常的早熟儿。

而现在,随着ChatGPT风暴席卷越来越多的行业,Hinton想要站出来承担人工智能危机“敲钟人”的角色,就已经到了关键时刻。

值得一提的是,在通用人工智能探索的最前沿,Hinton的学生们仍扮演着重要角色。

比如,现在OpenAI的首席科学家Ilya Sutskever。

△左:Ilya Sutskever,右:Hinton;图源:多伦多大学

当年,Hinton与他的两位学生Ilya Sutskever和Alex Krizhevsky共同发明了卷积神经网络AlexNet,拿下当时最权威的人工智能大赛ImageNet第一名,而且精确度是第二名的两倍。

后来,他们还一起成立了公司DNNResearch,后被谷歌4400万美元收购。

Ilya Sutskever担任Google Brain的研究科学家,并成为后来AlphaGO众多合著者之一。直至2015年底他离开谷歌,加入OpenAI担任联合创始人以及首席科学家。

好了,期待Hinton大佬的新动向,对于他此番离职谷歌,你怎么看呢?

(如果你想更进一步了解Hinton是如何理解神经网络的,可以阅读Hinton:人类就是机器,绝妙的机器)

参考链接:

[1]https://www.theverge.com/2023/5/1/23706311/hinton-godfather-of-ai-threats-fears-warnings

[2]https://twitter.com/geoffreyhinton/with_replies

[3]https://www.nytimes.com/2023/05/01/technology/ai-google-chatbot-engineer-quits-hinton.html

来源:https://mp.weixin.qq.com/s/7XLa5d-UZ16O6Ead3MCanw

评论

所有评论

推荐阅读

  • Polymarket周一将发布重大公告

    3 月 21 日,Polymarket 团队成员 Mustafa 发文表示,将于周一公布一项「重大公告」,具体内容尚未披露。

  • Polymarket将于下周一公布重大消息,或为发币或融资相关消息

    Cointime 报道,3月21日消息,Polymarket 官方团队成员 Mustafa 于 X 平台发文表示,下周一即将公布重大消息。因推文内容包含硬币符号,社区猜测或为融资或代币发射相关重大消息。 此前消息,预测市场平台 Kalshi 与 Polymarket 据悉正与潜在投资者洽谈新一轮融资,目标估值均约为 200 亿美元。日前,Kalshi 已完成新一轮超 10 亿美元融资,估值达 220 亿美元,较去年 12 月上一轮融资时的 110 亿美元估值翻倍。知情人士透露,本轮融资由 Coatue Management 领投,Kalshi 目前的年化收入为 15 亿美元。

  • 美众议院金融服务委员会将于3月25日举行代币化听证会,聚焦资本市场未来

    3 月 21 日,美国众议院金融服务委员会将于美东时间 3 月 25 日 10:00 举行听证会,主题为「代币化与资本市场的未来」,预计将重点讨论区块链技术在金融体系中的应用与监管方向。

  • 黄金创43年来最大周跌幅:一周暴跌11%,避险属性遭质疑

    3 月 21 日,受中东局势升级及利率预期影响,黄金价格大幅下挫,创下自 1983 年以来最大单周跌幅。现货黄金周五跌至约 4488 美元/盎司,单周累计下跌约 11%,自 2 月底以来累计跌幅已超 15%。市场分析认为,美联储年内或维持利率不变、鲍威尔关于通胀上行的表态削弱了黄金吸引力。同时,在伊朗冲突背景下,比特币表现相对更强,期间反弹超 11%,对黄金形成对比。

  • 分析:加密市场山寨币交易量大幅下滑,市场兴趣持续降温

    3 月 21 日,Cryptoquant 分析师 Darkfost 发文称,加密市场山寨币交易量持续走低,投资者兴趣明显减弱。在熊市背景及地缘政治不确定性影响下,山寨币表现持续跑输比特币,风险偏好显著收缩。当前,Binance 山寨币日交易量约为 77 亿美元,其它主要交易所合计约 188 亿美元,远低于 2025 年 10 月与 2 月高峰期(Binance 曾达 400 亿至 500 亿美元,其它平台达 630 亿至 910 亿美元)。目前 Binance 占据约 40% 的市场份额。分析指出,历史上交易量高峰往往对应市场阶段性顶部与 FOMO 情绪释放,而当前低迷成交环境也意味着潜在机会通常出现在市场关注度最低阶段。

  • 消息人士:特朗普政府正制定方案以夺取伊朗核材料储备

    3 月 21 日,据美国哥伦比亚广播公司(CBS)报道,多位知情人士透露,特朗普政府一直在谋划获取或转移伊朗核材料的方法和选项。此时,由美国和以色列领导的针对伊朗的军事行动正进入一个更加不确定的阶段。关于特朗普是否会下令实施此类行动,目前时机尚不明确。一位消息人士表示,他尚未做出任何决定。但两位消息人士表示,相关规划的核心是可能部署来自联合特种作战司令部的部队,该部队是精英军事单位,常负责最敏感的防扩散任务。

  • 中东冲突与加息预期共振:全球资产大震荡,美股四连跌、债市「血洗」、黄金创43年最大周跌幅

    3 月 21 日,中东局势持续升级叠加 Federal Reserve 加息预期骤然升温,全球市场遭遇系统性冲击。美股连续第四周下跌创一年最长跌势,纳指单日跌超 2%,科技股全线承压;全球债市收益率大幅飙升,美债、英债、德债均创多年新高,资金大规模去杠杆。大宗商品剧烈分化,黄金跌破 4500 美元关口,单周暴跌超 10%,创 1983 年以来最大跌幅,避险属性遭质疑;原油则因中东供应风险暴涨,布油重返 110 美元上方,迪拜原油期货单日飙升超 16%。与此同时,比特币在 7 万美元附近获得支撑,连续三周跑赢黄金。市场分析认为,地缘冲突推升能源价格并加剧通胀预期,迫使货币政策路径重定价,全球金融条件快速收紧,风险资产仍处于下行与再定价过程中。

  • 美团开源560B参数定理证明模型:72次推理通过率97.1%,刷新开源模型SOTA

    据 1M AI News 监测,美团 LongCat 团队开源 LongCat-Flash-Prover,一个 5600 亿参数的 MoE 模型,专攻形式化定理证明语言 Lean4 的数学推理任务。模型权重以 MIT 协议发布,已上线 GitHub、Hugging Face 和 ModelScope。模型将形式化推理拆解为三项独立能力:自动形式化(将自然语言数学问题转化为 Lean4 形式语句)、草图生成(产出引理风格的证明框架)和完整证明生成。三项能力均通过 Agent 工具集成推理(TIR)与 Lean4 编译器实时交互验证。训练方面,团队提出 Hybrid-Experts Iteration Framework 生成冷启动数据,并在强化学习阶段引入 HisPO 算法稳定 MoE 模型的长程任务训练,同时加入定理一致性和合法性检测机制防止 reward hacking。基准测试显示,LongCat-Flash-Prover 在开源权重模型中刷新了自动形式化和定理证明两项 SOTA。MiniF2F-Test 上仅用 72 次推理即达 97.1% 通过率,ProverBench 和 PutnamBench 分别达到 70.8% 和 41.5%,每题推理次数不超过 220 次。

  • Erik Voorhees再次增持1.44万枚ETH,总持仓量突破11.7万枚

    3 月 21 日,据 AI 姨监测,ShapeShift 创始人、比特币早期支持者 Erik Voorhees 关联地址,过去 11 小时买入 14,424.53 ETH,总持仓突破 11.7 万枚,持仓均价 2,160.24 美元,当前浮亏 114.5 万美元。

  • 消息人士:特朗普政府正制定方案以夺取伊朗核材料储备

    Cointime 报道,3月21日消息,据美国哥伦比亚广播公司(CBS)报道,多位知情人士透露,特朗普政府一直在谋划获取或转移伊朗核材料的方法和选项。此时,由美国和以色列领导的针对伊朗的军事行动正进入一个更加不确定的阶段。 关于特朗普是否会下令实施此类行动,目前时机尚不明确。一位消息人士表示,他尚未做出任何决定。但两位消息人士表示,相关规划的核心是可能部署来自联合特种作战司令部的部队,该部队是精英军事单位,常负责最敏感的防扩散任务。(金十)