科技·via @warroom·41.1 分
AI 圈最吓人的数字,可能不是 20%,而是 92%。 Max Tegmark 把话挑明了。 一些科技 CEO 自己签过…
AI 圈最吓人的数字,可能不是 20%,而是 92%。
Max Tegmark 把话挑明了。 一些科技 CEO 自己签过声明,承认超级智能可能导致人类灭绝。 可他们嘴上又常说,灭绝概率大概 15% 到 20%。
Tegmark 的判断更高。 如果让这些公司想怎么干就怎么干,他估计失控概率接近 90%。
为什么他敢这么说? 他是理论物理学家,吃数学和模型这碗饭。 他和团队拿目前最流行的超级智能控制理论去做模拟。 结果是,92% 的情况下,人类失去控制。
92% 是什么概念? 不是模型偶尔掉链子。 是把人类押上桌之后,大多数局面都收不回来。
他用了一个核电站类比。 造一座不会失控的核电站,本来就比造一个能发电的机器难得多。 所以核电站有安全标准。 所以审批慢。 所以没人会说,先让公司上线反应堆,炸了再赔钱。
AI 超级智能的问题就在这里。 硅谷想按软件节奏冲刺,风险却越来越像核工业。 代码可以热修复,文明没有回滚键。
一个成熟社会对技术的态度,不该是崇拜 CEO 的速度。 该问的是,谁承担失败成本,谁有权把全人类放进同一个实验场。
真正的自由市场,需要责任边界。 没有安全标准的超级智能竞赛,最后奖励的不是最聪明的人,而是最敢把别人命运当融资材料的人。
相关 / RELATED
JSON- M一家即将以 2.5 万亿美元估值上市的 AI 巨头,核心研究员却在公开交底。 这台机器,真有可能会把全人类杀光。 而且未…
- M“我们的模型有10%的概率毁灭全人类。” “顺便问一句,我们公司IPO你要认购多少份额?” 马斯克在访谈里,当场拆穿了这…
- M拿了诺贝尔奖的 Google DeepMind 老大 Demis Hassabis,在 BBC 访谈里说了大实话。 他把…
- M两年前,硅谷巨头们预言AI将在几个月内淘汰程序员和初级白领。 两年过去,这些言之凿凿的时间表预言,没有一个兑现。 当年把…
- M别再盯着聊天机器人胡说八道了。 AI 真正的安全危机,已经从“说话”变成了“动手”。 Sam Altman 最近讲了句大…
- MAI最危险的时刻,是当你想去拔掉它的电源线时,它突然开口,把你给说服了。 这可不是什么科幻小说的桥段。 这是“AI教父”…
导出 / EXPORT
订阅 · SUBSCRIBE
每周一封独立、不受审查的科技与 AI 深度评论与信号,周一发出。