对话李开复:当AI比人聪明,我们还剩什么?

2024-12-12 | 来源: AI未来指北 | 转到微信 | 有0人参与评论 | 字体: 放大缩小 | 收藏 | 打印

后来，人们又有了另一种想法，认为建立工业社会的唯一途径是建立高度集中的管理体制

，如纳粹德国。因为这个论点是合乎逻辑的。他们认为工业的爆炸性力量，如此巨大的创造性和破坏性力量，只能由一个控制生活各个方面的高度集中的管理体制来管理。这导致了纳粹德国的恐怖，导致了世界大战。

现在回过头来看，我们知道这是一个错误，有更好方法来建立工业社会。但实际的历史进程更像是过山车，而不是一条直线。

现在面对人工智能，我们不知道如何建立一个人工智能社会，我们没有历史模型可以参考，即便我们最终能找到方法让人工智能造福人类。我担心的是，人们在这一过程中会不断尝试，或许是建立帝国，或许是建立高度集中的管理体制。即使最终找到了解决方案，这一过程中可能有数亿人会遭受极大的苦难。

李开复：回到人工智能的危险上，我想知道从短期和长期来看，您最担心的是以下哪些问题？

一是使用人工智能对其他人做可怕的事情；二是人工智能并非有意为之，但由于其奖励函数设计不当而造成伤害，它无意中伤害了人们；三是人工智能本身就变成了危险，并且有做坏事的欲望，就像科幻电影一样。

赫拉利：第三种是最不令人担忧的。

李开复：是的，我也同意。

赫拉利：我认为前两个问题非常严重，它们已经是当前的担忧。随着人工智能变得更加强大，这将是一个越来越大的担忧。

最常见的是，如果恶意行为者使用人工智能做坏事怎么办？这很明显，如果恐怖分子利用人工智能制造新的大流行病，这显然是非常危险的。因此，在公共演讲中，我更强调人工智能的第二个危害。不是因为它邪恶或想要接管世界，而是因为它是一种外来的智慧，非常难以控制，可能会产生许多我们没有预料到的不良后果。

受曹德旺邀请,李开复加入福建福耀科技大学!

李开复最新预测中国大模型终局(图

李开复:AI时代会让每个App都比人类更聪明

我们已经有了一个社交媒体的例子，即社交媒体平台由算法控制。公司给了算法一个特定的目标，即提高用户参与度、增加流量，让人们花更多时间在平台上。

这听起来像是个好目标，这对公司有好处，甚至对人们也有好处。因为参与度听起来像是好事。如果我展示人们感兴趣的内容，让他们在我的平台上花费更多时间，这不是好事吗？但实际情况是，负责社交媒体的算法决定了你在TikTok上看到的下一个视频将是什么，你在Facebook上看到的下一篇帖子将是什么。

它们发现了一种破解人类思维的方法，即如果目标仅仅是吸引人们的注意力。最简单的方法就是按下大脑中的仇恨按钮、愤怒按钮或恐惧按钮。

从进化的角度来看，这些事情会立即抓住人们的注意力。

当我们生活在非洲草原时，你走在草原上，走在森林里，你会看到各种各样的东西。你看到树木、看到云朵、看到各种事物，如果突然出现条蛇，你的全部注意力都会转向那里。因为为了生存，对你可能构成危险的东西是最高优先级。那些让你感到害怕的东西。所以你可以在草原上走几个小时，看到一条蛇，所有的注意力都会集中在那条蛇上。但在社交媒体上，你每时每刻都能看到“蛇”。当你浏览页面动态时，“蛇、蛇、蛇、蛇”，因为我们的程序设定是如果有蛇，所有的注意力都会集中在蛇上。这在非洲草原上是合理的，因为每几天才会遇到一次蛇。

但现在在社交媒体上，算法破解了我们的操作系统，它们发现如果你想让一个人一直不停地滚动屏幕，一直停留在平台上，你需要展示让他们变得害怕、愤怒或贪婪的内容。这对心理健康和社会健康都是毁灭性的。

而且起初公司的任何人都没有意识到算法会这样做。算法本身并不邪恶，它们没有试图伤害人们，它们被赋予了一个目标——即让人们在平台上花费更长时间。通过试错，它们发现了如何破解人类思维的方法。但这带来的结果对人类社会非常不利，而且这种情况可能会更大规模地发生。

我们开始时谈到了金融系统中的人工智能，你可以告诉人工智能让它去市场赚钱。你给人工智能一笔启动资金，比如说一百万美元，以及市场的访问权限，只有一个目标，就是赚钱。然后人工智能开始发明新的投资策略，甚至新的金融工具。就像在围棋中一样，它们变得比人类更有创造力。

几年内市场出现了繁荣，有大量新的人工智能创造的金融工具。人类无法理解，也无法监管，因为这超出了人类的能力范围。从数学角度来看，这超出了我们的能力范围。然后有一天，市场出现大崩溃，就像2008年那样。没有任何人理解发生了什么，因为我们已经失去了对金融市场的控制。