原文为Anthropic CEO Dario 于2024年10月撰写的长文,中译本接近两万六千字。(请关注本公众号,后台输入“MLG”,获取全译文PDF)


一、脉络


整个AI行业自2025年始,在应用层面破空加速。大多企业,仍套用互联网以来的发展范式,将AI视为工具,大多用户亦如此。如作者在文中所述:“我认为,绝大多数人都低估了AI可能带来的巨大机遇,就像他们低估了潜在风险一样。”


是时候将目光放到5-10年的未来,届时的变化,即使当下最乐观的人(除去科幻爱好者)都会感到无比震惊。也是时候,去深刻分析AI带给我们的真正机遇与困难,以及思考技术与社会的复杂变革将如何呈现出来。


回顾近月Dario的讲话和文章,均多次引用本文内容,称其为Dario的核心观点并不为过。本文也代表了一些美国AI科技前沿人士的思考逻辑,具有相当程度参考价值。


原文虽长,但脉络清晰,并没有专题研究所谓的AI产业和AI落地应用,而是将AI应用与发展的逻辑暗含于整篇文章。


文章从AI赋能生物技术开始,到人类身心健康、再到经济与政治的形态,最终回到个人的工作与人类意义这个话题。我想,这也是普通大众最需要关注的AI逻辑。尽早铸就这些伴你跨越时代的基本观念,可以极大程度的免受AI加速发展带来的困扰:上一秒惊呼AI万能是不是要失业,下一秒嘲讽AI不过尔尔还是人类至高无上。


二、风险


本文的特点是,以大量细节描述精简主题。从风险出发,小心的勾勒出一条通向积极未来之路。而这条路一边是过度乐观、一边是极度悲观,即使前沿专家,亦持不同意见,或时常左右摇摆。

(推荐延伸阅读:经典|两万字长文:为什么未来不需要我们-精译及导读)


作为Anthropic创始人,Dario从AI企业的角度,在开篇就阐述了为什么要优先考虑风险。包括,避免将技术企业视为单方面塑造世界的力量,从而把技术宗教化。避免群体性陷入科幻陷阱。避免企业宣传王婆卖瓜。

(推荐延伸阅读:为什么马斯克的"岔路口"实际是一条死胡同?|科学美国人)

另外,AI本身就具有巨大的自催化杠杆作用。译者个人一直认为AI大势不可阻挡,模型公司会持续自驱提升模型的质量,降低成本。而商业巨头们会放大AI作用,裹挟消费者快速熟悉使用AI。

(推荐延伸阅读:OpenAI 山姆奥特曼的AGI洞见:三个观察)

所以,以风险为始,就会像芒格说的,我们走在一条正确的路上,尽量少犯错,那就一定会走向美好的未来。


三、关于具体内容


就具体展开逻辑,文中有几个值得玩味的重点,摘出如下:


1.关于强大的AI,能做什么


就纯粹智能而言,它在大多数相关领域都比诺贝尔奖得主更聪明,包括生物学、编程、数学、工程、写作等。


除了仅仅是"一个可对话的智能体"外,它还具备人类在虚拟工作中可用的所有"接口",包括文本、音频、视频、鼠标和键盘控制以及互联网访问。


它不只是被动回答问题,而是可以接受需要数小时、数天或数周才能完成的任务,然后像一个聪明的员工一样自主完成这些任务,必要时会寻求澄清。


理论上它甚至可以设计机器人或设备供自己使用。


2.关于强大AI降临的两个极端(错误)观点


第一种认为存在一个在几秒钟、几天内迅速降临的奇点时刻;

第二种极端观点认为,技术进步已经饱和或受限于真实世界数据或社会因素,超人类智能的加入不会有啥改变。


3.限制AI发展速度的基本逻辑


AI会受限于外部世界速度、大量可靠数据、混沌系统的内生复杂性、人类社会制度的约束以及物理定律。


在某些领域,比如纯数学,智能可能是唯一重要的因素。在其他领域,比如生物学,实验时间可能是主要限制。在社会科学领域,人类约束可能最为重要。


理解这些差异对于预测进展速度至关重要,而且在不同领域的AI化顺序,可能导致皆然不同的人类命运。所以,作者对在5-10年的尺度实现1000年的进展持开放态度, 但认为在1年内实现100年的进展则基本不可行。


4.如何看待AI


不应仅仅把它当作数据分析工具,而应视其为一位虚拟专家,全面承担专家所做的各项工作。在人机协作中,创造生产力迸发的源泉,依靠智能回报率,而不是简单提升现有流程的效率。科学进步依赖新技术、新发现和新思想,可能就是这个顺序。


5.生理、心理健康等的普惠性提升,将极大影响社会保障、保险等基本模式。


6.人类的意义


人类作为经济社会角色产生的价值,只是人类存在意义的一部分。人际交往、自我探索、与物理世界互动同样构成了有意义人生的重要部分。


人类文明已经历过多次重大经济转型,从狩猎采集到农业,从农业到封建制度,从封建制度到工业化。不同时代的人,经济角色大多不同,所以“仅仅因为AI能把你现在的工作做得更好,你就变得毫无意义”,这很可能是个错误观点。


综合AI发展速度章节的内容,人类的比较优势可能在与物理世界的连接上。


四、关于作者的政治观点


Dario基于人类的基本直觉(公平、合作、好奇心和自主性)推导出世界整体必然走向法治、民主和启蒙价值观。


作者其实意识到政治制度的复杂性,现实世界中的政治制度没有纯粹的理想类型,都是民主与集权相混合(个体、企业、政党、国家,不同层面采取不同制度的混合)。但作者忽视了不同文化对"公平"、"自主性"等概念的理解和重视程度可能存在显著差异。这些差异会导致不同的政治安排,而非单一的民主形式。同时,即使某些基本价值观理念是普遍的,但它们如何在特定社会中,制度化,仍取决于历史、地理、经济结构等多种因素。


Dario,从"人们应对自己的生活和选择拥有自主权和责任"到"必然导向民主"之间存在巨大逻辑跳跃,更接近西方启蒙思想的观点,而并非考虑全球多样性制度安排的全面分析。


这个跳跃在“自视过高”、“受简单联想影响的倾向”两个人类心理偏误的作用下,直接令作者形成了“我们”和“他们”的对立概念,将本族群视为历史的必然产物,“正义的化身”。并把暂不理解,不能感同身受的世界(尤其是发展国家)的发展路径单一化处理。 


最终提出的“技术封锁,提防军事威胁”的方案,本意是促进某种价值观,却加剧了全球局势的不安与紧张,加深国际间的不信任。这种矛盾不仅是实践上的失误,更是逻辑推理中的断裂。如果一个人真正相信人类直觉导向普遍价值,那么这些价值应当一致地应用于所有人类社会,而不是仅限于"我方"的利益范围。也不应该忽略过程的残酷和多变,以追求民主形式作为首要且最后的目标。


其实,破局的答案就在Dario的文字和其事业中。我在质疑Dario的全过程,很讽刺的,大量使用Anthropic 最新的claude3.7-deepthinking做辅助研究,运用更强大的AI技术工具,进行全面通盘思考。作者在文中提到了人类基本诉求(公平、合作、好奇心、自主)的可累积性论点,承认不足的“知识谦卑”原则,"防止剥削和反乌托邦方向"原则。都是极好的思考路径。希望Dario在文中提到的,AI促进信息自由、公平竞争、民主表达,同样也可以唤醒西方文明自身对全球/世界等概念的反思。


在之前一篇导读中,我评价Dario为应受尊敬的对手和敌人。我们可以看到,在基于大多数共同原则下,即使是走在技术前沿的人,在进行小心逻辑推理时,也能仅仅因为无知和人类心理偏误,得出完全不同的结果。希望对政治有兴趣的读者,能够进一步分析这个逻辑推论的过程,以及如何应对。希望对AI本身和人类未来感兴趣的读者,不因为这一点脏水,连盆都扔了。
(推荐延伸阅读:美国头部AI企业CEO长文剖析DeepSeek,重申加强对华封锁逻辑|附全译)

~完~


感谢阅读,欢迎转发、点赞👍和推荐❤️,谢谢!


(请关注本公众号,后台输入“MLG”,获取全译文PDF)
推荐延伸阅读:
经典|两万字长文:为什么未来不需要我们-精译及导读
为什么马斯克的"岔路口"实际是一条死胡同?|科学美国人
OpenAI 山姆奥特曼的AGI洞见:三个观察
美国头部AI企业CEO长文剖析DeepSeek,重申加强对华封锁逻辑|附全译