Compression

昨天一个同事在群里甩了一个 HTML 文件。打开一看，漂亮极了——渐变色的表头、响应式布局、数据可视化图表、三段式结论。AI 生成的，三秒钟的事。

群里安静了十分钟。

然后有人问了一句：「所以……结论是什么？」

又过了五分钟，发文件的人回了一句：「我也没细看，AI 生成的，大家自己看吧。」

这十分钟的沉默，就是 AI 时代最贵的成本。

如果我告诉你，ChatGPT 本质上是一个文本压缩器，你会相信吗？如果我说，智能的核心就是找到更好的压缩算法，这听起来是不是过于简化了？然而，这个看似激进的观点——“压缩即智能”（Compression is Intelligence）——正在成为理解机器学习和人工智能本质的一个关键视角。

这不仅仅是一个比喻。从信息论的角度看，压缩、预测和理解本质上是同一件事的不同侧面。当我们深入探讨这个观点时，会发现它不仅优雅地解释了为什么深度学习如此有效，还为我们思考通用人工智能（AGI）提供了一个全新的框架。