打开网易新闻 查看精彩图片

1948年,克劳德·香农在《贝尔系统技术杂志》上发表了一篇论文。

论文分上下两期,题目平平无奇:《通信的数学理论》。

没有宣言,没有口号,也没有人站出来说,一个新时代从此开始。

但在论文开头不远处,香农做了一个极其大胆的切割:

通信的工程问题,不负责理解一句话是什么意思。

它只负责一件事——一个地方产生的消息,怎样在另一个地方被准确或近似地重现。

这听起来近乎冷酷。

母亲病危的电报和餐馆推送的广告,在意义上天差地别;莎士比亚的十四行诗和一串随机数字,也不在同一个精神世界里。

可在香农搭建的理论中,它们首先都是消息。

都可以被编码,都要经过信道,都会遭遇噪声,都可以追问压缩的极限和传输的上限。

香农没有因为不懂意义而绕开问题。

他是主动把意义请了出去。

正是这一刀,切出了现代信息世界的地基。

后来,人们把照片、音乐、电影、文字、银行余额和航天器发回的信号,统统变成比特。互联网因此成为可能,数字存储因此成为可能,卫星通信、移动网络和深空探测也因此有了共同语言。

香农被称为“信息论之父”,当然没有问题。

但这句话太容易把他写成一尊手捧公式的神像。

香农真正厉害的地方,不只是算出了什么。

而是他比大多数人更早明白:要建立一个能工作的理论,首先要知道哪些问题暂时不要回答。

一个学科的开山,有时靠的不是不断增加内容,而是划清边界。

1916年,香农出生在美国密歇根州佩托斯基,童年在北部小镇盖洛德度过。

那里人口不多,冬天很长。父亲做过商人和法官,母亲教语言,后来当了中学校长。

香农不是那种从小四处参加竞赛、被层层机构筛选出来的神童。

他更像一个拆东西的孩子。

他做模型飞机,修收音机,摆弄电线和机械装置。家里有个远房亲戚叫托马斯·爱迪生,这个关系在血缘上并不算近,却很适合被后来的传记作者当作命运伏笔。

其实真正有用的细节,不是爱迪生。

是小镇的铁丝围栏。

少年香农曾利用铁丝围栏搭起简陋的电报线路,让自己可以和朋友传递信号。今天看,这不过是一个聪明孩子的手工作业。但它已经露出香农一生反复追问的那个问题:

一个动作,怎样在远处变成另一个动作?

消息如何离开发出它的人,经过一段不可靠的路径,再抵达另一端?

这和“说了什么”还不是一回事。

铁丝不知道孩子们在谈什么。

电流也不知道。

它们只承担传递。

香农后来建立的庞大理论,最初就藏在这种朴素的分工里。

1932年,他进入密歇根大学,同时学习数学和电气工程。

这两个专业在别人那里可能只是双学位,在香农这里却像两块等待接通的电路。

工程让他看见真实机器怎样动作,数学让他追问这些动作能不能被压缩成一套符号。

1936年大学毕业后,他去了麻省理工学院,给万尼瓦尔·布什的“微分分析机”做研究助理。

那是一台庞大的模拟计算装置。齿轮、转轴和机械积分器占据房间,控制部分则依赖大量继电器。机器运转时,不是安静地亮起屏幕,而是发出机械系统特有的碰撞与咔嗒声。

香农每天面对的,就是这些开关。

继电器无非两种状态:开,或者关。

电路也无非在回答一些判断:这个条件成立吗?两个条件是否同时成立?只要其中一个成立,后面的装置是否就该动作?

很多工程师把这些当作布线经验。

香农却看见,英国数学家乔治·布尔在19世纪建立的逻辑代数,正好可以描述它们。

“真”和“假”,可以对应“通”和“断”。

“并且”“或者”“不是”,可以变成继电器的组合。

于是,一团依赖老师傅经验连接的电线,突然可以先在纸上计算,再变成电路。

1937年,21岁的香农完成硕士论文《继电器与开关电路的符号分析》。论文次年发表。

它后来常被称作20世纪最重要的硕士论文之一。

这种评价容易让人只顾惊叹“年轻天才”。

但这篇论文更值得看的,是香农的工作方法。

他没有发明继电器,也没有发明布尔代数。

两样东西都已经存在很久。

他做的是把它们接上。

一个属于嘈杂的机器房,一个属于抽象的数学课本;一个处理金属触点,一个处理真假命题。此前,人们习惯把它们看成两个世界。

香农看见了共同结构。

真正重要的创新,往往不是创造一块从未存在的砖,而是发现两堵墙原来可以承重同一座屋顶。

这篇论文给数字电路提供了一种设计语言。

从此,复杂开关系统不必只靠试错和直觉。工程师可以把要求写成逻辑表达式,化简,再实现为电路。后来计算机里的逻辑门,虽然在材料和规模上早已超出继电器时代,却仍沿着这条路工作。

香农第一次做成的事情,是把逻辑从人的脑子里搬进机器。

但他没有立刻成为某种“计算机领袖”。

他继续在麻省理工学院攻读博士,研究的题目甚至不是电路,而是遗传学。

他的博士论文试图用代数描述群体遗传中的关系。这个方向没有像硕士论文那样改变一个时代,却说明香农并不把自己锁在某个行业标签里。

对他来说,电路、遗传、密码、下棋和杂耍,不是互不相干的职业赛道。

它们都是可以寻找结构的问题。

1940年前后,香农短暂进入普林斯顿高等研究院,随后回到贝尔实验室。

世界已经进入战争。

而战争会把“消息怎样传递”变成生死问题。

第二次世界大战期间,香农在贝尔实验室参与防空火力控制相关研究。

高射炮要打中的,不是眼前的飞机,而是炮弹飞到高空以后,飞机将会抵达的位置。

系统必须从雷达和观测数据中估计目标运动,过滤误差,再把预测传给武器。

这里没有哲学讨论的余地。

信号会抖动,测量会失真,线路会受干扰,敌人还会主动欺骗。

消息如果不能穿过噪声,意义再重大也到不了终点。

香农同时研究密码通信。

1945年,他完成一份保密报告《保密系统的通信理论》,后来解密发表。密码不再只是技巧和经验,也可以被放进概率、密钥、消息和对手所获信息的统一框架里讨论。

他在这里证明和澄清了一件关键的事:某些

密码系统在满足严格条件时,可以获得数学意义上的完美保密。

这不是说敌人“很难”破译。

而是说,即使敌人拥有无限算力,密文也没有额外泄露关于明文的信息。

战争期间,英国数学家艾伦·图灵到美国访问时,曾在贝尔实验室和香农见面。两个人都在处理最高机密,不能交换各自最核心的工作,却谈过机器下棋和机器思维一类问题。

这幅画面很有意思。

两个后来被放进计算机史教科书的人,坐在同一栋楼里。一个在追问机器能不能表现出智能,一个在追问信息究竟能不能被度量。

他们当时并不知道,几十年后,这两个问题会在同一块芯片上相遇。

战争并没有“创造”信息论。

在香农之前,哈里·奈奎斯特、拉尔夫·哈特利等贝尔实验室研究者,已经研究电报速度、带宽和信息量之间的关系。香农不是从空白处起步,更不是一个人在阁楼里发明数字时代。

他拥有一批前人的结果,也拥有贝尔实验室这种少见的组织条件:电话工程、数学、电子器件和真实网络故障,全都在身边。

但前人的工作仍像散落的零件。

战争让香农更清楚地看见,这些零件背后其实是同一个问题:

在不确定性中,消息怎样抵达?

1948年,《通信的数学理论》发表。

香农在论文里建立了信源、信道、编码、噪声和接收端之间的基本框架。

今天,这几个词已经普通得像水管的入口和出口。但在当时,要把电话、电报、广播、图像乃至尚未普及的数字数据放进同一套理论,需要先跨过一个障碍。

不同消息的意义完全不同,怎么统一?

香农的答案是:工程理论先不统一意义。

先统一“选择”。

如果每次消息只有两种等可能结果,比如灯亮或灯灭,那么接收者在看到结果之前,面对的是一次二选一的不确定性。结果出现以后,不确定性减少了。

这一份信息,可以用一个二进制单位表示。

后来,这个单位被普遍称为bit,也就是“比特”。这个词并非香农首创,香农在论文中注明采用了同事约翰·图基的叫法;但正是信息论让它成为数字时代最基本的尺度。

如果某件事几乎必然发生,那么它出现时带来的新信息很少。

如果一个结果极其罕见,它突然发生,带来的信息就更多。

所以在香农的体系里,信息量并不等于知识的深度,也不等于道德价值。

它首先和“意外程度”有关。

太阳明天升起,对人类极其重要,却几乎不提供新信息。

一只普通硬币连续二十次正面朝上,未必改变文明,却会让人立刻怀疑硬币、手法或世界出了问题。

这就是香农式的冷静。

他不是在定义什么消息更值得听。

他是在定义,一个接收者原本有多少不确定性,消息到来后又消除了多少。

由此,他把“信息”从日常语言里的模糊概念,变成可以计算的量。

香农用“熵”来度量一个信源平均的不确定性。

这个词来自物理学,但到了信息论里,最直观的理解不是“世界越来越乱”,而是:在消息到来之前,你平均还不知道多少。

一枚均匀硬币最难猜。

正反两面机会相等,每次抛掷都有完整的不确定性。

如果一枚硬币有99%的概率正面朝上,它就容易猜。虽然结果仍有两个,真正的不确定性却小得多。

这带来第一个巨大结论:消息可以压缩。

高概率出现的内容,用短编码;低概率出现的内容,用长编码。只要编码设计得好,长期平均下来,就能逼近信源熵所规定的极限。

人类语言里有大量不平均。

有些字母常见,有些字母罕见;有些词一出现,后面的词就更容易猜。图片里相邻像素常常相近,音乐里相邻采样也不是毫无关系。

这种可预测性,就是冗余。

压缩做的事情,是把冗余尽量挤掉。

但香农紧接着又揭示了另一件反直觉的事:为了对抗噪声,我们又需要主动加入冗余。

听上去像先减肥,再穿盔甲。

存储时,我们不想浪费空间;传输时,我们却愿意多带一些结构,让接收端有机会发现并修复错误。

这正是纠错码的根本逻辑。

日常生活早就知道这件事。

电话里听不清时,我们会说“上海的上,不是下”。这句话在语义上有重复,在噪声环境里却很有价值。

香农把这种经验推到数学极限。

他证明:只要传输速率不超过信道容量,就存在某种编码办法,可以让错误概率任意接近于零;一旦超过容量,再聪明的编码也救不了你。

注意,这个定理说的是“存在”。

它没有直接把实用编码算法递到工程师手里。

后来的研究者花了几十年,才一步步造出越来越逼近理论极限的编码方案。

这也是开山者和工程大军之间的真实关系。

香农画出边界,后来的人铺路、架桥、修隧道。

他没有独自建成数字世界。

但他告诉全世界,这片大陆在哪里,海岸线又在哪里。

香农理论里最有人情味的部分,恰恰是它最冷的地方。

它从不假设世界会配合你。

线路会衰减,电子会扰动,设备会老化,信号会被遮挡。数据在存储介质上也可能翻转,探测器从太空发回的微弱信号更会淹没在背景噪声中。

错误不是道德失败。

错误是系统环境。

真正可靠的系统,不是要求每个部件永不出错,而是承认错误必然出现,并在结构里预留恢复能力。

这套思想后来远远超出通信工程。

磁盘要校验,光盘要纠错,二维码缺一块仍可能被识别,手机在复杂无线环境中仍能还原数据,深空探测器用有限功率把信息送回地球,都在不同程度上延续同一个原则。

这也是香农留给组织和个人的一层现实启发。

低水平的管理,总想消灭所有错误,于是不断增加检查、惩罚和口号。

高水平的系统设计,则先承认人会疲惫、机器会故障、环境会变化,再考虑怎样及时发现、隔离和恢复。

当然,企业不是信道,人也不是比特,不能粗暴类比。

但机制相通:

不要把可靠性寄托在完美部件上。

要把它写进结构里。

如果故事写到这里,香农应该戴上领带,站在讲台中央,开始经营学派、组织和声望。

他偏偏没有。

1949年,香农与贝尔实验室数学家贝蒂·摩尔结婚。贝蒂理解他的数学,也能和他一起做装置。他们后来有三个孩子。

香农家的地下室和办公室,逐渐堆满各种机器。

有会计算罗马数字的装置,有能同时抛接多个球的杂耍机器,有各种奇形怪状的独轮车,还有一只名叫忒修斯的“老鼠”。

忒修斯不是今天意义上的智能机器人。

它是一只在迷宫里移动的金属鼠,运动由迷宫下方的电磁机构控制,继电器电路会记录岔路和正确路径。第一次探索时,它可能走错;记住路线以后,再被放回迷宫,便能更快找到目标。

香农用很有限的元件,做出了“机器可以利用过去经验改善行动”的直观演示。

这只鼠的名字也不随便。

希腊神话里的忒修斯进入迷宫,靠阿里阿德涅的线找到归途。香农的机器鼠没有线团,继电器记忆就是它的线。

还有一台装置更荒唐。香农根据马文·明斯基提出的构想,做过自己的版本。

盒子上只有一个开关。人把开关拨到“开”,盖子便打开,一只机械手伸出来,把开关拨回“关”,然后缩回盒子。

机器存在的全部目的,就是关掉自己。

香农把它叫作“终极机器”。

它没有生产效率,没有商业模式,也不能改变社会。

但它把一个逻辑悖论变成了能让人发笑的机械动作。

香农还认真研究杂耍。

他骑独轮车穿过贝尔实验室走廊,一边保持平衡,一边抛球。他分析球在空中和手中的时间比例,给杂耍写数学表达,甚至造机器去重复抛接动作。

同事们看到的,不是一个按“大师日程”生活的人。

而是一个四十多岁、五十多岁以后仍在追问“这个东西能不能玩起来”的人。

这不是传记里的花边。

这是理解香农的钥匙。

多数人把工作和玩耍分开。

工作要有目标、有产出、有考核;玩耍只负责恢复体力,等下一轮工作开始。

香农不是这样。

他的玩耍本身,就是一种研究制度。

独轮车会逼你理解动态平衡,杂耍会逼你处理节奏与周期,迷宫鼠会逼你把记忆和决策做成实体,自动关机盒会逼你观察动作与目的之间的荒谬关系。

这些问题没有项目经理替他定义,也没有市场报告证明需求。

正因为没有明确用途,思维才不必沿着已有行业的边界行走。

香农1950年发表关于计算机下棋的论文,把棋局、评估函数和搜索策略放进计算框架。那时的计算机笨重、昂贵,距离击败世界冠军还很遥远。

他并没有因为“暂时做不到”就认为问题不值得定义。

同样,他和数学家爱德华·索普后来尝试用可穿戴计算装置预测轮盘,关心的也不只是赌场输赢,而是一个现实随机系统究竟暴露了多少可利用的信息。

在香农那里,玩具不是成果的对立面。

玩具是小型世界。

它把复杂问题压缩到一个人可以看见、摸到、反复试验的尺度。

很多组织今天口头上鼓励创新,实际只奖励能提前写进季度目标的结果。

这会产生改良,很难产生开山。

因为真正的新问题,在刚出现时往往没有清晰用途,甚至显得可笑。

如果一个想法必须先证明市场规模、三年收入和落地路径,才允许被探索,那么它大概率只能在旧地图上找路。

香农的价值,不只是个人聪明。

也包括贝尔实验室曾经提供的一种罕见空间:让一流头脑在真实工程问题旁边,保留一部分不立即兑现的自由。

天才需要自由,这句话太浪漫。

更准确的说法是:社会必须承担一部分“暂时无用”的成本,才有机会获得无法提前规划的回报。

香农1956年进入麻省理工学院任教,之后长期保持一种若即若离的学术生活。

他不热衷扩张团队,不擅长反复解释自己,也没有把信息论变成个人权力的领地。

随着信息论迅速走红,各个学科都开始借用“信息”“熵”“编码”这些词。

有些借用很有成果,有些则只是换了一套时髦说法。

1956年,香农专门写过一篇简短文章,提醒信息论研究者保持克制。新理论正处在兴奋期,严谨的研究比不断扩大宣传更重要。

这很像他1948年的那一刀。

先划边界,再在边界内做到可靠。

香农不是不知道自己的理论影响巨大。

他只是对“一个理论什么都能解释”本能警惕。

能解释一切的语言,最后往往什么也没有精确解释。

这也回答了一个问题:为什么香农看起来没有建立与贡献相匹配的学术帝国?

因为他最深的能力,恰好不是占领。

而是舍弃。

舍弃暂时无法度量的意义,信息论才得以成立;舍弃对所有领域的解释权,信息论才没有在流行中迅速变空;舍弃对个人声望的过度经营,他才保住了继续玩问题的自由。

这不是所有科学家都该复制的人生。

但它让我们看见,知识史上还有另一种权力:

不靠控制多少人,而靠规定什么问题可以被清楚地问出来。

香农晚年患上阿尔茨海默病。

一个把不确定性变成公式、把记忆装进继电器迷宫的人,最终逐渐失去自己的记忆。

这当然很容易被写成命运的讽刺。

但疾病不是文学修辞。

它真实地落在一个人的身体上,也落在他的家人身上。

贝蒂陪伴他度过了漫长的衰退期。2001年2月,香农去世,享年84岁。

到那时,世界已经到处都是他的遗产。

家庭电脑连入互联网,移动电话快速普及,数据被压缩进光盘和硬盘,通信卫星环绕地球。

但香农本人已经很难知道,这些系统与自己当年的论文有什么关系。

历史对开创者常有一种残忍。

他们定义了后来者生活的环境,却未必能完整生活在自己的未来里。

香农尤其如此。

他把记忆、选择、噪声和编码变成全世界通用的工程语言,最后却被一种破坏记忆的疾病带走。

我们不必把这种巧合升华成天意。

只需要记住,公式背后不是神。

是一个会衰老、会生病,也需要家人照顾的人。

今天,我们每天都活在香农开辟的世界里。

一张照片可以被压缩,一段视频可以被拆成数据包,丢失的数据可以重传,噪声中的信号可以被恢复。不同内容只要变成比特,就能进入同一套基础设施。

但成功太彻底,也会制造误会。

既然一切都能被编码,人们很容易进一步相信,一切都能被信息量解释。

既然系统能高效传递,人们又容易误以为,传递得越多,理解就越深。

这恰好违背香农最初的边界。

信息论解决的是消息选择、编码和传输问题。

它没有承诺替我们判断真假、善恶、价值和意义。

一个谣言可以被无损传输。

一段仇恨言论可以被高效压缩。

一句毫无意义但统计上流畅的话,也可以在信道里完美抵达。

技术成功完成了自己的任务,不代表社会完成了自己的任务。

到了生成式人工智能时代,这条边界更值得重读。

机器可以从海量符号中学习统计结构,可以预测下一个词,可以生成看起来连贯的回答。这些能力令人震撼,也确实改变生产方式。

但“更像正确答案”和“它是真的”,仍不是同一件事;“输出流畅”和“理解了人的处境”,也不是同一件事。

香农没有预言今天所有的技术。

更不能把现代人工智能简单说成他一个人的产物。

可他留下了一条异常清醒的纪律:

一个模型首先要诚实说明,它解决什么,又不解决什么。

边界不是软弱。

边界是理论力量的来源。

香农一生最动人的反差,是他用最严格的数学,保护了最不功利的好奇心。

他可以在战争机器旁边研究保密与噪声,也可以在走廊里骑独轮车;可以证明信道存在不可逾越的容量,也可以花时间造一台只会关掉自己的盒子。

表面上看,这些事情互相矛盾。

其实它们都来自同一种能力:

把熟悉的东西重新看成问题。

别人看见电线,他看见逻辑。

别人看见电话里的杂音,他看见概率与极限。

别人看见迷宫玩具,他看见记忆和学习。

别人急着讨论消息的伟大意义,他先问消息能不能抵达。

所以,香农不是因为拥有更多答案,才成为信息论的开山者。

他是因为把问题切得足够准确。

今天的人最容易犯的错误,是把知识理解成不断添加:添加数据,添加指标,添加模型,添加术语。

香农提醒我们,真正的创造常常从删除开始。

删掉暂时无法处理的部分。

删掉似是而非的宏大解释。

删掉“什么都能说明”的野心。

直到剩下一个足够小、足够硬、可以被证明的问题。

然后,从这个小问题里,长出一个时代。