克劳德·艾尔伍德·香农(英文名:Claude Elwood Shannon,以下简称香农)(1916年4月30日—2001年2月24日)是 信息论 的创始人,美国著名数学家、发明家、密码学家。
1936年,香农同时获得 密歇根大学 数学学士学位和 电子工程 学士学位;1940年,他在 麻省理工学院 获得电气工程硕士学位和数学博士学位。 他的硕士论文《A Symbolic Analysis of Relay and Switching Circuits(继电器和开关电路的符号分析)》科学、严谨地论述了如何使用 布尔代数 对继电器电路进行分析和合成,奠定了 数字电路 的理论基础,被誉为“本世纪最重要、最著名的一篇硕士论文”。 香农因这一成果获得了美国工程师学会颁发的Alfred Noble奖。同年至1941年,香农任 普林斯顿高等研究院 研究员。 1941年—1972年,香农任职于贝尔实验室。 1948年,香农在7月和10月的Bell System Technical Journal连载发表了影响深远的论文《A Mathematical Theory of Communication》,这标志着 信息论 正式诞生。 1958年—1978年香农任麻省理工学院Donnor科学教授。 1973年,在IEEE信息论国际研讨会上香农获颁以其名字命名的香农奖。 1978年,香农退休。 2001年2月24日,香农在美国马萨诸塞州辞世,享年84岁。
香农是 美国国家工程院 院士、 美国国家科学院 院士、 美国艺术与科学院 ,生前是 麻省理工学院 名誉教授。 香农曾获得 查尔斯·莫里斯 (Morris)奖、斯图尔特·巴兰丁(Stuart Ballantine)奖章、凯利奖(Kelly Prize) 、 国家科学奖章 、IEEE的荣誉奖章、 基础科学 京都奖和多所大学的荣誉博士。 香农的主要研究领域是通信和 信息论 ,他提出了信息熵的概念,为信息论和数字通信奠定了基础,被称为“信息论之父”。
人物介绍
早期经历
香农 于1916年4月30日出生于美国 密歇根州 的 佩托斯基 (Petoskey)。香农从小在一个名叫盖洛德(Gaylord)的小镇生活。在8岁的时候,他就辅导他姐姐做 高等数学 作业。后来,他姐姐大学毕业,成为了数学教授。除了数学之外,小香农特别喜欢搞发明创造,其中就包括 电报机 、 电动船 ,以及各种机械动物。
教育经历
1932年 香农 进入 密歇根大学 ,开始接触 乔治·布尔 (GeorgeBoole, 英国 数学家)的理论。 1936年,20岁的 香农 从密歇根大学本科毕业,获得了数学和 电子工程 双学士 。随后,他进入 麻省理工学院 继续深造。 1938年香农在麻省理工学院获得 电机工程学 硕士学位。 1940年,香农因这一成果获得了美国工程师学会颁发的AlfredNoble奖。 同年,香农在麻省理工学院获得数学博士学位后进入 普林斯顿高等研究院 工作,期间开始思考 信息论 与有效 通信系统 的问题。
职业生涯
1941年香农以数学研究员的身份进入 新泽西州 的AT&T贝尔电话公司,并在贝尔实验室工作到1972年,从24岁到55岁,整整31年。 1943年, 英国 著名数学家、密码学家阿兰・ 艾伦·麦席森·图灵 访问贝尔实验室,香农和图灵讨论了人造思维机器(也就是后来的I 人工智能 )。
1948年,香农发表了影响深远的论文《A Mathematical Theory of Communication》这篇论文成了 信息论 正式诞生的里程碑。 1949年,香农又在《Bell System Technical Journal》期刊上发表了《噪声下的通信》(《Communication in the Presence of Noise》)一文,在这一篇论文中,香农阐明了通信的基本问题,给出了通信系统的模型,提出了信息量的数学表达式,并解决了信道容量、信源统计特性、信源编码、信道编码等一系列基本技术问题。 1952年,香农推出了“会走迷宫的老鼠”—— 忒修斯 (Theseus) 。 1956年香农担任 麻省理工学院 的访问教授,1958年成为正式教授。 1961年,香农和同事索普做出一个香烟盒大小的小型 计算机 ,小盒子藏在口袋里,用大脚趾控制藏在鞋子里的开关。 1965年,香农带着这个机器跑去挑战当时的世界冠军Mikhail Botvinnik。1973年,在 以色列 亚实基伦 召开的 信息论 国际研讨会上,IEEE设立了香农奖,并把这一奖项授予香农本人。这种自己领自己名字命名的奖的做法,后来被人戏称为“香农套路”。
退休生活
1978年,香农退休。 1985年,香农参加了在英格兰布莱顿举行的“国际信息理论研讨会。 香农当年还是投资大师、炒股高手。 1986年8月11日,著名的《 巴伦周刊 》曾汇总了1026家 开放式基金 的近期表现,香农排名第一。 20世纪80年代,香农的记忆力开始严重衰退,并开始表现出患上 阿尔兹海默症 的迹象。 到了晚年时期,香农对杂耍的热爱简直到了痴迷的地步。 2001年2月24日,香农因患阿尔茨海默氏症去世,享年84岁。
主要成就
奠定数字电路基础
在香农的硕士毕业论文中,他将开关电路、布尔逻辑 代数 、 二进制 计算这些学科知识关联起来,形成了今天所有数字电路设计最底层的数学原理。从此,通过布尔方程式按照一定步骤就可以设计出具有复杂逻辑关系的电路。半个多世纪前 英国 数学家 乔治·布尔 (George Boole,1815-1864)创建的 布尔代数 得到了实际应用,电子 计算机 的发展也因此有了数学和电路基础。 香农 的硕士毕业论文被誉为20世纪最重要、最著名的一篇硕士论文。
香农还制作了一只木制的、带有铜须的玩具老鼠。他把它叫作“ 忒修斯 ”。“特修斯”的出现表明电子线路可以用 二进制 逻辑工作。“特修斯”虽然是由隐藏在它身体里的 磁铁 和 马达 驱动的,但掌管它记忆功能的存储器却不在它身上,而是由隐藏在 迷宫 各处的75个继电器组成的。香农进一步证明,这些简单的逻辑功能都可以通过电子线路的开/关来执行。这一发现意味着,从理论上说,任何复杂逻辑都可以分解成几个简单逻辑,然后由一套能表达或执行1/0(开/关)——或用 逻辑学 的术语说:真/假——的二进制装置来完成。
开创信息论
1948年,32岁的 香农 在贝尔实验室内部科学刊物BELL SYSTEM TECHNICAL JOURNAL表论文《A Mathematical Theory of Communication》(《通信的数学理论》)提出了信息 的概念以及数学表达式, 推出了比特的概念(他将发明这个词的荣誉归功于自己的同事约翰·图基),将其称为“用于测量信息的单位”。 提出了著名的信道容量公式,即香农公式,后世几乎所有的现代通信理论都是基于香农公式展开的。 他提出用“熵”来描述信源内部的不确定性,给出了信息熵的计算公式,解决了信息的计量问题 。 此外,香农对于 信息冗余 、信息编码、信息压缩、信息加密解密等信息科学领域的诸多基本概念也都给出了科学的解释。 这篇论文奠定了 信息论 的基础,标志一门新的学科──信息科学的诞生。
建立密码学基础
香农 在论文《保密系统的通信理论》中首次从信息论的角度讨论 密码学 ,为对称加密体制建立了理论基础。 这篇论文开辟了用信息论来研究密码学的新思路,奠定了现代密码理论的基础。 这标志着现代密码学的诞生。 香农也凭此成为近代密码理论的奠基者和先驱。
通信理论
1948年香农发表的《通信的数学理论》中在这篇论文中,香农给出了 通信系统 的基本模型, 提出了信道容量公式,即香农公式, 把通信理论的解释公式化,对如何有效地传输信息的问题进行了研究。这一理论被世界各国的通信工程师和数学家采用,并对其进行了详细的论述、扩展和完善,为数字通信技术的发展提供了理论工具。 香农公式对于后世最大的意义在于,几乎所有的现代通信理论都是基于这个公式展开的。
发明
香农 的发明层出不穷。包括一个火焰发射喇叭,一个变戏法的机器人,一组独轮车队,一台用罗马数字操作的计算机器,以及一个帮助美国人在 英国 公路上靠左侧行驶的设计图。 他还做过一个能自动寻路的机械 小鼠 ,名为特修斯(Theseus)。
主要论文
人才培养
香农的学生伯特·萨瑟兰年轻时在美国伦勒斯理工大学获得了 电机工程学 学士 ,之后去 麻省理工学院 读完了硕士和博士。 当 计算机科学 蓬勃发展,伯特·萨瑟兰成为了许多知名实验室的主管,也领导开发了其中的知名项目,不少都是世界首创。
香农的学生罗伯特·加拉格尔1962年提出LDPC码,此前被选为5G数据 信道编码 方案。
家庭生活
家庭背景
香农 在盖洛德(Gaylord)小镇长大。 香农 的父亲是这个小镇的法官,名字叫克劳德·艾尔伍德·香农(和他的名字一样)。香农的母亲,是小镇的中学校长,名叫梅布尔·沃尔夫·香农(MabelWolfShannon)。 香农的祖父是一位农场主兼发明家,发明过洗衣机和很多农用机械。 值得一提的是,香农还有一个远房亲戚,也很喜欢搞发明。这位亲戚的名字,叫 托马斯·爱迪生 。
妻子
香农与 玛丽 (Mary Elizabeth Moore)1949年3月27日结婚,他们是在贝尔实验室相识的,玛丽当时是数据分析员。
子女
香农共有四个孩子:三个儿子 罗伯特 (Robert)、 詹姆斯 (James)、安德鲁莫瑞(AndrewMoore)和一个女儿MargaritaCatherine。后来身边还有两个可爱的孙女。
日常生活
人们描述香农的生活,白天他总是关起门来工作,晚上则骑着他的 鸡公车 来到贝尔实验室。他的同事D.Slepian写到:“我们大家都带着午饭来上班,饭后在 黑板 上玩玩数学游戏,但 克劳德 很少过来。他总是关起门来工作。但是,如果你要找他,他会非常耐心地帮助你。他能立刻抓住问题的本质。他真是一位天才,在我认识的 人中 ,我只对他一人使用这个词。”
随着时光的推移,过度的奉承纷至沓来,香农被蒙上了一层神秘的面纱,变得沉默寡言。其实香农爱说爱笑,喜欢制造独轮车,迷恋杂耍,但他为人十分谦虚。
到了晚年时期,香农对杂耍的热爱简直到了痴迷的地步。他花了很多时间刻苦练习,不断提高杂耍水平。他甚至还拥有一张杂耍学博士证书,视为至宝。
除了杂耍之外,他还热衷于制造玩具。他建造了火焰喷射喇叭、火箭驱动飞盘、自动下棋机器人等各种奇怪的玩具。
后世纪念
设香农奖
鉴于香农的卓越贡献,IEEE(美国电气与电子工程师学会)特别以他的名字设立了通信理论领域最高奖“香农奖”(thelaudeE.ShannonAward)。 该奖也被称为“信息领域的 诺贝尔奖 ”。 而首届获奖者正是香农本人。在贝尔实验室的大堂,有两尊半身 塑像 ,一个是 亚历山大·贝尔 ,另一个就是克劳德·香农。
定理命名
人们将信道容量公式称为香农公式,关于无失真信源编码、有噪 信道编码 、有失真信源编码的理论论述并称为香农三大定律 。 香农三大定律奠定了信息传输和存储的理论基础,给 信息技术 研究指明了努力方向和极限边界。
社会任职
香农 是 美国 科学院院士、美国工程院院士、 伦敦皇家自然知识促进学会 会员、美国哲学学会会员。
获得荣誉
以上表格信息来源
人物评价
香农独自创立了比较完整的信息学科理论,即 信息论 ,建立起 信息时代 的 世界观 和 方法论 。信息科学后来发展出很多学科分支与重要技术,都以信息论为理论基础。令人称奇的是,香农的信息论一经问世,便已形成了成熟完整的理论体系,并且实践证明了它的正确性,显示出香农的超人智慧。 ( 清华大学 科技博物馆评)
香农的一生戳穿了两个假象:其一是,在创造知 识的过程中,理论必须高于实践;其二是,专干“脏 活累活”的工程师们永远无法创造丰富的理论,那要 历经几代科学家的扩展、修正和深化才能形成。香农掀起了数字革命,理应得到赞誉。 (G.Pascal Zachary 评)
”在我看来,两三百年之后,当人们回过头来看我们的时候,他们可能不会记得谁曾是美国的总统。他们也不会记得谁曾是影星或摇滚歌星。但是仍然会知晓香农的名字。学校里仍然会教授 信息论 。“ (著名学者理查德・布拉胡特(Richard Blahut)教授评)
人物纪念
命名讲座
为了纪念香农, 加利福尼亚大学 圣迭戈 分校设立了一个香农纪念讲座,每年选出一位杰出的信息理论家在香农的生日(4月30日)或前后开展纪念讲座。
发行邮票
2016年,马其顿共和国(The Republic of Macedonia)发行了纪念香农诞辰百年相关的邮票。
树立雕像
为了纪念香农,共树立雕像六座,分别坐落于 密歇根州 佩托斯基 的盖洛德(Gaylord)小镇、 密歇根大学 电气工程与计算机科学系大楼前、贝尔实验室、 新泽西州 佛罗里达州 公园ATT香农实验室、 麻省理工学院 信息与决策系统实验室、加利福尼亚大学圣迭戈分校。其中,加利福尼亚大学圣迭戈分校的香农雕像于2001年10月16日落成;密歇根大学的香农雕像落成典礼于2001年11月9日举行。
诞辰百年纪念
2016年, 西安电子科技大学 、 上海科技大学信息科学与技术学院 、 上海交通大学计算机科学与工程系 举行纪念香农百年诞辰座谈会和学术研讨会。
2016年9月16日,来自香港中文大学、柏林工业大学、斯坦福大学、加州理工学院、杜克大学、雅典国立技术大学、南洋理工大学等世界各地的大学、科研机构的科研人员齐聚在密歇根大学,在香农百年研讨会上庆祝密歇根大学校友克劳德·艾尔伍德·香农诞辰百年。