信息論是一門很安靜的學問。自1948年香農發(fā)表劃時代的論文“通信的數(shù)學原理”以來,他開創(chuàng)的以信息度量體系、信源和信道模型和典型性作為基礎的范式就一直統(tǒng)治著這個理論研究的王國。
雖然歷經了60余年,信息論研究由經典的點到點模型拓展到多用戶場景,并產生了諸多問題上的演進,但是基本的數(shù)學方法卻一直保持了良好的一致性。從這個意義上來說,信息論有著自己的研究格調和“方法論”。作為統(tǒng)計數(shù)學的一個分支,信息論圈子更像一個數(shù)學研究者的社區(qū),學者們也在數(shù)學證明的精妙細節(jié)中體驗著純學術的樂趣。