信息论

---

研究信息传输和信息一般规律的一门学科。

信息是对客观世界现象通过直接观察或对讯号的语义解释领会而得到的知识。信息有著可以识别、可以转换、可以存贮复制和处理、传递等特性。

信息论运用数学方法研究信息和探索传递处理信息的一般问题。

它摒弃了物质和能量的具体运动形式，把任何通讯和控制系统看做是信息的传递处理系统，把系统的有目的的运动抽象为信息变换过程。

从这一角度来说，信息论是控制论的基础。

信息论有三方面内容：(1)狭义信息论，主要是以编码理论为基础研究信息系统模型、信息的度量和信息编码。

(2)一般信息论，主要研究通讯问题，同时包括噪声理论，信号的检测和过滤等理论。(3)现代信息论，主要指应用电子计算机处理图像、语言、文字等信息，还包括管理信息与心理信息等方面。