|
数学之美 系列七 -- 信息论在信息处理中的应用 06-10-13 沙漠之子 数学之美 系列七 -- 信息论在信息处理中的应用。我们在系列一中谈到语言模型时，没有讲如何定量地衡量一个语言模型的好坏，当然，读者会很自然地想到，既然语言模型能减少语音识别和机器翻译的错误，那么就拿一个语音识别系统或者机器翻译软件来试试，好的语言模型必然导致错误率较低。贾里尼克从信息熵出发，定义了一个称为语言模型复杂度(Perplexity)的概念，直接衡量语言模型的好坏。一个模型的复杂度越小，模型越好。信息论与物质本质一元论 06-11-30 tuic 信息论与物质本质一元论 介绍了信息论的基本定义 学完《信息论导引》的感受 信息论_互动百科 09-11-02 SunShineJia 信息论_互动百科信息论。信息论-信息的定义。信息论-信息论。信息论还研究语义信息、有效信息和模糊信息等方面的问题。狭义信息论即申农早期的研究成果，它以编码理论为中心，主要研究信息系统模型、信息的度量、信息容量、编码理论及噪声理论等。广义信息论包括了狭义信息论的内容，但其研究范围却比通讯领域广泛得多，是狭义信息论在各个领域的应用和推广，因此，它的规律也更一般化，适用于各个领域，所以它是一门横断学科。 信息论假说 Materialism 10-03-15 言果之 信息论假说 Materialism信息论假说 Materialism 物质、能量与信息是组成世界的三大要素。我们平时会产生不实印象，看到某情景感觉以前似乎发生过，可是以前却并没有发生，其实这是因为脑内分子摩擦引起信息，而信息并没有将能量马上释放出来，而是暂时储存起来，当另一时刻又有同样的分子摩擦时，其能量被激活，双倍能量释放出来，其中一半能量使我们思想，另一半能量使我们产生印象，这便是不实印象的本质。 唯信息论唯信息论 唯信息论是来自世界东方的新哲学，它倡导一种信息时代的新宇宙观。在信息N的理论体系中，信息0阶是元信息，是来自母宇宙族群的模式基因，它在后续的N阶动态演绎中生成世界万象万物：信息1阶是维序和超弦，信息2阶是物质和能量，信息3阶是生命，信息4阶是心智，信息5阶是心智星球，而信息6阶是心智星系，信息7阶是心智宇宙。唯信息论认为，物质、生命和心智都是信息N阶链条上紧密连接着的三个环节。 中文名称：信息论 英文名称：information theory 定义1：关于信息量度量和信息编码、信号处理和分析的科学理论。信息传输和信息压缩是信息论研究中的两大领域。全书共分为12章，内容包括：信息的基本概念、香农信息论研究的内容与进展，离散信息的度量，离散信源，连续信息与连续信源，无失真信源编码，离散信道及其容量，有噪信道编码，波形信道，信息率失真函数，有约束信道及其编码，网络信息论初步，信息理论方法与应用等。 香农信息论 第二次世界大战期间跨学科研究繁盛，这种理论上的相得益彰对于创造信息技术的新浪潮来说，意义重大。香农谨慎地限定他的信息论的运用：香农说他的模式限于工程传播或技术传播，不适合人类传播，因为后者是这样一种信息交流类型，在此，一个个体解释一个讯息的意义。香农的传播模式在由传播学学者做了某些改变（诸如增加了反馈）之后，又将传播学学者引向对传播行为进行单向的概念化工作，引向注重对传播效果的确定。 用信息论的观点看12球问题 11-03-17 张金富 用信息论的观点看12球问题。也就是说取得白球和黑球的不确定性有多大，如果袋子里只有一个白球和九十九个黑球，这时取得白球和黑球的不确定度又是多大？X表示从袋里取球这件事，p1表示取得白球的概率，p2是取得黑球的概率，那么第一种情况下的不确定度用公式表示就是：而12个球中，每个球都可能偏轻或偏重，所以每个球都有1/12的可能性是那个要找的球，因此有2*12=24种情况。图中，+表示球偏重，-表示球偏轻。
|
|
|
