闪农信息熵,是针对每个字母的信息余度的测量 |
送交者: 拙文君 2016月11月15日09:10:59 于 [教育学术] 发送悄悄话 |
回 答: 信息和熵的等价性 由 jingchen 于 2016-11-04 20:30:05 |
“信息和熵等价”的说法本身就是错误的提法。你去看看闪农信息熵的公式,就知道,闪农把一个字中出现的字母看成是随机的变量,通过26个字母中出现一个字母的概率再通过对数表达出来。它表达的或说测量的是每个字母在字中的信息余度。信息余度越大,证明字母使用的效率越低,从通讯的角度看,该编码系统的可压缩性大。 所以信息熵,和信息本身不是等价关系,而是测度信息编码系统效率的一种方法。 |
|
|
|
|
实用资讯 | |
|
|
一周点击热帖 | 更多>> |
|
|
一周回复热帖 |
|
历史上的今天:回复热帖 |
2015: | 波士顿的老房子和常春藤 | |
2015: | 读书3:《独立记者》 | |
2014: | 同性恋到底是生理特质决定的还是心理变 | |
2014: | 答季牧龙 面首 中文解释 | |
2013: | 我应该选择Yes or No? (只能选一个) | |
2013: | 丘成桐的错误全球没有10人能懂. | |
2012: | 安博:历史解密 女娲的路(下) | |
2012: | 以自由之名通往奴役之路 | |
2011: | 一草根:科学是什么? | |
2011: | 英文词汇学习:decimate | |