- 1、本文档共7页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
香农信息论的局限性分析.
香农信息论的局限性分析
Limitations Analysises of Shannons Information Theory
王勇
(计算机与控制学院,桂林电子科技大学,广西 桂林 541004)
WANG Yong
(College of Computer and Control, GuiLin University Of Electronic Technology ,Guangxi, Guilin, 541004)
摘要:从新的角度指出了香农信息论的局限性,指出了它没有考虑信息的可靠性,完备性等特点,指出条件熵的计算公式问题并且进行了纠正,并且举例证明了条件熵可能增加,进而香农信息定义中的不确定性的减少也不是绝对的。说明了为什么信息论能够在通信中得到应用,却不能很好地在日常生活中应用。在这些分析的基础上给出了信息的新定义以及信息相关的一些模型。
关键词:信息论;条件熵;定义;可靠性
Abstract:Limitations of Shannons information theory are analyzed. It is pointed out that information theory didn’t consider the reliability, completeness and other characteristics of information,and the computation formula of conditional entropy is false.The corrected computation formula of conditional entropy is given. Examples are given to illustrate the conditional entropy maybe increased,so Shannon’s definition of information is not absolutely correct. The reason is presented why information theory can be primely used in communication, while it cannot well used in in our daily life. Based on the analyses, new definition of information is given, the model how information is produced, and correlative models of information.
Keywords:information theory; conditional entropy; definition; reliability
中图分类号:O23 文献标识码:A
引言
香农(又译仙农,Shannon)信息论对信息技术的发展具有深远的影响[1]。但是信息论的应用一直现有通信等一些很局限的领域,信息论并不能够完全地适用于一些信息技术相关的领域。关于香农信息论的局限性,许多学者都有认识,香农本人也反对将信息论滥用。国内外一些学者从许多角度讨论了信息论的局限性,比如没有考虑语义,语用,没有考虑信息的模糊性和事件之间的相似性,没有考虑事件划分可能存在包含关系等[2-3]。笔者则指出,目前信息的定义都没有考虑信息的可靠性这一因素,则导致了信息论无法应用在众多的信息技术领域,比如人工智能,信息融合等领域。
信息定义的局限
关于信息的定义据笔者有哪些信誉好的足球投注网站超过60种,香农的信息定义是比较流行的一个,他定义如下:信息是用以消除随机不确定性的东西。还有许多学者对这个定义有所修改,但是这些定义都是考虑到消除的随机不确定性,并没有考虑到信息的可靠性。还有一类定义,比如信息是被反映的物质的属性,信息是结构的表达等,都明显蕴含一个意思,信息是可靠的,是对物质、事物或者结构的一种正确的反映或者表达。在所有的信息定义中,都没有发现它们对于可靠性以及类似的属性的考虑[4]。然而,信息之所以能够被利用,信息之所以被重视,它的可靠性是前提。一旦信息足够的不可靠,信息的价值完全丧失,而且可能起反作用。
香农对信息的定义,对信息的度量,以及它的信息论,基本上都是考虑的是用熵来计算的随机不确定性,并没有考虑信息的可靠度,对信息的可靠度的考虑最多是从信息传递过程中的失真进行了考虑。当然香农也对冗余有所考虑,但是他的冗余度是一个整体的,平均的量。为什么信息论在通信领域非常适用,因为在通信中,无需考虑信息的可靠性。那是发送者在发送之前或者是接受者在接受之后考虑的,在通信的过程中,一切的目的是如何快速,可靠地发送信息。信息论
您可能关注的文档
- 网络安全实验wireshark网络监听实验.doc
- 网络安全审计系统的实现方法.doc
- 网络安全实验报告-冰河木马实验.docx
- 网络安全威胁及技术发展趋势.doc
- 网络对孩子发展的影响研究..doc
- 网络广告现状和发展趋势..doc
- 网络行为审计技术深度解析.doc
- 网络安全加固实训报告.doc
- 网络环境下青少年的思想政治教育..doc
- 网络环境下语文教与学的有效性研究课题研究报告..doc
- 2024_2025学年新教材高中语文文本对应练15学习活动3辨识媒介信息含解析部编版必修下册.doc
- 2025版高中历史专题七近代西方民主政治的确立与发展三民主政治的扩展学案人民版必修1.doc
- 2024_2025学年新教材高中语文单元综合练1含解析部编版必修下册.doc
- 2024_2025学年高中生物专题4生物技术的安全性和伦理问题3禁止生物武器教案新人教版选修3.doc
- 2024_2025学年高中化学第1章认识化学科学第3节第3课时物质的量浓度课后练习含解析鲁科版必修1.docx
- 2024_2025学年高中生物第一章走近细胞第1节从生物圈到细胞2教案新人教版必修1.doc
- 2024高考英语一轮复习Module3AdventureinLiteratureandtheCinema学案外研版必修5.doc
- 2024_2025学年高中地理第五章区际联系与区域协调发展问题研究南水北调怎么调教案1新人教版必修3.doc
- 2024_2025学年高中历史第四单元近代中国反侵略求民主的潮流第10课鸦片战争作业1含解析新人教版必修1.doc
- 2025版高中历史第一单元中国传统文化主流思想的演变第1课“百家争鸣”和儒家思想的形成练习含解析新人.docx
文档评论(0)