问问题描述
熵是越大越好还是越小越好呢，麻烦给回复
答精选答案
熵是描述系统混乱的量，熵越大说明系统越混乱，携带的信息就越少，熵越小说明系统越有序，携带的信息越多。
你要现确定系统，再来描述。你的例子，可以这样理解，同样大的硬盘，熵越大什么坏了的硬盘越多，他可以承载的信息越少，熵越小意味着坏掉的硬盘越少，可以承载的信息量越大。
答其他回答（1条）
-
悠然于梦
2026-09-30 08:00:44
还有一点就是,我们通常认为熵应该越小越好,这个其实应该看应用于什么场景,我们在对话通信方面,希望的是熵,信息量越小越好。但在深度学习中,熵应该是越大越好,熵越大,系统程度混乱,说明了两个样本(猫和狗)的概率分布越大,相似性越小,概率分布越独立【个人理解】。
本文来自作者[惜福人之一]投稿，不代表公众科技网立场，如若转载，请注明出处：https://www.cpst.net.cn/xuelitisheng/202609/281502.html
评论列表（4条）
我是公众科技网的签约作者“惜福人之一”！
希望本篇文章《熵是越大越好还是越小越好呢》能对你有所帮助！
本站[公众科技网]内容主要涵盖：教育咨询,知识百科
本文概览：熵是描述系统混乱的量，熵越大说明系统越混乱，携带的信息就越少，熵越小说明系统越有序，携带的信息越多。你要现确定系统，再来描述。你的例子，可以这样理解，同样大的硬盘，熵越大什么坏了的硬盘越多，他可以承载的信息越少，熵越小意味着坏掉的硬盘越少，可以承载的信息量越大。