本文共 445 字，大约阅读时间需要 1 分钟。

一条消息M的信息量可通过它的熵(entropy)来度量，表示为H(M)。公式为,n是消息所有等可能的值。假设所有消息是等可能的，对消息中所有可能的值进行编码所需要的最少位数。

例如:"一周中每一天"，一共包含7种等可能的事件，这一字段包含不超过3位的信息，因为此消息可以用3位进行编码

再例如：“性别”，一种包含2中等可能的事件，这一字段包含不超过1位的信息，因为此消息可以用1位进行编码

size_t CryptionMath::Entropy(size_t nNum){	return static_cast
   
    (ceil(log2(nNum)));}
   

语言的冗余度越大，它就越容易被攻击。许多正在使用的密码装置在加密明文前，都要用一个压缩程序减少明文大小，其原因就在于此。加密、解密时均需压缩处理来降低消息的冗余度。

转载地址：https://blog.csdn.net/zhanggusheng/article/details/82933910 如侵犯您的版权，请留言回复原文章的地址，我们会给您删除此文章，给您带来不便请您谅解！