一:思考
1.电报发送:二战的时候大家都知道那时候普遍会应用电报,如果让你来设计一个电报的发送编码你该如何设计呢?
2.压缩算法:给你10000个字符(每个字符1btye,也就是8bit)的文件,你怎么存储可以尽可能的节省空间呢?
我相信大家肯定能想到的一个思路就是用某个字符来代替(映射)。比如在压缩算法里面我们可以用二进制来代替 假设字符是 a b c d 4种 那我们假定 a=000 b=001 c=010 d=100,这样我们每个字符就变成了3bit的二进制,那么10000个字符就是30000bit,比起原来的80000bit是不是缩小了很多的存储空间?
缩小了将近3倍。
100000001:dab Abcdaaaaaaaaa:n*3个bit位
A:0
B:101
C:110
D:100
Abcdaaaaaaaaa:010111010000000000=>abcdaaaaaa Aaa,前缀。 但是这样做的话会有一个什么问题呢?是不是还有更优的方法呢?
问题:是否会出现解码失败?如何判断是否是某个解码字符。
解决:哈夫曼编码,也叫前缀编码
二:引入最优二叉树(二叉树的带权路径长度总和最小)
满二叉树:除了叶子节点,其他的都有两个子节点,1 2 4 8这样的节点 2^n个点
完全二叉树:除了最底层都有两个子节点,而且叶子节点是靠左连续的
2.1 计算下面三颗二叉树的带权路径长度总和:
其中每个点的权重为: a:7 b:5 c:2 d:4
WPL(a):7*2+5*2+2*2+4*2=36()
WPL(b):7*3+5*3+2*1+4*2=46()
WPL(c):7*1+5*2+2*3+4*3=35()
给定N个权值作为N个叶子结点,构造一棵二叉树,若该树的带权路径长度达到最小,称这样的二叉树为最优二叉树,也称为哈夫曼树(Huffman Tree)。哈夫曼树是带权路径长度最短的树,权值较大的结点离根较近。 那么这个赫夫曼树和压缩又有什么关系呢?
二叉树:二叉,这时候你要想到二进制,二叉分左右嘛。
左节点的边设置为0,右节点的边设置为1
三:如何实现?(贪心算法:最优解(就是排序))
核心思想:贪心算法:利用局部最优推出全局最优,把频率出现多的用短码表示,频率出现小的就用长一点。而且,任何一个字符的编码都不是另一个的前缀,在解压缩的时候,我们每次会读取尽可能长的可解压的二进制串,所以在解压缩的时候也不会产生歧义。
具体实现思路:
1.每次取数值最小的两个节点,将之组成为一颗子树。
2.移除原来的两个点
3.然后将组成的子树放入原来的序列中
4.重复执行1 2 3 直到只剩最后一个点
例子: a:3 b:24 c:6 d:20 e:34 f:4 g:12 根据以上权重来实现哈夫曼树(代码实现)
结点数据结构:
package tree.哈夫曼;
public class HfmNode implements Comparable<HfmNode>{ //优先队列,小的我把你优先级调高
String chars; //节点里面的字符
int fre; //表示是频率,也是权重
HfmNode left;
HfmNode right;
HfmNode parent; //用来找上层的
/**
* 用于在优先队列中比较节点的权重。
* @param o the object to be compared.
* @return
*/
@Override
public int compareTo(HfmNode o) {
return this.fre - o.fre;
}
}
哈夫曼:(实现编码,解码,生成哈夫曼)
这里使用了一个JDK的PriorityQueue,在 Java 中,该类是 Java 集合框架的一部分,用于创建优先级队列数据结构。优先级队列是一个专用队列,其中元素根据其优先级进行排序。具有最高优先级的元素始终位于队列的前面,并且是第一个要删除的元素。
package tree.哈夫曼;
import java.util.ArrayList;
import java.util.HashMap;
import java.util.List;
import java.util.Map;
import java.util.PriorityQueue;
public class HuffmenTree {
HfmNode root;
List<HfmNode> leafs; // 叶子节点
Map<Character, Integer> weights; // 叶子节点的权重, a,b,c,d,e
public HuffmenTree(Map<Character, Integer> weights) {
this.weights = weights;
leafs = new ArrayList<HfmNode>();
}
public String decode(Map<Character, String> code, String encodedStr) { // 解码 不会给你们写的,留给课后作业
StringBuilder decodedStr = new StringBuilder();
HfmNode currentNode = root;
for (int i = 0; i < encodedStr.length(); i++) {
char c = encodedStr.charAt(i);
if (c == '0') {
currentNode = currentNode.left;
} else if (c == '1') {
currentNode = currentNode.right;
}
if (currentNode.left == null && currentNode.right == null) {
decodedStr.append(currentNode.chars);
currentNode = root;
}
}
return decodedStr.toString();
}
public void encode() { // 解码 不会给你们写的,留给课后作业
}
// 叶子节点进行编码
public Map<Character, String> code() {
Map<Character, String> map = new HashMap<Character, String>();
for (HfmNode node : leafs) {
String code = "";
Character c = new Character(node.chars.charAt(0)); // 叶子节点肯定只有一个字符
HfmNode current = node; // 只有一个点
do {
if (current.parent != null && current == current.parent.left) { // 说明当前点是左边
code = "0" + code;
} else {
code = "1" + code;
}
current = current.parent;
} while (current.parent != null); // parent == null就表示到了根节点
map.put(c, code);
System.out.println(c + ":" + code);
}
return map;
}
public void creatTree() {
Character keys[] = weights.keySet().toArray(new Character[0]); // 拿出所有的点
PriorityQueue<HfmNode> priorityQueue = new PriorityQueue<HfmNode>(); // jdk底层的优先队列
for (Character c : keys) {
HfmNode hfmNode = new HfmNode();
hfmNode.chars = c.toString();
hfmNode.fre = weights.get(c); // 权重
priorityQueue.add(hfmNode); // 首先把我们的优先队列初始化进去
leafs.add(hfmNode);
}
int len = priorityQueue.size();
for (int i = 1; i <= len - 1; i++) { // 每次找最小的两个点合并
HfmNode n1 = priorityQueue.poll(); //
HfmNode n2 = priorityQueue.poll(); // 每次取优先队列的前面两个 就一定是两个最小的
HfmNode newNode = new HfmNode();
newNode.chars = n1.chars + n2.chars; // 我们把值赋值一下,也可以不复制
newNode.fre = n1.fre + n2.fre; // 把权重相加
// 维护出树的结构
newNode.left = n1;
newNode.right = n2;
n1.parent = newNode;
n2.parent = newNode;
priorityQueue.add(newNode);
}
root = priorityQueue.poll(); // 最后这个点就是我们的根节点
System.out.println("构建完成");
}
public static void main(String[] args) {
// a:3 b:24 c:6 d:20 e:34 f:4 g:12
Map<Character, Integer> weights = new HashMap<Character, Integer>();
//一般来说:动态的加密,最开始是不知道里面有什么内容的。我们需要一个密码本,往往就是某个字典。如果是英文就用英文字典,统计次数。
//换密码本
//静态的文件。针对性的做编码.图像加密,没有特性的。hash加密(MD5)
weights.put('a', 3);
weights.put('b', 24);
weights.put('c', 6);
weights.put('d', 1);
weights.put('e', 34);
weights.put('f', 4);
weights.put('g', 12);
HuffmenTree huffmenTree = new HuffmenTree(weights);
huffmenTree.creatTree();
Map<Character, String> code = huffmenTree.code();
String str = "aceg";
System.out.println("编码后的:");
String decode = huffmenTree.decode(code,"00");
System.out.println(decode);
char s[] = str.toCharArray();
}
/*
a:10110
b:01
c:1010
d:00
e:11
f:10111
g:100
* *
*/
}
四:小结
学完赫夫曼树,现在可以回到我们的思考题,这两个问题是不是就迎刃而解了。
电报的设计:
1.电报加密后越短越好,发送快。
2.破解难
3.解码容易
4.换加密树也要快 、
5.可逆的。 什么叫不可逆:MD5这样的Hash加密,简单的MD5已经破解了,穷举:很大的库。Md5(paswd)=-> 接口的密码加密 从前端传到后端我要加密这个密码,Hash函数的了。后面讲 ,数据传输的时候回来怎么办?
所以我们现在的很多数字通信里面很多都采用了哈夫曼编码。 压缩我相信大家就更能理解了,只要你明白了哈夫曼编码这个压缩算法其实就很容易了,相信你也可以很快就能实现出来。