Java8的HashMap原理
一、组成结构
1、数组Node<K,V>[] table
2、链表Node<K,V> next
3、红黑树TreeNode
二、put方法
整体流程图如下:
在执行put操作时,首先根据hash方法获取key.hashcode,之后根据hashcode通过取模运算(table[table.length-1 & hash])获取索引,当发现当前索引没有值时,直接将put进来的k-v存储在当前位置;那么如果当前索引位置有值(也就是说将要push数据的k.hasdcode与数组中的某一个k.hashcode相同)此时需要通过equal比较key是否也相同,如果key相同,则说明是同一个key,那么需要将原来的oldvalue替换为新的value;
还有一种情况,就是当k.hashcode相同,但是key不相同时,这种情况就叫做hash碰撞,在这种情况下解决方案是在当前hashcode所指向的node链表下继续添加k-v,如果链表的长度超过8时,自动将当前链表转换为红黑树来存储,为什么要转为红黑树呢?因为红黑树的速度比链表更快,熟悉算法的朋友应该知道链表的时间复杂度为O(n),红黑树的时间复杂度为O(logn)。
最后判断是否需要扩容
以上也说明了在使用map时,key为什么要必须覆写equals方法以及hashcode方法。
1、对key进行hash取值,目的是为了获取更好的散列性,具体可以参考https://blog.csdn.net/qq_32999113/article/details/102527859
public V put(K key, V value) {
return putVal(hash(key), key, value, false, true);
}
2、putVal
final V putVal(int hash, K key, V value, boolean onlyIfAbsent, boolean evict) { Node<K,V>[] tab; Node<K,V> p; int n, i; //table为null或者长度为0,则表示没有元素,调用resize()方法进行扩容,并进行长度赋值 if ((tab = table) == null || (n = tab.length) == 0) n = (tab = resize()).length; //对hash后的key进行取模操作,并判断数组上的key是否有值,如果没有值则构建一个node放上去 if ((p = tab[i = (n - 1) & hash]) == null) tab[i] = newNode(hash, key, value, null); //如果存在值 else { Node<K,V> e; K k; //如果位置上的key与新key相同,则直接进行值覆盖 if (p.hash == hash && ((k = p.key) == key || (key != null && key.equals(k)))) e = p; //如果值不相等,判断数组上的节点是否为红黑数结构 else if (p instanceof TreeNode) e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value); //不是数节点,则为链表结构 else { for (int binCount = 0; ; ++binCount) { //循环判断链表上的key是否为null,为空则创建新的node,并放入 if ((e = p.next) == null) { p.next = newNode(hash, key, value, null); if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st //判断链表的数量是否大于8个,大于则需要进行结构树化 treeifyBin(tab, hash); break; } //如果链表上的key不为null则判断与新的key是否相等,相等则直接赋值 if (e.hash == hash && ((k = e.key) == key || (key != null && key.equals(k)))) break; p = e; } } //赋值 if (e != null) { // existing mapping for key V oldValue = e.value; if (!onlyIfAbsent || oldValue == null) e.value = value; //空实现 afterNodeAccess(e); return oldValue; } } ++modCount; //判断容量是否大于阈值,大于则进行扩容操作 if (++size > threshold) resize(); afterNodeInsertion(evict); return null; }
3、先看看树化操作,treeifyBin(tab, hash);
final void treeifyBin(Node<K,V>[] tab, int hash) { int n, index; Node<K,V> e; //判断数组的长度是否小于64,小于的话,不会树化,是先进行数组的扩容 if (tab == null || (n = tab.length) < MIN_TREEIFY_CAPACITY) resize(); else if ((e = tab[index = (n - 1) & hash]) != null) { TreeNode<K,V> hd = null, tl = null; do { //将链表上的节点node转变为TreeNode,并且生成的是一个双向的链表 TreeNode<K,V> p = replacementTreeNode(e, null); if (tl == null) hd = p; else { p.prev = tl; tl.next = p; } tl = p; } while ((e = e.next) != null); if ((tab[index] = hd) != null) //将链表树化 hd.treeify(tab); } }
树化
final void treeify(Node<K,V>[] tab) { TreeNode<K,V> root = null; for (TreeNode<K,V> x = this, next; x != null; x = next) { next = (TreeNode<K,V>)x.next; x.left = x.right = null; //x就是当前链表遍历的节点,如果根节点为null,则把链表的第一个节点设为根节点 if (root == null) { x.parent = null; x.red = false; root = x; } else { K k = x.key; int h = x.hash; Class<?> kc = null; //先将根节点赋值给P进行循环 for (TreeNode<K,V> p = root;;) { int dir, ph; K pk = p.key; //新节点的hash值h与p节点的hash值做比对,小于往左放,大于往右放 if ((ph = p.hash) > h) dir = -1; else if (ph < h) dir = 1; //如果值是相等的,接下来这一段是根据更多的方法去判断当前节点是往左还是往右 else if ((kc == null && (kc = comparableClassFor(k)) == null) || (dir = compareComparables(kc, k, pk)) == 0) dir = tieBreakOrder(k, pk); TreeNode<K,V> xp = p; //根据dir的正负判断p节点的右还是左,假如是左,则把左节点赋值给P,再判断左节点是否为null,不为null则接着循环,不为null则将节点插入树中,退出循环 if ((p = (dir <= 0) ? p.left : p.right) == null) { //设置当前节点的父节点为p,以及左或是右节点的设置 x.parent = xp; if (dir <= 0) xp.left = x; else xp.right = x; //根据红黑树的特征,要进行节点的调整 root = balanceInsertion(root, x); break; } } } } //把数组相应位置的链表移除,将根节点放到数组中 moveRootToFront(tab, root); }
treeify()的方法需要注意下,两个循环:
第一个循环是对传进来的链表的循环,目的是取出节点
第二个循环是对已经构建好的红黑树的循环,目的是将取出的节点放入红黑数中
//根据新加入的节点,调整树结构 static <K,V> TreeNode<K,V> balanceInsertion(TreeNode<K,V> root, TreeNode<K,V> x) { // 新节点默认为红色 x.red = true; // xp表示x的父结点,xpp表示x的祖父结点,xppl表示xpp的左孩子结点,xppr表示xpp的右孩子结点 for (TreeNode<K,V> xp, xpp, xppl, xppr;;) { // 如果x没有父结点,则表示x是第一个结点,自动为根节点,根节点为黑色 if ((xp = x.parent) == null) { x.red = false; return x; } // 如果父结点不是红色(就是黑色),或者x没有祖父节点,那么就证明x是第二层节点,父节点为根节点 // 这种情况无需就行操作 else if (!xp.red || (xpp = xp.parent) == null) return root; // 进入到这里,表示x的父节点为红色 // 如果x的父节点是祖父结点的左孩子 if (xp == (xppl = xpp.left)) { // 祖父结点的右孩子,也就是x的叔叔节点不为空,且为红色 if ((xppr = xpp.right) != null && xppr.red) { // 父节点和叔叔节点都为红色,只需要变色,且将x替换为祖父节点然后进行递归 xppr.red = false; xp.red = false; xpp.red = true; x = xpp; } // 如果叔叔节点为空,或者为黑色 else { // 如果x节点为xp的右孩子 if (x == xp.right) { // 先进行左旋,并且把x替换为xp进行递归,在左旋的过程中产生了新的root节点 root = rotateLeft(root, x = xp); // x替换后,修改xp和xpp xpp = (xp = x.parent) == null ? null : xp.parent; } // 如果x本来是左孩子,或者已经经过了上面的左旋之后,进行变色加右旋 if (xp != null) { xp.red = false; if (xpp != null) { xpp.red = true; root = rotateRight(root, xpp); } } } } // 如果x的父节点是祖父结点的右孩子 else { if (xppl != null && xppl.red) { xppl.red = false; xp.red = false; xpp.red = true; x = xpp; } else { if (x == xp.left) { root = rotateRight(root, x = xp); xpp = (xp = x.parent) == null ? null : xp.parent; } if (xp != null) { xp.red = false; if (xpp != null) { xpp.red = true; root = rotateLeft(root, xpp); } } } } } }
左旋操作
static <K,V> TreeNode<K,V> rotateLeft(TreeNode<K,V> root, TreeNode<K,V> p) { // pp是祖父结点 // p是待旋转结点 // r是p的右孩子结点 // rl是r的左孩子结点 TreeNode<K,V> r, pp, rl; if (p != null && (r = p.right) != null) { // 如果rl不为空,则设置p.right=rl if ((rl = p.right = r.left) != null) rl.parent = p; // 如果祖父结点为null,那么r设置为黑色,r左旋之后即为root节点 if ((pp = r.parent = p.parent) == null) (root = r).red = false; // 如果待旋转结点是左孩子节点 else if (pp.left == p) pp.left = r; // 如果待旋转结点为右孩子 else pp.right = r; r.left = p; p.parent = r; } return root; }
右旋操作
static <K,V> TreeNode<K,V> rotateRight(TreeNode<K,V> root, TreeNode<K,V> p) { TreeNode<K,V> l, pp, lr; if (p != null && (l = p.left) != null) { if ((lr = p.left = l.right) != null) lr.parent = p; if ((pp = l.parent = p.parent) == null) (root = l).red = false; else if (pp.right == p) pp.right = l; else pp.left = l; l.right = p; p.parent = l; } return root; }
虽然有些复杂,但是如果你看过上一篇的红黑树介绍,慢慢研究应该看得懂的。
4、如果树化看懂了,往树上新增节点也就很简单了,e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
final TreeNode<K,V> putTreeVal(HashMap<K,V> map, Node<K,V>[] tab, int h, K k, V v) { Class<?> kc = null; boolean searched = false; TreeNode<K,V> root = (parent != null) ? root() : this; //循环找出新节点的位置 for (TreeNode<K,V> p = root;;) { int dir, ph; K pk; if ((ph = p.hash) > h) dir = -1; else if (ph < h) dir = 1; else if ((pk = p.key) == k || (k != null && k.equals(pk))) return p; else if ((kc == null && (kc = comparableClassFor(k)) == null) || (dir = compareComparables(kc, k, pk)) == 0) { if (!searched) { TreeNode<K,V> q, ch; searched = true; if (((ch = p.left) != null && (q = ch.find(h, k, kc)) != null) || ((ch = p.right) != null && (q = ch.find(h, k, kc)) != null)) return q; } dir = tieBreakOrder(k, pk); } TreeNode<K,V> xp = p; //如果需要放到节点左边,并且左边的节点为null时,说明此位置就是新节点的位置 if ((p = (dir <= 0) ? p.left : p.right) == null) { Node<K,V> xpn = xp.next; TreeNode<K,V> x = map.newTreeNode(h, k, v, xpn); if (dir <= 0) xp.left = x; else xp.right = x; xp.next = x; x.parent = x.prev = xp; if (xpn != null) ((TreeNode<K,V>)xpn).prev = x; //节点放入后,也是要进行树的调整,以及把新的根节点(可能会产生新的根节点,也可能不会),放到数组中去 moveRootToFront(tab, balanceInsertion(root, x)); return null; } } }
5、最后,resize()扩容
final Node<K,V>[] resize() { Node<K,V>[] oldTab = table; int oldCap = (oldTab == null) ? 0 : oldTab.length; int oldThr = threshold; int newCap, newThr = 0; //如果旧表长度不为0 if (oldCap > 0) { //如果长度大于最大长度了,则不会在扩容了 if (oldCap >= MAXIMUM_CAPACITY) { threshold = Integer.MAX_VALUE; return oldTab; } //翻倍扩容 else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY && oldCap >= DEFAULT_INITIAL_CAPACITY) newThr = oldThr << 1; // double threshold } //原数组长度不大于0,需要初始化数组,看是否有给默认值,没有则使用自己的默认长度16 else if (oldThr > 0) // initial capacity was placed in threshold newCap = oldThr; else { // zero initial threshold signifies using defaults newCap = DEFAULT_INITIAL_CAPACITY; newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY); } if (newThr == 0) { //负载因子 float ft = (float)newCap * loadFactor; newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ? (int)ft : Integer.MAX_VALUE); } threshold = newThr; @SuppressWarnings({"rawtypes","unchecked"}) Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap]; table = newTab; if (oldTab != null) { for (int j = 0; j < oldCap; ++j) { Node<K,V> e; if ((e = oldTab[j]) != null) { oldTab[j] = null; if (e.next == null) newTab[e.hash & (newCap - 1)] = e; else if (e instanceof TreeNode) ((TreeNode<K,V>)e).split(this, newTab, j, oldCap); else { // preserve order Node<K,V> loHead = null, loTail = null; Node<K,V> hiHead = null, hiTail = null; Node<K,V> next; do { next = e.next; if ((e.hash & oldCap) == 0) { if (loTail == null) loHead = e; else loTail.next = e; loTail = e; } else { if (hiTail == null) hiHead = e; else hiTail.next = e; hiTail = e; } } while ((e = next) != null); if (loTail != null) { loTail.next = null; newTab[j] = loHead; } if (hiTail != null) { hiTail.next = null; newTab[j + oldCap] = hiHead; } } } } } return newTab; }
在Java7中,重哈希是要重新计算Hash值的,而在Java8中,通过高位运算的巧妙设计,避免了这种计算。下面我们举例说明:
我们要在初始大小为2的HashMap中存储3、5、7这3个值,Hash函数为取余法。
Step1:在开始的时候,3、5、7经过Hash过后 3%2=1、5%2=1、7%2=1,因而3、5、7存储在同一个箱子的链表中(地址为1)。
Step2:现在扩容了,扩容后的大小为2*2=4,现在经过Hash后3%4=3、5%4=1、7%4=3,因而3与7一起放在箱子的链表中(地址为3),5单独存放在一个箱子里(地址为1)。
整个过程如下图所示:
我们注意到,在扩容后3和7的位置变化了,由1—>3(=1+2)
再进行扩容,由4容为8,那么经过Hash后,3%8=3、5%8=5、7%8=7,分别存放于3、5(=1+4)、7(=3+4)这几个位置中。
我们发现,扩容后的元素要么在原位置,要么在原位置再移动2次幂的位置,整个过程只需要使用一个位运算符<<就可以了(在源码的resize方法中可以找到)
我们用计算机的地址来展示这个过程:
n为table的长度,图(a)表示扩容前的key1和key2两种key确定索引位置的示例,图(b)表示扩容后key1和key2两种key确定索引位置的示例,其中hash1是key1对应的哈希与高位运算结果。元素在重新计算hash之后,因为n变为2倍,那么n-1的mask范围在高位多1bit(红色),因此新的index就会发生这样的变化:
因此,我们在扩充HashMap的时候,不需要像JDK1.7的实现那样重新计算hash,只需要看看原来的hash值新增的那个bit是1还是0就好了,是0的话索引没变,是1的话索引变成“原索引+oldCap”,
可以看看下图为16扩充为32的resize示意图:
这个设计确实非常的巧妙,既省去了重新计算hash值的时间,而且同时,由于新增的1bit是0还是1可以认为是随机的,因此resize的过程,均匀的把之前的冲突的节点分散到新的bucket了。这一块就是JDK1.8新增的优化点。
扩容元素转移过程如下:
1、扩容时如果原数组上是链表结构,则先根据位运算(可能)变成两个链表,然后一次性移到新数组上;
2、如果原数组上的数据结构为红黑树,则调用方法((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
先将树拆成两个链表(实际上是分成了两棵树,因为元素的类型还是TreeNode),得到低位和高位链表元素的个数,如果低位的链表不为null并且元素个数少于6个,则会把低位的链表反树化(TreeNode->Node),
如果低位的元素个数不少于6个并且高位的链表不存在,低位链表的数据则直接移到新的数组上。相反高位链表的判断也是如此
final void split(HashMap<K,V> map, Node<K,V>[] tab, int index, int bit) { TreeNode<K,V> b = this; // Relink into lo and hi lists, preserving order TreeNode<K,V> loHead = null, loTail = null; TreeNode<K,V> hiHead = null, hiTail = null; int lc = 0, hc = 0; for (TreeNode<K,V> e = b, next; e != null; e = next) { next = (TreeNode<K,V>)e.next; e.next = null; if ((e.hash & bit) == 0) { if ((e.prev = loTail) == null) loHead = e; else loTail.next = e; loTail = e; ++lc; } else { if ((e.prev = hiTail) == null) hiHead = e; else hiTail.next = e; hiTail = e; ++hc; } } //低位判断 if (loHead != null) { if (lc <= UNTREEIFY_THRESHOLD) tab[index] = loHead.untreeify(map); else { tab[index] = loHead; if (hiHead != null) // (else is already treeified) loHead.treeify(tab); } } //高位判断 if (hiHead != null) { if (hc <= UNTREEIFY_THRESHOLD) tab[index + bit] = hiHead.untreeify(map); else { tab[index + bit] = hiHead; if (loHead != null) hiHead.treeify(tab); } } }
注:以上内容借鉴了图灵学院-周瑜老师的课程,感谢阅读