Java 杂谈Java

HashMap框架源码深入解读,面试不用愁

2019-09-16  本文已影响0人  java劝退师图图

本人免费整理了Java高级资料,涵盖了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo高并发分布式等教程,一共30G,需要自己领取。
传送门:https://mp.weixin.qq.com/s/JzddfH-7yNudmkjT0IRL8Q

在Java Collections Framework的体系中中,主要有两个重要的接口,一个是List、Set和Queue所属的Collection,还有一个就是Map接口了。在上一篇文章中介绍了List接口,它适用于按数值索引访问元素的情形。本文中将介绍的Map则提供了一个更通用的元素存储方法。

Map 集合类用于存储元素对(称作“键”和“值”)也叫键值对(key/value pair),其中每个键映射到一个值。从概念上而言,你可以将 List 看作是具有数值键的 Map。Map接口规定key值是不能重复的,而value值可以重复。

Map接口有三种重要的具体实现类——HashMapWeakHashMapTreeMap,其中HashMap还有一个重要的子类LinkedHashMap,它们都是非线程安全的类,本文将通过分析源码重点介绍HashMap类,关于另外几个类的内容则留到后续文章再讲。

Map接口的架构如下图所示:

image

在图中可以看到,Map接口还有一个叫做HashTable的实现类,它是JDK早期的产物,与HashMap实现基本相似,不过是它是线程安全的,由于该容器已经过时,现在基本被弃用,因此在系列文章中就不多加笔墨去介绍了。

概述

HashMap是基于哈希表实现的,HashMap的每一个元素是一个key-value对,其内部通过单链表红黑树解决冲突问题,容量不足时会自动扩容。

HashMap是非线程安全的,只适用于单线程环境下,多线程环境下可以采用Concurrent并发包下的ConcurrentHashMap

哈希冲突

对于每个对象 X 和 Y,如果当且仅当 X.equals(Y) 为 false,使得 X.hashCode()!= Y.hashCode() 为 true,这样的函数叫做完美 Hash 函数。当哈希函数对两个不同的数据项产生了相同的hash值时,这就称为哈希冲突

基于对象中变化的字段,我们可以很容易地构造一个完美哈希函数,但是这需要无限的内存大小,这种假设显然是不可能的。而且,即使我们能够为每个 POJO(Plain Ordinary Java Object)或者 String 对象构造一个理论上不会有冲突的哈希函数,但是 hashCode() 函数的返回值是 int 型。根据鸽笼理论,当我们的对象超过 232 个时,这些对象会发生哈希冲突。

因此,实现HashMap的一个重要考量,就是尽可能地避免哈希冲突。HashMap在JDK 1.8中的做法是,用链表红黑树存储相同hash值的value。当Hash冲突的个数比较少时,使用链表,否则使用红黑树。

底层实现

HashMap实现的接口如下:

public class HashMap<K,V> extends AbstractMap<K,V>
    implements Map<K,V>, Cloneable, Serializable

HashMap继承自抽象类AbstractMap,实现了Map接口,AbstractMap类实现了Map接口的部分方法,因此Map的最终实现类直接继承AbstractMap,可以减少很多工作量。

先来看HashMap内部两个重要的静态内部类

单向链表的节点Node

    static class Node<K,V> implements Map.Entry<K,V> {
        final int hash;
        final K key;
        V value;
        Node<K,V> next;

        Node(int hash, K key, V value, Node<K,V> next) {
            this.hash = hash;
            this.key = key;
            this.value = value;
            this.next = next;
        }

        public final K getKey()        { return key; }
        public final V getValue()      { return value; }
        public final String toString() { return key + "=" + value; }

        public final int hashCode() {
            return Objects.hashCode(key) ^ Objects.hashCode(value);
        }

        public final V setValue(V newValue) {
            V oldValue = value;
            value = newValue;
            return oldValue;
        }

        public final boolean equals(Object o) {
            if (o == this)
                return true;
            if (o instanceof Map.Entry) {
                Map.Entry<?,?> e = (Map.Entry<?,?>)o;
                if (Objects.equals(key, e.getKey()) &&
                    Objects.equals(value, e.getValue()))
                    return true;
            }
            return false;
        }
    }

Node实现了Map的内部接口Entry,Entry接口定义了键值对(key-value pair)的基本操作,Node类提供了这些方法的实现并且还含有一个next引用,作为单链表的实现用来指向下一个Node。

红黑树的节点TreeNode

static final class TreeNode<K,V> extends LinkedHashMap.Entry<K,V> {
    TreeNode<K,V> parent;  // red-black tree links
    TreeNode<K,V> left;
    TreeNode<K,V> right;
    TreeNode<K,V> prev;    // needed to unlink next upon deletion
    boolean red;
    TreeNode(int hash, K key, V val, Node<K,V> next) {
        super(hash, key, val, next);
    }

    /** * Returns root of tree containing this node. */
    final TreeNode<K,V> root() {
        for (TreeNode<K,V> r = this, p;;) {
            if ((p = r.parent) == null)
                return r;
            r = p;
        }
    }
    ……
}

当一个单链表冲突的结点数超过预设值时,将会把这个单链表自动调整为红黑树。这样做的好处是,最坏的情况下即所有的key都Hash冲突,采用链表的话查找时间为O(n),而采用红黑树为O(logn)。

HashMap的几个重要字段如下:

//存储数据的Node数组,长度是2的幂。 transient Node<K,V>[] table; //键值对缓存,它们的映射关系集合保存在entrySet中。即使Key在外部修改导致hashCode变化,缓存中还可以找到映射关系 transient Set<Map.Entry<K,V>> entrySet; //map中保存的键值对的数量 transient****int size; //map结构被改变的次数 transient int modCount; //需要调整大小的极限值(容量装载因子)* int threshold; //装载因子,在后面会进行详细介绍 final float loadFactor;

HashMap内部使用Node数组实现了一个哈希桶数组table。可以看出,HashMap还是凭借数组实现的,数组的元素是单链表或红黑树,对于key的hash值相等的key-value pair,它们将分别作为一个结点(Node或TreeNode)存储在同一个单链表或红黑树中。我们知道数组的特点:寻址容易,插入和删除困难,而链表的特点是:寻址困难,插入和删除容易,红黑树则对插入时间、删除时间和查找时间提供了最好可能的最坏情况担保。HashpMap将这三者结合在一起。

HashMap的数据结构如下图所示:

image

此外,这里的modCount属性,记录了map结构被改变的次数,它与“fail-fast”机制的实现息息相关。fail-fast机制是Java集合的一种错误检测机制,假设存在两个线程(线程1、线程2),线程1通过Iterator在遍历集合A中的元素,在某个时候线程2修改了集合A的结构(是结构上面的修改,而不是简单的修改集合元素的内容),那么这个时候程序就会抛出 ConcurrentModificationException 异常,从而产生fail-fast机制。

对于HashMap内容的修改都将使modCount的值增加,在迭代器初始化过程中会将这个值赋给迭代器的expectedModCount,在迭代过程中,判断modCount跟expectedModCount是否相等,如果不相等就表示已经有其他线程修改了Map。

HashMap的一些重要的静态全局变量如下,它们与HashMap规避哈希碰撞的策略息息相关:

  /** * table默认的初始容量,它的值必须是2的整数幂 */
    static final int DEFAULT_INITIAL_CAPACITY = 1 << 4; // aka 16

    /** * table的最大容量,必须小于2的30次方,如果传入的容量大于这个值,将被替换为该值 */
    static final int MAXIMUM_CAPACITY = 1 << 30;

    /** * 默认装载因子,如果在构造函数中不显式指定装载因子,则默认使用该值。 */
    static final float DEFAULT_LOAD_FACTOR = 0.75f;

    /** * 结点冲突数达到8时,就会对哈希表进行调整,如果table容量小于64,那么会进行扩容, * 如果不小于64,那么会将冲突数达到8的那个单链表调整为红黑树. */
    static final int TREEIFY_THRESHOLD = 8;

    /** * 如果原先就是红黑树,resize以后冲突结点数少于6了,就把红黑色恢复成单链表 */
    static final int UNTREEIFY_THRESHOLD = 6;

    /** * 如果table的容量少于64,那么即使冲突结点数达到TREEIFY_THRESHOLD后不会把该单链表调整成红黑数,而是将table扩容 */
    static final int MIN_TREEIFY_CAPACITY = 64;

HashMap使用的hash算法如下:

static final int hash(Object key) {
    int h;
    return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
}

使用hash值的高位16位与低16进行XORs操作,算法简洁有效。

常用API

看完了HashMap的基本数据结构以后,来看一下常用方法的源码,首先自然想到的是get(key)put(key,value)

get(key)

get(key)方法的作用是的源码如下:

    public V get(Object key) {
        Node<K,V> e;
        return (e = getNode(hash(key), key)) == null ? null : e.value;
    }

    final Node<K,V> getNode(int hash, Object key) {
        Node<K,V>[] tab; Node<K,V> first, e; int n; K k;
        if ((tab = table) != null && (n = tab.length) > 0 &&
            (first = tab[(n - 1) & hash]) != null) {
            if (first.hash == hash && // always check first node
                ((k = first.key) == key || (key != null && key.equals(k))))
                return first;
            if ((e = first.next) != null) {
                if (first instanceof TreeNode)
                    return ((TreeNode<K,V>)first).getTreeNode(hash, key);
                do {
                    if (e.hash == hash &&
                        ((k = e.key) == key || (key != null && key.equals(k))))
                        return e;
                } while ((e = e.next) != null);
            }
        }
        return null;
    }

我们将要查找的key值传给get,它调用hashCode计算hash从而得到bucket位置,并进一步调用equals()方法确定键值对。取模算法中的除法运算效率很低,在HashMap中通过h & (n-1)替代取模,得到所在数组位置,效率会高很多(前提是保证数组的容量是2的整数倍)。

resize()

在介绍put方法之前还要先来看一下resize()方法,

   final Node<K,V>[] resize() {
        Node<K,V>[] oldTab = table;
        int oldCap = (oldTab == null) ? 0 : oldTab.length;
        int oldThr = threshold;
        int newCap, newThr = 0;
        if (oldCap > 0) {
            if (oldCap >= MAXIMUM_CAPACITY) {
                threshold = Integer.MAX_VALUE;
                return oldTab;
            }
            else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
                     oldCap >= DEFAULT_INITIAL_CAPACITY)
                newThr = oldThr << 1; // double threshold
        }
        else if (oldThr > 0) // initial capacity was placed in threshold
            newCap = oldThr;
        else {               // zero initial threshold signifies using defaults
            newCap = DEFAULT_INITIAL_CAPACITY;
            newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
        }
        if (newThr == 0) {
            float ft = (float)newCap * loadFactor;
            newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
                      (int)ft : Integer.MAX_VALUE);
        }
        threshold = newThr;
        @SuppressWarnings({"rawtypes","unchecked"})
            Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];
        table = newTab;
        if (oldTab != null) {
            for (int j = 0; j < oldCap; ++j) {
                Node<K,V> e;
                if ((e = oldTab[j]) != null) {
                    oldTab[j] = null;
                    if (e.next == null)
                        newTab[e.hash & (newCap - 1)] = e;
                    else if (e instanceof TreeNode)
                        ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
                    else { // preserve order
                        Node<K,V> loHead = null, loTail = null;
                        Node<K,V> hiHead = null, hiTail = null;
                        Node<K,V> next;
                        do {
                            next = e.next;
                            if ((e.hash & oldCap) == 0) {
                                if (loTail == null)
                                    loHead = e;
                                else
                                    loTail.next = e;
                                loTail = e;
                            }
                            else {
                                if (hiTail == null)
                                    hiHead = e;
                                else
                                    hiTail.next = e;
                                hiTail = e;
                            }
                        } while ((e = next) != null);
                        if (loTail != null) {
                            loTail.next = null;
                            newTab[j] = loHead;
                        }
                        if (hiTail != null) {
                            hiTail.next = null;
                            newTab[j + oldCap] = hiHead;
                        }
                    }
                }
            }
        }
        return newTab;
    }

当HashMap中的元素个数超过 数组大小 * loadFactor 时,就会进行数组扩容,loadFactor的默认值为0.75,这是一个折中的取值。也就是说,默认情况下,数组大小为16,那么当HashMap中元素个数超过 16 * 0.75=12 的时候,就把数组的大小扩展为 2 * 16=32 ,即扩大一倍,然后重新计算每个元素在数组中的位置,而这是一个非常消耗性能的操作,所以如果我们已经预知HashMap中元素的个数,那么预设元素的个数能够有效的提高HashMap的性能。

put(key,value)

put(key,value)方法的作用是向HashMap中添加一对key-value pair。源码如下:

 public V put(K key, V value) {
        return putVal(hash(key), key, value, false, true);
    }

    /** * Implements Map.put and related methods * * @param hash hash for key * @param key the key * @param value the value to put * @param onlyIfAbsent if true, don't change existing value * @param evict if false, the table is in creation mode. * @return previous value, or null if none */
    final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
                   boolean evict) {
        Node<K,V>[] tab; Node<K,V> p; int n, i;
        if ((tab = table) == null || (n = tab.length) == 0)
            n = (tab = resize()).length;
        if ((p = tab[i = (n - 1) & hash]) == null)
            tab[i] = newNode(hash, key, value, null);
        else {
            Node<K,V> e; K k;
            if (p.hash == hash &&
                ((k = p.key) == key || (key != null && key.equals(k))))
                e = p;
            else if (p instanceof TreeNode)
                e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
            else {
                for (int binCount = 0; ; ++binCount) {
                    if ((e = p.next) == null) {
                        p.next = newNode(hash, key, value, null);
                        if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st
                            treeifyBin(tab, hash);
                        break;
                    }
                    if (e.hash == hash &&
                        ((k = e.key) == key || (key != null && key.equals(k))))
                        break;
                    p = e;
                }
            }
            if (e != null) { // existing mapping for key
                V oldValue = e.value;
                if (!onlyIfAbsent || oldValue == null)
                    e.value = value;
                afterNodeAccess(e);
                return oldValue;
            }
        }
        ++modCount;
        if (++size > threshold)
            resize();
        afterNodeInsertion(evict);
        return null;
    }

将key-value pair传给put方法时,它调用hashCode计算hash从而得到bucket位置,进而,HashMap根据当前bucket的占用情况自动调整容量(超过Load Factor则resize为原来的2倍)。如果没有发生碰撞就直接放到bucket里,如果发生碰撞,Hashmap先通过链表将产生碰撞冲突的元素组织起来,如果一个bucket中碰撞冲突的元素超过某个限制(默认是8),则使用红黑树来替换链表,从而提高速度。

上一篇下一篇

猜你喜欢

热点阅读