LinkedHashMap源码分析与LRU实现

时间:2021-11-20 16:49:07

LinkedHashMap可认为是哈希表和链接列表综合实现,并允许使用null值和null键。LinkedHashMap实现与HashMap的不同之处在于,LinkedHashMap维护着一个运行于所有条目的双重链接列表。此链接列表定义了迭代顺序,该迭代顺序可以是插入顺序或者是访问顺序。 LinkedHashMap的实现不是同步的。如果多个线程同时访问LinkedHashMap,而其中至少一个线程从结构上修改了该映射,则它必须保持外部同步。

1.LinkedHashMap的存储结构  

LinkedHashMap源码分析与LRU实现

LinkedHashMap中加入了一个head头结点,将所有插入到该LinkedHashMap中的Entry按照插入的先后顺序(accessOrder标志位默认为false)依次加入到以head为头结点的双向循环链表的尾部。

LinkedHashMap实际上就是HashMap和LinkedList两个集合类的存储结构的结合。在LinkedHashMapMap中,所有put进来的Entry都保存在如图所示的哈希表中,但它又额外定义了一个以head为头结点的空的双向循环链表,每次put进来Entry,除了将其保存到对哈希表中对应的位置上外,还要将其插入到双向循环链表的尾部。

下面我们来分析LinkedHashMap的源代码。

2.LinkedHashMap成员变量

LinkedHashMap采用的hash算法和HashMap相同,但它重新定义了数组中保存的元素Entry,该Entry除了保存当前对象的引用外,还保存了其上一个元素before和下一个元素after的引用,从而在哈希表的基础上又构成了双向链接列表。

1.//双向循环链表的头结点,整个LinkedHashMap中只有一个header,  
2.//(此链表不同于HashMap里面的那个next链表)  
3.//它将哈希表中所有的Entry贯穿起来,header中不保存key-value对,只保存前后节点的引用  
4.   private transient Entry<K,V> header;  
5.  
6.//双向链表中元素排序规则的标志位。  
7.//accessOrder为false,表示按插入顺序排序  
8.//accessOrder为true,表示按访问顺序排序  
9.    private final boolean accessOrder;  
10.  
11.  
12. /**  
13. * LinkedHashMap的Entry元素。  
14. * 继承HashMap的Entry元素,又保存了其上一个元素before和下一个元素after的引用。  
15. */    
16.private static class Entry<K,V> extends HashMap.Entry<K,V> {    
17.    Entry<K,V> before, after;    
18.    ……  //Entry类涉及到的方法,下面会继续分析  
19.}  

3.构造函数

LinkedList一共提供了五个构造方法。

1.// 构造方法1,构造一个指定初始容量和加载因子的、按照插入顺序的LinkedList  
2.//加载因子取默认的0.75f    
3.  
4.public LinkedHashMap(int initialCapacity, float loadFactor) {  
5.    super(initialCapacity, loadFactor);  
6.    accessOrder = false;  
7.}  
8.  
9.// 构造方法2,构造一个指定初始容量的LinkedHashMap,取得键值对的顺序是插入顺序  
10.//加载因子取默认的0.75f    
11.  
12.public LinkedHashMap(int initialCapacity) {  
13.    super(initialCapacity);  
14.    accessOrder = false;  
15.}  
16.  
17.// 构造方法3,用默认的初始化容量和加载因子创建一个LinkedHashMap,取得键值对的顺序是插入顺序  
18.//加载因子取默认的0.75f    
19.  
20.public LinkedHashMap() {  
21.    super();  
22.    accessOrder = false;  
23.}  
24.  
25.// 构造方法4,通过传入的map创建一个LinkedHashMap,容量为默认容量(16)和  
26.//(map.zise()/DEFAULT_LOAD_FACTORY)+1的较大者,加载因子为默认值0.75  
27.  
28.public LinkedHashMap(Map<? extends K, ? extends V> m) {  
29.    super(m);  
30.    accessOrder = false;  
31.}  
32.  
33.// 构造方法5,根据指定容量、加载因子和指定链表中的元素排序的规则  创建一个LinkedHashMap  
34.public LinkedHashMap(int initialCapacity,  
35.             float loadFactor,  
36.                         boolean accessOrder) {  
37.    super(initialCapacity, loadFactor);  
38.    this.accessOrder = accessOrder;  
39.}  

我们已经知道LinkedHashMap的Entry元素继承HashMap的Entry,提供了双向链表的功能。在HashMap的构造器中,最后会调用init()方法,进行相关的初始化,这个方法在HashMap的实现中是空方法(感叹模板模式的精妙!),只是提供给子类实现相关的初始化调用。LinkedHashMap重写了init()方法,在调用父类的构造方法完成构造后,进一步实现了对其元素Entry的初始化操作。分析init()方法,的确是对header进行了初始化,并构造成一个双向循环链表(和LinkedList的存储结构是一样的)。

1.void init() {  
2.    header = new Entry<K,V>(-1, null, null, null);  
3.    header.before = header.after = header;  
4.}  

4.元素存储

LinkedHashMap重写了父类HashMap的put方法调用的子方法void addEntry(int hash, K key, V value, int bucketIndex) 和void createEntry(int hash, K key, V value, int bucketIndex),提供了自己特有的双向链接列表的实现。 

1.//覆写HashMap中的addEntry方法,LinkedHashmap并没有覆写HashMap中的put方法,  
2.    //而是覆写了put方法所调用的addEntry方法和recordAccess方法,  
3.    //put方法在插入的key已存在的情况下,会调用recordAccess方法,  
4.    //在插入的key不存在的情况下,要调用addEntry插入新的Entry  
5.void addEntry(int hash, K key, V value, int bucketIndex) {  
6.    //创建新的Entry,并插入到LinkedHashMap中  
7.    createEntry(hash, key, value, bucketIndex);  
8.  
9.    //双向链表的第一个有效节点(header后的那个节点)为近期最少使用的节点  
10.    Entry<K,V> eldest = header.after;  
11.    //如果有必要,则删除掉该近期最少使用的节点,  
12.    //这要看对removeEldestEntry的覆写,由于默认为false,因此默认是不做任何处理的。  
13.    if (removeEldestEntry(eldest)) {  
14.        removeEntryForKey(eldest.key);  
15.    } else {  
16.        //超过阈值,扩容到原来的2倍  
17.        if (size >= threshold)  
18.            resize(2 * table.length);  
19.    }  
20.}  
21.  
22.void createEntry(int hash, K key, V value, int bucketIndex) {  
23.    HashMap.Entry<K,V> old = table[bucketIndex];  
24.    Entry<K,V> e = new Entry<K,V>(hash, key, value, old);  
25.    table[bucketIndex] = e;  
26.    // 调用元素的addBrefore方法,将元素加入到哈希、双向链接列表。  
27.    //每次插入Entry时,都将其移到双向链表的尾部,  
28.    //这便会按照Entry插入LinkedHashMap的先后顺序来迭代元素,  
29.    //同时,新put进来的Entry是最近访问的Entry,把其放在链表末尾,符合LRU算法的实现  
30.    e.addBefore(header);  
31.    size++;  
32.}  
33.//双向循环立链表中,将当前的Entry插入到existingEntry的前面  
34.private void addBefore(Entry<K,V> existingEntry) {  
35.    after  = existingEntry;  
36.    before = existingEntry.before;  
37.    before.after = this;  
38.    after.before = this;  
39.}  
40.  
41.//该方法默认返回false,我们一般在用LinkedHashMap实现LRU算法时,  
42.//要覆写该方法,一般的实现是,当设定的内存(这里指节点个数)达到最大值时,返回true,  
43.//这样put新的Entry(该Entry的key在哈希表中没有已经存在)时,  
44.//就会调用removeEntryForKey方法,将最近最少使用的节点删除(head后面的那个节点,实际上是最近没有使用)。  
45.    protected boolean removeEldestEntry(Map.Entry<K,V> eldest) {  
46.        return false;  
47.    }  
48.}  

5.元素读取

LinkedHashMap重写了父类HashMap的get方法。由于的链表的增加、删除操作是常量级的,性能不会带来较大损失。LinkedHashMap 最牛逼的地方在于recordAccess()方法

1.//覆写HashMap中的get方法,通过getEntry方法获取Entry对象。  
2.    //注意这里的recordAccess方法,  
3.    //如果链表中元素的排序规则是按照插入的先后顺序排序的话,该方法什么也不做,  
4.    //如果链表中元素的排序规则是按照访问的先后顺序排序的话,则将e移到链表的末尾处。  
5.public V get(Object key) {  
6.    // 调用父类HashMap的getEntry()方法,取得要查找的元素。  
7.    Entry<K,V> e = (Entry<K,V>)getEntry(key);  
8.    if (e == null)  
9.        return null;  
10.    // 记录访问顺序。  
11.    e.recordAccess(this);  
12.    return e.value;  
13.}  
14.//覆写HashMap中的recordAccess方法(HashMap中该方法为空),  
15.//当调用父类的put方法,在发现插入的key已经存在时,会调用该方法,  
16.//调用LinkedHashmap覆写的get方法时,也会调用到该方法,  
17.//该方法提供了LRU算法的实现,它将最近使用的Entry放到双向循环链表的尾部,  
18.//accessOrder为true时,get方法会调用recordAccess方法  
19.//put方法在覆盖key-value对时也会调用recordAccess方法  
20.//它们导致Entry最近使用,因此将其移到双向链表的末尾  
21.void recordAccess(HashMap<K,V> m) {  
22.    LinkedHashMap<K,V> lm = (LinkedHashMap<K,V>)m;  
23.    //如果链表中元素按照访问顺序排序,则将当前访问的Entry移到双向循环链表的尾部,  
24.    //如果是按照插入的先后顺序排序,则不做任何事情。  
25.    if (lm.accessOrder) {  
26.        lm.modCount++;  
27.        remove();//移除当前访问的Entry  
28.        addBefore(lm.header);//将当前访问的Entry插入到链表的尾部  
29.    }  
30.}  

6.元素删除

LinkedHashMap没有重写remove(Object key)方法,重写了被remove调用的recordRemoval方法,再一次感叹模板方法模式的精妙!
HahsMap remove(Object key)把数据从横向数组 * 竖向next链表里面移除之后(就已经完成工作了,所以HashMap里面recordRemoval是空的实现调用了此方法
但在LinkedHashMap里面,还需要移除header链表里面Entry的after和before关系。

7.元素遍历

1.//迭代器  
2.    private abstract class LinkedHashIterator<T> implements Iterator<T> {  
3.        Entry<K,V> nextEntry    = header.after;  
4.        Entry<K,V> lastReturned = null;  
5.  
6.        /** 
7.         * The modCount value that the iterator believes that the backing 
8.         * List should have.  If this expectation is violated, the iterator 
9.         * has detected concurrent modification. 
10.         */  
11.        int expectedModCount = modCount;  
12.  
13.        public boolean hasNext() {  
14.            return nextEntry != header;  
15.        }  
16.  
17.        public void remove() {  
18.            if (lastReturned == null)  
19.                throw new IllegalStateException();  
20.            if (modCount != expectedModCount)  
21.                throw new ConcurrentModificationException();  
22.  
23.            LinkedHashMap.this.remove(lastReturned.key);  
24.            lastReturned = null;  
25.            expectedModCount = modCount;  
26.        }  
27.        //从head的下一个节点开始迭代  
28.        Entry<K,V> nextEntry() {  
29.            if (modCount != expectedModCount)  
30.                throw new ConcurrentModificationException();  
31.            if (nextEntry == header)  
32.                throw new NoSuchElementException();  
33.  
34.            Entry<K,V> e = lastReturned = nextEntry;  
35.            nextEntry = e.after;  
36.            return e;  
37.        }  
38.    }  
39.    //key迭代器  
40.    //看出这三个类都很简单,只有一个next()方法,next()方法也只是去调用LinkedHashIterator类中相应的方法  
41.    private class KeyIterator extends LinkedHashIterator<K> {  
42.        public K next() { return nextEntry().getKey(); }  
43.    }  
44.    //value迭代器  
45.    private class ValueIterator extends LinkedHashIterator<V> {  
46.        public V next() { return nextEntry().value; }  
47.    }  
48.    //Entry迭代器  
49.    private class EntryIterator extends LinkedHashIterator<Map.Entry<K,V>> {  
50.        public Map.Entry<K,V> next() { return nextEntry(); }  
51.    }  

8.基于LinkedHashMap实现LRU Cache

用LinkedHashmap实现LRU算法,就要覆写方法removeEldestEntry。该方法默认返回false,我们一般在用LinkedHashMap实现LRU算法时,要覆写该方法,一般的实现是,当设定的内存(这里指节点个数)达到最大值时,返回true,这样put新的Entry(该Entry的key在哈希表中没有已经存在)时,就会调用removeEntryForKey方法,将最近最少使用的节点删除(head后面的那个节点,实际上是最近没有使用)。

LinkedHashMap是如何实现LRU的。首先,当accessOrder为true时,才会开启按访问顺序排序的模式,才能用来实现LRU算法。我们可以看到,无论是put方法还是get方法,都会导致目标Entry成为最近访问的Entry,因此便把该Entry加入到了双向链表的末尾(get方法通过调用recordAccess方法来实现,put方法在覆盖已有key的情况下,也是通过调用recordAccess方法来实现,在插入新的Entry时,则是通过createEntry中的addBefore方法来实现),这样便把最近使用了的Entry放入到了双向链表的后面,多次操作后, 双向链表前面的Entry便是最近没有使用的,这样当节点个数满的时候,删除的最前面的Entry(head后面的那个Entry)便是最近最少使用的Entry。

1./*LRU是Least Recently Used 近期最少使用算法。 
2. *通过HashLiekedMap实现LRU的算法的关键是,如果map里面的元素个数大于了缓存最大容量,则删除链表头元素 
3. */  
4.  
5./*public LinkedHashMap(int initialCapacity,float loadFactor,boolean accessOrder) 
6. *LRU参数参数: 
7. *initialCapacity - 初始容量。 
8. *loadFactor - 加载因子(需要是按该因子扩充容量)。 
9. *accessOrder - 排序模式( true) - 对于访问顺序(get一个元素后,这个元素被加到最后,使用了LRU  最近最少被使用的调度算法),对于插入顺序,则为 false,可以不断加入元素。 
10. */  
11.  
12. /*相关思路介绍: 
13.  * 当有一个新的元素加入到链表里面时,程序会调用LinkedHahMap类中Entry的addEntry方法, 
14.  *而该方法又会 会调用removeEldestEntry方法,这里就是实现LRU元素过期机制的地方, 
15.  * 默认的情况下removeEldestEntry方法只返回false,表示可以一直表链表里面增加元素,在这个里  *修改一下就好了。  
16.  * 
17.  */  
18.   
19./* 
20.测试数据: 
21.11 
22.7 0 7 1 0 1 2 1 2 6 
23.*/  
24.  
25.import java.util.*;  
26.public class LRULinkedHashMap<K,V> extends LinkedHashMap<K,V>{       
27.    private int capacity;                     //初始内存容量  
28.      
29.    LRULinkedHashMap(int capacity){          //构造方法,传入一个参数  
30.        super(16,0.75f,true);               //调用LinkedHashMap,传入参数      
31.        this.capacity=capacity;             //传递指定的最大内存容量  
32.    }  
33.    @Override  
34.    public boolean removeEldestEntry(Map.Entry<K, V> eldest){       
35.        //,每加入一个元素,就判断是size是否超过了已定的容量  
36.        System.out.println("此时的size大小="+size());  
37.        if((size()>capacity))  
38.        {  
39.            System.out.println("超出已定的内存容量,把链表顶端元素移除:"+eldest.getValue());  
40.        }  
41.        return size()>capacity;          
42.    }  
43.      
44.    public static void main(String[] args) throws Exception{//方便实例,直接将异常抛出  
45.        Scanner cin = new Scanner(System.in);  
46.          
47.        System.out.println("请输入总共内存页面数: ");  
48.        int n = cin.nextInt();  
49.        Map<Integer,Integer> map=new LRULinkedHashMap<Integer, Integer>(n);  
50.          
51.        System.out.println("请输入按顺序输入要访问内存的总共页面数: ");  
52.        int y = cin.nextInt();  
53.          
54.        System.out.println("请输入按顺序输入访问内存的页面序列: ");  
55.        for(int i=1;i<=y;i++)  
56.        {  
57.            int x = cin.nextInt();  
58.            map.put(x,  x);    
59.        }  
60.        System.out.println("此时内存中包含的页面数是有:");  
61.        //遍历此时内存中的页面并输出  
62.        for(java.util.Map.Entry<Integer, Integer> entry: map.entrySet()){  
63.            System.out.println(entry.getValue());  
64.        }  
65.    }  
66.}

9.总结

1.LinkedHashMap继承自HashMap,具有HashMap的大部分特性,比如支持null键和值,默认容量为16,装载因子为0.75,非线程安全等等;

2.LinkedHashMap通过设置accessOrder控制遍历顺序是按照插入顺序还是按照访问顺序。当accessOrder为true时,可以利用其完成LRU缓存的功能;

3.LinkedHashMap内部维护了一个双向循环链表,并且其迭代操作时通过链表完成的,而不是去遍历hash表。