set\list\map部分原始碼解析

yoylee_web發表於2018-10-24

一:整體繼承的關係

List、Set實現Collection介面。Map並沒有實現任何介面,但內部聚合了一個Collection物件

 

二:陣列與集合的不同

  • 陣列只能存放單一的資料型別、集合可以儲存和運算元目不固定的一組資料

  • 所有的JAVA集合都位於 java.util包中

  • JAVA集合只能存放引用型別(類似int不可以,可以使用Integer)的的資料,不能存放基本資料型別( Java集合中實際存放的只是物件的引用,每個集合元素都是一個引用變數,實際內容都放在堆記憶體或者方法區裡面,但是基本資料型別是在棧記憶體上分配空間的,棧上的資料隨時就會被收回的)。

三:Collection介面簡介

  • Collection是最基本的集合介面,宣告瞭適用於JAVA集合(只包括Set和List)的通用方法。 Set 和List 都繼承了Conllection。

  • Collection沒有get()方法來取得某個元素。只能通過iterator()遍歷元素。

  • Collection繼承體系,來自:https://blog.csdn.net/qq_28261343/article/details/52614411

Collection
    |-----List  有序(儲存順序和取出順序一致),可重複

        |----ArrayList ,執行緒不安全,底層使用陣列實現,查詢快,增刪慢。效率高。
                每次容量不足時,自增長度的一半,如下原始碼可知
                  int newCapacity = oldCapacity + (oldCapacity >> 1);

        |----LinkedList , 執行緒不安全,底層使用連結串列實現,查詢慢,增刪快。效率高

        |----Vector , 執行緒安全,底層使用陣列實現,查詢快,增刪慢。效率低
                每次容量不足時,預設自增長度的一倍(如果不指定增量的話),如下原始碼可知
                   int newCapacity = oldCapacity + ((capacityIncrement > 0) ?
                                   capacityIncrement : oldCapacity);

    |-----Set   元素唯一
    一個不包含重複元素的 collection。更確切地講,set 不包含滿足 e1.equals(e2) 的元素對 e1 和 e2,並且最多包含一個 null 元素

        |--HashSet 底層是由HashMap實現的,通過物件的hashCode方法與equals方法來保證插入元素的唯一性,無序(儲存順序和取出順序不一致)。

            |--LinkedHashSet 底層資料結構由雜湊表和連結串列組成。雜湊表保證元素的唯一性,連結串列保證元素有序。(儲存和取出是一致)

        |--TreeSet 基於 TreeMap 的 NavigableSet 實現。使用元素的自然順序對元素進行排序,或者根據建立 set 時提供的 Comparator 進行排序,具體取決於使用的構造方法。 元素唯一。

四:特性

1、List:

  • 有序 元素可重複

  • 底層維護的陣列可自動擴充套件

  • 因為有序,所以可以通過下標獲得資料 也可以通過迭代

  • 主要實現:ArrayList LinkList Vector

2、Set

  • 最簡單的一種集合

  • 無序 元素不可重複;

  • 因為資料無序,所以不可以通過下標訪問,只能通過迭代得到資料。

  • 主要實現:HashSet TreeSet 

3、Map

  • 鍵物件和值物件對映的集合,鍵值對集合

  • Map沒有繼承於Collection介面

  • 主要實現:HashMap HashTable LinkHashMap TreeMap

五:深入特性

1:list\map序列化

  • 對於list的底層儲存 ,都是由”transient“修飾的,這是不會自動進行序列化的,但是他們的序列化怎麼實現的呢?

transient Object[] elementData;    //ArrayList

transient Node<E> first; transient Node<E> last;    //LinkedList

transient Node<K,V>[] table;   //HashMap
  • 序列化方法(以Arraylist為例):

private void writeObject(java.io.ObjectOutputStream s)throws java.io.IOException{
    // Write out element count, and any hidden stuff
    int expectedModCount = modCount;
    s.defaultWriteObject();    //對預設可以序列化的欄位進行序列化

    // Write out size as capacity for behavioural compatibility with clone()
    s.writeInt(size);


    // Write out all elements in the proper order.
    for (int i=0; i<size; i++) {    //對儲存的資料進行序列化,單個元素一個一個的序列化
        s.writeObject(elementData[i]);
    }


    if (modCount != expectedModCount) {
        throw new ConcurrentModificationException();
    }
}
  • 為什麼要這樣實現呢?

    • 因為,這些集合存在動態擴容機制,實際儲存的資料數量總是小於陣列的真實大小,所以如果直接對儲存資料的陣列進行自動的序列化,浪費資源,採用這種方式效率會更高。

2:LinkedList獲取元素的方式(*)

  • 原始碼解析:

public E get(int index) {
    checkElementIndex(index);  //檢查獲取位置是否合理
    return node(index).item;    //獲取資料,node(index)方法如下
}

Node<E> node(int index) {
    if (index < (size >> 1)) {    //首先,判斷查詢的位置是否在左半部分,如果是則從開始遍歷
        Node<E> x = first;
        for (int i = 0; i < index; i++)
            x = x.next;
        return x;
   } else {                               //如果不是,則從尾部開始遍歷
        Node<E> x = last;
        for (int i = size - 1; i > index; i--)
            x = x.prev;
        return x;
    }
}

3:TreeMap排序

  • 自定義排序程式碼:

package others;
import java.util.*;

/**
* 測試TreeMap的自定義排序方式
* 預設是:對key的由大到小排序
*/
public class TreeMapSortForValue {

    public static void main(String[] args) {
        ////測試根據value從小到大排序(預設為從大到小) <可以進行重複值排序了!!!!>
        Map<String,Integer> map = new TreeMap<>();
        map.put("a", 4);
        map.put("d", 3);
        map.put("c", 1);
        map.put("b", 7);
        map.put("h", 3);
        sortForValue(map);

        ////測試自定義排序,這種方式只能對key操作,不可以對value
        Map<String,Integer> map1= new TreeMap<>(new customSortForMinToMax());
        map1.put("a", 4);
        map1.put("d", 3);
        map1.put("c", 1);
        map1.put("b", 7);
        map1.put("h", 3);
        System.out.println(map1);

    }


    static void sortForValue(Map<String, Integer> map){
        List<Map.Entry<String,Integer>> list = new ArrayList<>(map.entrySet());
        //自定義排序,預設為從大到小就不必建立下面的語句
        list.sort((o1, o2) -> o1.getValue().compareTo(o2.getValue())); //lambda表示式形式,效果等同於下面
        // list.sort(new Comparator<Map.Entry<String, Integer>>() { //非lambda表示式形式
        // @Override
        // public int compare(Map.Entry<String, Integer> o1, Map.Entry<String, Integer> o2) {
        // return o1.getValue().compareTo(o2.getValue());
        // }
        // });

        for (Map.Entry m : list){
            System.out.println(m.getKey()+" "+m.getValue());
        }
    }
}

//自定義排序方法的具體實現類
class customSortForMinToMax implements Comparator<String>{

    @Override
    public int compare(String o1, String o2) {
        return o1.compareTo(o2);
    }
}
  • 微原理

    • put方法大致執行順序如下:

    • 1:檢查是否為null,再次提醒,key值不能為null

    • 2:分情況(有無)比較器。比如有比較器原始碼:

// 有比較器

if (cpr != null) {
    do {
       parent = t;
        cmp = cpr.compare(key, t.key);
        if (cmp < 0)
            t = t.left;
        else if (cmp > 0)
            t = t.right;
        else
            // 如果key值相等,覆蓋,返回舊值
            return t.setValue(value);
    } while (t != null);
}
  • 3:put為插入操作,可能破壞紅黑樹,所以進行旋轉,並且增加size,modCount

// 此函式為插入元素後,有可能破壞紅黑樹性質
// 故需要旋轉節點來修復紅黑樹
fixAfterInsertion(e);
size++;
modCount++;
  • 其他:

  • modCount變數(修改該集合的次數,實現fail-fast的關鍵!):

    • 線上程不安全的集合中,如果使用迭代器的過程中,發現集合被修改,會丟擲ConcurrentModificationExceptions錯誤,這就是fail-fast機制。對集合進行結構性修改時,modCount都會增加,在初始化迭代器時,modCount的值會賦給expectedModCount,在迭代的過程中,只要modCount改變了,int expectedModCount = modCount等式就不成立了,迭代器檢測到這一點,就會丟擲錯誤:currentModificationExceptions。

  • * TreeMap是根據key進行排序的,它的排序和定位需要依賴比較器或覆寫Comparable介面,也因此不需要key覆寫hashCode方法和equals方法,就可以排除掉重複的key,而HashMap的key則需要通過覆寫hashCode方法和equals方法來確保沒有重複的key

  • * TreeMap的查詢、插入、刪除效率均沒有HashMap高,一般只有要對key排序時才使用TreeMap

  • * TreeMap的key不能為null,而HashMap的key可以為null

4:擴容機制

  • 初始容量與擴容倍數

    • HashMap:

      • 初始容量:1<<4 即:16

      • 初始負載因子 : 0.75

      • 初始臨界容量:16*0.75 = 12

      • 為什麼HashMap的容量為2的冪次呢? 1:使分佈更加均勻 2:便於取餘  ,即在便於取餘的基礎上使分佈更加均勻。

      • 擴容步驟大致為:

      • 1:建立新陣列儲存未擴容前陣列

      • 2:計算出擴容後的容量,臨界容量

      • 3:根據新容量建立一個新陣列,並將引用賦值到類變數table上

      • 4:將舊陣列的元素複製到新陣列中

      • 5:擴容完成,具體細節請看下面的原始碼與註釋

  //初始容量

    /**
     * The default initial capacity - MUST be a power of two.
     */
    static final int DEFAULT_INITIAL_CAPACITY = 1 << 4; // aka 16

    //最大容量
    /**
     * The maximum capacity, used if a higher value is implicitly specified
     * by either of the constructors with arguments.
     * MUST be a power of two <= 1<<30.
     */

    static final int MAXIMUM_CAPACITY = 1 << 30;

    //初始負載因子
    /**
     * The load factor used when none specified in constructor.
     */
    static final float DEFAULT_LOAD_FACTOR = 0.75f;

    。。。。。

    //擴容方法 

    final Node<K,V>[] resize() {
        //建立一個新的陣列儲存未擴容前陣列
        Node<K,V>[] oldTab = table;
        //記錄未擴容前陣列引數:容量和負載因子
        int oldCap = (oldTab == null) ? 0 : oldTab.length;
        int oldThr = threshold;   //threshold為臨界值,即:負載因子*容量
        //建立擴容後新陣列的引數並初始化
        int newCap, newThr = 0;
        if (oldCap > 0) {
            //如果未擴容前容量就已經大於等於最大容量,則不再擴容,並設定臨界值為最大整數值
            if (oldCap >= MAXIMUM_CAPACITY) {
                threshold = Integer.MAX_VALUE;
                return oldTab;
            }
            //賦值擴容後的陣列容量和臨界儲存容量
            else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
                     oldCap >= DEFAULT_INITIAL_CAPACITY)
                newThr = oldThr << 1; // double threshold
        }

        //舊陣列容量小於0,如果臨界值大於0,則複製新容量為臨界值
        else if (oldThr > 0) // initial capacity was placed in threshold
            newCap = oldThr;
        //舊陣列容量和臨界值都小於0,則重新初始化為預設容量
        else {               // zero initial threshold signifies using defaults
            newCap = DEFAULT_INITIAL_CAPACITY;
            newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
        }
         //如果臨界容量為0,則重新計算臨界值並賦值
        if (newThr == 0) {
            float ft = (float)newCap * loadFactor;
            newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
                      (int)ft : Integer.MAX_VALUE);
        }
        //正式修改 擴容後的臨界值
        threshold = newThr;
        //根據計算的新容量建立一個新的陣列
        @SuppressWarnings({"rawtypes","unchecked"})
            Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];
        //正式修改 擴容後的陣列物件
        table = newTab;
        //將舊陣列(oldTab)裡面的值複製到新陣列(table)
        if (oldTab != null) {
            for (int j = 0; j < oldCap; ++j) {
                Node<K,V> e;
                if ((e = oldTab[j]) != null) {
                    oldTab[j] = null;
                    if (e.next == null)
                        newTab[e.hash & (newCap - 1)] = e;
                    else if (e instanceof TreeNode)
                        ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
                    else { // preserve order
                        Node<K,V> loHead = null, loTail = null;
                        Node<K,V> hiHead = null, hiTail = null;
                        Node<K,V> next;
                        do {
                            next = e.next;
                            if ((e.hash & oldCap) == 0) {
                                if (loTail == null)
                                    loHead = e;
                                else
                                    loTail.next = e;
                                loTail = e;
                            }
                            else {
                                if (hiTail == null)
                                    hiHead = e;
                                else
                                    hiTail.next = e;
                                hiTail = e;
                            }
                        } while ((e = next) != null);
                        if (loTail != null) {
                            loTail.next = null;
                            newTab[j] = loHead;
                        }
                        if (hiTail != null) {
                            hiTail.next = null;
                            newTab[j + oldCap] = hiHead;
                        }
                    }
                }
            }
        }
        //擴容完成,返回新陣列,此處返回table和newTab是一樣的,因為陣列是引用傳遞,使用的是同意地址下的陣列
        return newTab;
    }
  • ArrayList:

    • 初始容量:10

    • 擴容機制:預設擴容為原來容量的1.5倍

  /**
     * Default initial capacity.
     */
    //初始容量
    private static final int DEFAULT_CAPACITY = 10;

    
    。。。。。。

    /**
     * Increases the capacity to ensure that it can hold at least the
     * number of elements specified by the minimum capacity argument.
     *
     * @param minCapacity the desired minimum capacity
     */

    private void grow(int minCapacity) {
        // overflow-conscious code
        //儲存未擴容前容量
        int oldCapacity = elementData.length;
        //新容量為 舊容量的的1.5倍
        int newCapacity = oldCapacity + (oldCapacity >> 1);
        //如果新容量小於容量最小值,則重新賦值為最小值
        if (newCapacity - minCapacity < 0)
            newCapacity = minCapacity;
       //如果新容量大於容量最大值,則重新賦值為最大值
        if (newCapacity - MAX_ARRAY_SIZE > 0)
            newCapacity = hugeCapacity(minCapacity);
        // minCapacity is usually close to size, so this is a win:
        //複製元素到新陣列
        elementData = Arrays.copyOf(elementData, newCapacity);
    }
    //返回值為<T> T[]的Arrays.copyOf方法
    @SuppressWarnings("unchecked")
    public static <T> T[] copyOf(T[] original, int newLength) {
        return (T[]) copyOf(original, newLength, original.getClass());
    }
    //返回值為<T,U> T[]的copyOf方法
    public static <T,U> T[] copyOf(U[] original, int newLength, Class<? extends T[]> newType) {
        @SuppressWarnings("unchecked")
        //根據新容量建立新陣列
        T[] copy = ((Object)newType == (Object)Object[].class)
            ? (T[]) new Object[newLength]
            : (T[]) Array.newInstance(newType.getComponentType(), newLength);
        //呼叫系統函式進行克隆
        System.arraycopy(original, 0, copy, 0,
                         Math.min(original.length, newLength));
        return copy;

    }
  • Vector

    • 初始容量:10

    • 擴容機制:預設擴容你為原來容量的2倍,具體擴容機制與ArrayList類似,會進行併發控制

5:HashMap中key中null值儲存位置(JDK8)

  • Jdk8中null值存放位置

  • put方法放key為null的流程如下:

/**put方法*/
public V put(K key, V value) {
    //使用了putVal方法,其中使用了hash(key)方法獲取到key的hash
    return putVal(hash(key), key, value, false, true);
}

/**hash(key)方法*/
static final int hash(Object key) {
    int h;
    //此處可以看到,當key為null時,直接將其hash值設定為0
    return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
}


/**putVal(,,)方法*/
final V putVal(int hash, K key, V value, boolean onlyIfAbsent,boolean evict) {
    Node<K,V>[] tab; Node<K,V> p; int n, i;
    //初始化底層陣列
    if ((tab = table) == null || (n = tab.length) == 0)
        n = (tab = resize()).length;
    //!!!此處計算key應該在陣列的位置
    // 我們已經知道當key為null時,hash值為0,則“i = (n - 1) & hash]”這一步後"i = 0"
    //因為所有的值與0相與都為0,則如果陣列的該位置沒有節點,則建立一個新的節點並賦值
    if ((p = tab[i = (n - 1) & hash]) == null)
        tab[i] = newNode(hash, key, value, null);
    //如果有節點,分是否是同一個key兩種情況,同一個key則替換其value,不同key則向後拉鍊
    else {
        Node<K,V> e; K k;
        if (p.hash == hash &&((k = p.key) == key || (key != null && key.equals(k))))
            e = p;
        else if (p instanceof TreeNode)
            e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
        else {
            for (int binCount = 0; ; ++binCount) {
                if ((e = p.next) == null) {
                    p.next = newNode(hash, key, value, null);
                    if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st
                        treeifyBin(tab, hash);
                    break;
                }

                if (e.hash == hash &&((k = e.key) == key || (key != null && key.equals(k))))
                    break;
                p = e;
            }
        }
        if (e != null) { // existing mapping for key
            V oldValue = e.value;
            if (!onlyIfAbsent || oldValue == null)
                    e.value = value;
            afterNodeAccess(e);
            return oldValue;
        }
    }

    //增加該map的修改次數
    ++modCount;

    //增加元素數,並注意擴容
    if (++size > threshold)
        resize();
    afterNodeInsertion(evict);
    return null;
}

 

 

相關文章