11-HashSet、TreeSet 源码解析和面试题(集合)

注:源码系列文章主要是对某付费专栏的总结记录。如有侵权,请联系删除。

HashSet、TreeSet 两个类是在 Map 的基础上组装起来的类,我们学习的侧重点,主要在于 Set 是如何利用 Map 现有的功能,来达成自己的目的的,也就是说如何基于现有功能进行创新,然后再看看一些改变的小细节。

1 HashSet

1.1 类注释

  1. 底层实现基于 HashMap,所以迭代时不能保证按照插入顺序,或者其它顺序进行迭代;
  2. add、remove、contanins、size 等方法的耗时性能,是不会随着数据量的增加而增加的,这个主要跟 HashMap 底层的数组结构有关,不管数据量多大,不考虑 hash 冲突的情况下,时间复杂度都是 O(1);
  3. 线程不安全的,如果需要请自行加锁,或者使用 Collections.synchronizedSet
  4. 迭代过程中,如果数据结构被改变,会快速失败的,抛出 ConcurrentModificationException 异常。

我们之前也看过 List、Map 的类注释,我们发现 2、3、4 点信息在类注释中都有提到,所以如果有人问 List、Map、Set 三者的共同点,那么就可以说说这三点。

1.2 HashSet 是如何组合 HashMap 的

刚才是从类注释 1 中看到,HashSet 的实现是基于 HashMap 的,在 Java 中,要基于基础类进行创新实现,有两种方法:

  • 继承基础类,覆写基础类的方法,比如说继承 HashMap,覆写其 add 方法;
  • 组合基础类,通过调用基础类的方法,来复用基础类的能力。

HashSet 使用的就是组合 HashMap,其优点如下:

  1. 继承表示父子类是同一事物,而 Set 和 Map 本来就是想表达两种事物,所以继承不妥,而且 Java 语法限制,子类只能继承一个父类,后续难以扩展。
  2. 组合更加灵活,可以任意的组合现有的基础类,并且可以在基础类方法的基础上进行扩展、编排,而且方法可以任意命名,无需和基础类的方法名称保持一致。

我们工作中,如果碰到类似问题,我们的原则也是尽量多用组合,少用继承。

组合就是把 HashMap 当做自己的一个局部变量,以下是 HashSet 的组合实现:

// 把 HashMap 组合进来,key 是 HashSet 的 key,value 是下面的 PRESENT
private transient HashMap<E,Object> map;
// HashMap 中的 value
private static final Object PRESENT = new Object();

从这两个属性可以看到:

  1. 我们在使用 HashSet 时,比如 add 方法,只有一个入参,但组合的 Map 的 add 方法却有 key、value 两个入参,相对应上 Map 的 key 就是我们 add 的入参,value 就是第二个属性 PRESENT,此处设计非常巧妙,用一个默认值 PRESENT 来代替 Map 的 value;
  2. 如果 HashSet 是被共享的,当多个线程访问的时候,就会有线程安全问题,因为在后续的所有操作中,并没有加锁。

HashSet 在以 HashMap 为基础进行实现的时候,首先选择组合的方式,接着使用默认值来替代 Map 的 value 值,设计的非常巧妙,给使用者的体验很好,使用起来简单方便,我们在工作中也可以借鉴这种思想,可以把底层复杂实现包装一下,一些默认实现可以自己吃掉,使吐出去的接口尽量简单好用。

1.2.1 初始化

HashSet 的初始化比较简单,直接 new HashMap 即可,比较有意思的是,当有原始集合数据进行初始化的情况下,会对 HashMap 的初始容量进行计算,源码如下:

public HashSet(Collection<? extends E> c) {
    // 对 HashMap 的容量重新进行了计算
    map = new HashMap<>(Math.max((int) (c.size()/.75f) + 1, 16));
    addAll(c);
}

源码中 Math.max((int) (c.size()/.75f) + 1, 16),就是对 HashMap 的容量进行了计算,从计算中,我们可以看到 HashSet 的实现者对 HashMap 的底层实现是非常清楚的,主要体现在两个方面:

  1. 和 16 比较大小的意思是说,如果给定 HashMap 的初始容量小于 16,就按照 HashMap 的默认值 16 初始化,反之则按照给定值初始化。
  2. HashMap 扩容的阈值 threshold 的计算公式是:capacity * loadFactor,一旦达到阈值就会扩容,此处用 (int)(c.size()/.75f) + 1 来表示初始化的值,这样使我们期望的大小值正好比扩容的阈值还大 1,就不会扩容,符合 HashMap 扩容的公式。

从简单的构造器中,我们可以看出要很好的组合 api 接口,并没有那么简单,我们可能需要去了解一下被组合的 api 底层的实现,这样才能用好 api。

同时这种写法,也提供了一种思路给我们,如果有人问你,往 HashMap 拷贝大集合时,如何给 HashMap 初始化大小?完全可以借鉴这种写法:取最大值(期望的值 / 0.75 + 1, 默认值 16)。

至于 HashSet 的其它方法就比较简单了,就是对 Map 的 api 进行了一些包装,如下的 add 方法实现:

public boolean add(E e) {
    return map.put(e, PRESENT)==null;
}

从 add 方法中,我们可以看到组合的好处,方法的入参、名称、返回值都可以自定义,如果是继承的话就不行了。

1.2.2 小结

HashSet 具体实现值得我们借鉴的地方主要有以下这些,我们平时写代码的时候,完全可以参考参考:

  1. 对组合还是继承的分析和把握;
  2. 对复杂逻辑进行一些包装,使暴露出去的接口尽量简单好用;
  3. 组合其它 api 时,尽量多对组合的 api 多些了解,这样才能更好的使用 api;
  4. HashMap 初始化大小值的模板公式:取括号内两者的最大者(期望的大小 / 0.75 + 1, 默认的值 16)

2 TreeSet

TreeSet 大致的结构和 HashSet 相似,底层组合的是 TreeMap,所以继承了 TreeMap key 能够排序的功能,迭代的时候,也可以按照 key 的顺序进行迭代,我们主要来看看复用 TreeMap 时,复用的两种思路:

2.1 复用 TreeMap 的思路一

场景一:TreeSet 的 add 方法,源码:

public boolean add(E e) {
    return m.put(e, PRESENT)==null;
}

可以看到,底层直接使用的是 TreeMap 的能力,直接拿来用就好了。

2.2 复用 TreeMap 的思路二

场景二:需要迭代 TreeSet 中的元素,那应该也是像 add 那样,直接使用 HashMap 已有的迭代能力,比如像下面这样:

// 模仿思路一的实现
public Iterator<E> iterator() {
    // 直接使用 TreeMap.keySet 的能力
    return m.keySet().iterator();
}

这种是思路一的实现方式,TreeSet 组合 TreeMap,直接选择 TreeMap 的底层能力进行包装,但 TreeSet 实际执行的思路却完全相反,源码:

// NavigableSet 接口,定义了迭代的一些规范,和一些取值的特殊方法
public interface NavigableSet<E> extends SortedSet<E> {
    Iterator<E> iterator();
    E lower(E e);
}

// m.navigableKeySet() 是 TreeMap 写的一个子类实现了 NavigableSet 接口,实现了 TreeSet 定义的迭代规范
public Iterator<E> iterator() {
    return m.navigableKeySet().iterator();
}

TreeMap 中对于 NavigableSet 接口实现的源码如下:

public class TreeMap<K,V>
    extends AbstractMap<K,V>
    implements NavigableMap<K,V>, Cloneable, java.io.Serializable
{
    .....

    static final class KeySet<E> extends AbstractSet<E> implements NavigableSet<E> {
        private final NavigableMap<E, ?> m;
        KeySet(NavigableMap<E,?> map) { m = map; }

        public Iterator<E> iterator() {
            if (m instanceof TreeMap)
                return ((TreeMap<E,?>)m).keyIterator();
            else
                return ((TreeMap.NavigableSubMap<E,?>)m).keyIterator();
        }

        public Iterator<E> descendingIterator() {
            if (m instanceof TreeMap)
                return ((TreeMap<E,?>)m).descendingKeyIterator();
            else
                return ((TreeMap.NavigableSubMap<E,?>)m).descendingKeyIterator();
        }

        .....
    }
}

可以看出 TreeMap 实现了 TreeSet 定义的各种特殊方法。

我们可以看到,这种思路是 TreeSet 定义了接口的规范,TreeMap 负责去实现,实现思路和思路一是相反的。

总结 TreeSet 组合 TreeMap 实现的两种思路:

  1. TreeSet 直接使用 TreeMap 的某些功能,自己包装成新的 api。
  2. TreeSet 定义了自己想要的 api,自己定义接口规范,让 TreeMap 去实现。

方案 1 和方案 2 的调用关系,都是 TreeSet 调 TreeMap,但功能的实现关系完全相反,第一种是功能的定义和实现都在 TreeMap,TreeSet 只是简单的调用而已,第二种 TreeSet 把接口定义出来后,让 TreeMap 去实现内部逻辑,TreeSet 负责接口定义,TreeMap 负责具体实现,这样子的话因为接口是 TreeSet 定义的,所以实现一定是 TreeSet 最想要的,TreeSet 甚至都不用包装,可以直接把返回值直接返回都行。

我们思考下这两种复用思路的原因:

  1. 像 add 这些简单的方法,我们直接使用的是思路 1,主要是因为 add 这些方法实现比较简单,没有复杂逻辑,所以 TreeSet 自己实现起来比较简单;
  2. 思路 2 主要适用于复杂场景,比如说迭代场景,TreeSet 的场景复杂,比如要能从头开始迭代,比如要能取第一个值,比如要能取最后一个值,再加上 TreeMap 底层数据结构复杂,TreeSet 可能并不清楚 TreeMap 底层的复杂逻辑,这时候让 TreeSet 来实现如此复杂的场景逻辑,TreeSet 就搞不定了,不如接口让 TreeSet 来定义,让 TreeMap 去负责实现,TreeMap 对自己底层的数据结构非常清楚,实现起来既准确又简单。

2.3 小结

TreeSet 对 TreeMap 的两种不同复用思路,很重要,在工作中经常会遇到,特别是思路二。

3 面试题

HashSet 和 TreeSet 的面试概率比不上 List 和 Map,但只要有机会,并把本文的内容表达出来,绝对是加分项,因为现在 List 和 Map 面试题太多,面试官认为你能答出来是应该的,但只要你有机会对 HashSet 和 TreeSet 说出本文的见解,并且说自己是看源码时领悟的,绝对肯定是加分项,这些就是你超过面试官预期的惊喜。

3.1 TreeSet 有用过么,平时都是在什么场景下使用的?

答:有没有用过如实回答就好,我们一般都是在需要把元素进行排序的时候使用 TreeSet,使用时需要注意元素最好实现 Comparable 接口,这样方便底层 TreeMap 根据 key 进行排序。

3.2 追问,如果我想实现根据 key 的新增顺序进行遍历怎么办?

答:要按照 key 的新增顺序进行遍历,首先想到的就应该是 LinkedHashMap,而 LinkedHashSet 正好是基于 LinkedHashMap 实现的,所以我们可以选择使用 LinkedHashSet。

3.3 追问,如果我想对 key 进行去重,有什么好的办法?

答:首先想到的是 TreeSet,TreeSet 底层使用的是 TreeMap,TreeMap 在 put 的时候,如果发现 key 是相同的,会把 value 值进行覆盖,所以不会产生重复的 key,利用这一特性,使用 TreeSet 正好可以去重。

3.4 说说 TreeSet 和 HashSet 两个 Set 的内部结构和实现原理?

答:HashSet 底层对 HashMap 的能力进行了封装,比如 add 方法就是直接使用 HashMap 的 put 方法,比较简答。说一下 HashSet 的四个小结点。

TreeSet 主要是对 TreeMap 底层能力进行封装复用,发现两种非常有意思的复用思路,重复 TreeSet 两种复用思路。

总结

  1. HashSet 对组合的 HashMap 类扩容的阈值的深入了解和设计,值得我们借鉴;
  2. TreeSet 对 TreeMap 两种复用思路,值得我们学习,特别是第二种,TreeSet 定义接口规范,由 TreeMap 去实现。

HashSet 和 TreeSet 不会是面试的重点,但通过以上两点,可以让我们给面试官一种精益求精的感觉,成为加分项。

疑问:

  1. HashSet 底层使用 HashMap,如果 hash 算法准确也可以实现 key 去重吧;
  2. HashSet 带集合数据初始化时,初始化 HashMap 时对扩容阈值的计算 Math.max((int) (c.size()/.75) + 1, 16),这里为何不使用 HashMap 的 tableSizeFor(c.size) 计算呢?例如我拷贝 1000 长度的集合,我知道我最终的目标长度就是 1000,那我使用 tableSizeFor(1000) 的到大于 1000 并且最接近 1000 的 2 的幂次方的值作为 HashMap 的容量大小不就行了么?

答案:

  1. ...
  2. 因为 HashMap 扩容的条件是 size > threshold(负载因子),这里我们拷贝的最大 size 为 1000,如果考虑每次都不必扩容,那么 threshold 最小值应该为 1000,而负载因子的计算公式为:threshold = capacity * loadFactor,带入参数为:1000 = capacity * 0.75,所以 capacity = 1000 / 0.75,也就是: 我们期望的容量值 = c.size()/0.75,源码中 (int) (c.size()/.75) + 1 来表示初始化的值,这样使我们期望的大小值正好比扩容的阈值大 1,就不会扩容,符合 HashMap 扩容的公式。

------------------------------------- END -------------------------------------

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,402评论 6 499
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,377评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,483评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,165评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,176评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,146评论 1 297
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,032评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,896评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,311评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,536评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,696评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,413评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,008评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,659评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,815评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,698评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,592评论 2 353

推荐阅读更多精彩内容