Java8 ConcurrentHashMap 存储、扩容源码阅读

news2024/11/28 8:34:56

文章目录

  • 1. 概述
  • 2. 入门实例
  • 3. 属性
  • 4. 核心方法
    • 4.1 put
    • 4.2 initTable
    • 4.3 transfer
    • 4.4 sizeCtl
    • 4.5 sizeCtl bug

1. 概述

ConcurrentHashMap 是线程安全且高效的 HashMap。

HashMap 可以看下我这篇 传送门 。

2. 入门实例

public class MyStudy {
    public static void main(String[] args) {
        ConcurrentHashMap<Integer, String> concurrentHashMap = new ConcurrentHashMap<>();
        // 放入一个键值对,其中键为 1,值为 "1"
        // 该操作是线程安全的,可以在并发环境下使用而不会导致数据不一致问题。
        concurrentHashMap.put(1, "1");
        System.out.println(concurrentHashMap.get(1));

        // 如果该键已存在,则不会替换原有值。
        concurrentHashMap.putIfAbsent(1, "2");
        System.out.println(concurrentHashMap.get(1));
    }
}

运行截图:

在这里插入图片描述

HashMap 线程不安全的:

 public class MyStudy {
    public static void main(String[] args) throws InterruptedException {
        for (int count = 0; count < 10; count++) {
            Map<Integer, String> hashMap = new HashMap<Integer, String>();
            new Thread(() -> {
                for (int i = 0; i < 10000; i++) {
                    hashMap.put(i, i + "a");
                }
            }).start();
            new Thread(() -> {
                for (int i = 0; i < 10000; i++) {
                    hashMap.put(i, i + "b");
                }
            }).start();
            TimeUnit.SECONDS.sleep(3);
            System.out.println(hashMap.size());
        }
    }
}

运行截图, 两个线程并发数量都不对了

在这里插入图片描述

测试一下 ConcurrentHashMap 线程安全

public class MyStudy {
    public static void main(String[] args) throws InterruptedException {
        for (int count = 0; count < 10; count++) {
            Map<Integer, String> map = new ConcurrentHashMap<Integer, String>();
            new Thread(() -> {
                for (int i = 0; i < 10000; i++) {
                    map.put(i, i + "a");
                }
            }).start();
            new Thread(() -> {
                for (int i = 0; i < 10000; i++) {
                    map.put(i, i + "b");
                }
            }).start();
            TimeUnit.SECONDS.sleep(3);
            System.out.println(map.size());
        }
    }
}

运行截图, 数量对的,接下来我们看下源码
在这里插入图片描述

3. 属性

table存储数据,Node数组,Node可以是链表或红黑树,数据在 table中的下标计算规则 (n - 1) & hash
nextTabletable 扩容 transfer 之后的数据,这样扩容过程中 get 操作,不受扩容影响。

transient volatile Node<K,V>[] table;
private transient volatile Node<K,V>[] nextTable;

4. 核心方法

4.1 put

  • 计算hash值 : int hash = spread(key.hashCode());

  • 如果tab为空,初始化 : initTable()

  • tab中该hash的位置没有数据, CAS线程安全放入数据 casTabAt(tab, i, null, new Node<K,V>(hash, key, value, null))

  • tab中该hash的位置有数据, 但是数据正在扩容转移, 当前线程帮助转移数据到扩容的新数组 tab = helpTransfer(tab, f);

  • tab中该hash的位置有数据, 数据没在扩容转移, synchronized 锁住当前节点, 把数据放进去 synchronized (f)

  • addCount(1L, binCount); 新增一条数据, 如果需要扩容, 对数据进行转移 void transfer(Node<K,V>[] tab, Node<K,V>[] nextTab)

put 源码如下:

public V put(K key, V value) {
    return putVal(key, value, false);
}                                

final V putVal(K key, V value, boolean onlyIfAbsent) {
    if (key == null || value == null) throw new NullPointerException();
    // 计算hash值
    int hash = spread(key.hashCode());
    int binCount = 0;
    for (Node<K,V>[] tab = table;;) {
        Node<K,V> f; int n, i, fh;
       if (tab == null || (n = tab.length) == 0)
            // 如果tab为空,初始化
            tab = initTable();
        else if ((f = tabAt(tab, i = (n - 1) & hash)) == null) {
            // tab中该hash的位置没有数据, CAS安全放入数据
            if (casTabAt(tab, i, null,
                         new Node<K,V>(hash, key, value, null)))
                break;                   // no lock when adding to empty bin
        }
        else if ((fh = f.hash) == MOVED)
            // 槽点是转移节点(正在扩容),当前线程帮助转移扩容
            tab = helpTransfer(tab, f);
        else {
            // 槽点有值的,先锁定当前槽点,保证其余线程不能操作
            // 如果是链表,新增值到链表的尾部
            // 如果是红黑树,使用红黑树新增的方法新增;
            V oldVal = null;
            // 锁定槽节点
            synchronized (f) {
                // 检查数据被修改了没
                if (tabAt(tab, i) == f) {
                    // 链表
                    if (fh >= 0) {
                        binCount = 1;
                        for (Node<K,V> e = f;; ++binCount) {
                            K ek;
                            if (e.hash == hash &&
                                ((ek = e.key) == key ||
                                 (ek != null && key.equals(ek)))) {
                                // 旧值
                                oldVal = e.val;
                                if (!onlyIfAbsent)
                                    e.val = value;
                                break;
                            }
                            // 不存在 放到链表的最后
                            Node<K,V> pred = e;
                            if ((e = e.next) == null) {
                                pred.next = new Node<K,V>(hash, key,
                                                          value, null);
                                break;
                            }
                        }
                    }
                    // 红黑树
                    else if (f instanceof TreeBin) {
                        Node<K,V> p;
                        binCount = 2;
                        if ((p = ((TreeBin<K,V>)f).putTreeVal(hash, key,
                                                       value)) != null) {
                            // 旧值
                            oldVal = p.val;
                            if (!onlyIfAbsent)
                                p.val = value;
                        }
                    }
                }
            }
            // binCount不为0
            if (binCount != 0) {
                // 如果大于阈值
                if (binCount >= TREEIFY_THRESHOLD)
                    // 树化
                    treeifyBin(tab, i);
                if (oldVal != null)
                    return oldVal;
                break;
            }
        }
    }
    // binCount+1, 如果需要扩容, 对数据进行转移
    addCount(1L, binCount);
    return null;
}

4.2 initTable

initTable 初始化数组:

private final Node<K,V>[] initTable() {
    Node<K,V>[] tab; int sc;
    while ((tab = table) == null || tab.length == 0) {
        // sizeCtl小于0, 有线程正在初始化, 释放当前CPU调度权
        if ((sc = sizeCtl) < 0)
            Thread.yield(); // lost initialization race; just spin
        // CAS 赋值sizeCtl为-1,防止其他线程并发操作
        else if (U.compareAndSwapInt(this, SIZECTL, sc, -1)) {
            try {
                // 双重check, tabel不为null说明没有初始化
                if ((tab = table) == null || tab.length == 0) {
                    int n = (sc > 0) ? sc : DEFAULT_CAPACITY;
                    @SuppressWarnings("unchecked")
                    Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n];
                    table = tab = nt;
                    sc = n - (n >>> 2);
                }
            } finally {
                sizeCtl = sc;
            }
            break;
        }
    }
    return tab;
}

4.3 transfer

  • 根据CPU核心数量 NCPU 和 最小步幅 MIN_TRANSFER_STRIDE,算出步幅 stride(每次转移数据数量的数量)
  • 如果新数组为空,初始化,大小为原数组的两倍,(Node<K,V>[])new Node<?,?>[n << 1]
  • transferIndex 转移下标,transferIndex = n 数据从 table 最后一个元素开始转移, i = nextIndex - 1记录一下要开始转移的下标,bound 这次转移的底部 bound=transferIndex-stride, 修改 transferIndexbound
  • --i >= bound, 当前线程开始转移每一个下标的数据,每个线程都可以走上面的流程算出自己的 下标 ibound, 转移自己的这个区间, transferIndex 是通过 CAS修改的,保证不会重复执行
  • 最后一个线程执行完,finishing = advance = true; i = n; // recheck before commit 重新检查一遍
  • 检查完成,开始使用转移后的nextTab table = nextTab; sizeCtl = (n << 1) - (n >>> 1);
private final void transfer(Node<K,V>[] tab, Node<K,V>[] nextTab) {
    // 老数组的长度
    int n = tab.length, stride;

    //  根据CPU核心数量 `NCPU` 和 最小步幅 `MIN_TRANSFER_STRIDE`,算出步幅 `stride`(每次转移数据数量的数量)
    if ((stride = (NCPU > 1) ? (n >>> 3) / NCPU : n) < MIN_TRANSFER_STRIDE)
        stride = MIN_TRANSFER_STRIDE; // subdivide range
    
    // 如果新数组为空,初始化,大小为原数组的两倍,n << 1
    if (nextTab == null) { // initiating
        try {
            @SuppressWarnings("unchecked")
            Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n << 1];
            nextTab = nt;
        } catch (Throwable ex) { // try to cope with OOME
            sizeCtl = Integer.MAX_VALUE;
            return;
        }
        nextTable = nextTab;

        // 数据从 `table` 最后一个元素开始转移
        transferIndex = n;
    }
    
    // 新数组的长度
    int nextn = nextTab.length;

    // 转移节点
    ForwardingNode<K,V> fwd = new ForwardingNode<K,V>(nextTab);

    boolean advance = true;
    boolean finishing = false; // to ensure sweep before committing nextTab
    
    // 无限自旋,i 的值会从原数组的最大值开始,慢慢递减到 0
    for (int i = 0, bound = 0;;) {
        Node<K,V> f; int fh;
        
        while (advance) {
            int nextIndex, nextBound;
            // --i 当前线程开始转移每一个下标的数据
            if (--i >= bound || finishing)
                advance = false;
                // 转移完成
            else if ((nextIndex = transferIndex) <= 0) {
                i = -1;
                advance = false;
            }
            // 根据步幅算出边界bound
            else if (U.compareAndSwapInt
                     (this, TRANSFERINDEX, nextIndex,
                      nextBound = (nextIndex > stride ?
                                   nextIndex - stride : 0))) {
                bound = nextBound;
                // `i = nextIndex - 1`记录一下要开始转移的下标
                i = nextIndex - 1;
                advance = false;
            }
        }
        
        // 转移结束
        if (i < 0 || i >= n || i + n >= nextn) {
            int sc;
            if (finishing) {
                // 检查完成,开始使用转移后的nextTab
                nextTable = null;
                table = nextTab;
                sizeCtl = (n << 1) - (n >>> 1);
                return;
            }
            if (U.compareAndSwapInt(this, SIZECTL, sc = sizeCtl, sc - 1)) {
                if ((sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT)
                    return;
                finishing = advance = true;
                // 重新检查一遍
                i = n; // recheck before commit
            }
        }
        // 节点为空 设置为转移节点
        else if ((f = tabAt(tab, i)) == null)
            advance = casTabAt(tab, i, null, fwd);
        // 节点已经转移     
        else if ((fh = f.hash) == MOVED)
            advance = true; // already processed
        // 节点有值 拷贝转移
        else {
            synchronized (f) {
                if (tabAt(tab, i) == f) {
                    Node<K,V> ln, hn;
                    if (fh >= 0) {
                        int runBit = fh & n;
                        Node<K,V> lastRun = f;
                        for (Node<K,V> p = f.next; p != null; p = p.next) {
                            int b = p.hash & n;
                            if (b != runBit) {
                                runBit = b;
                                lastRun = p;
                            }
                        }
                        if (runBit == 0) {
                            ln = lastRun;
                            hn = null;
                        }
                        else {
                            hn = lastRun;
                            ln = null;
                        }
                        // 如果节点只有单个数据,直接拷贝,如果是链表,循环多次组成链表拷贝
                        for (Node<K,V> p = f; p != lastRun; p = p.next) {
                            int ph = p.hash; K pk = p.key; V pv = p.val;
                            if ((ph & n) == 0)
                            ln = new Node<K,V>(ph, pk, pv, ln);
                            else
                            hn = new Node<K,V>(ph, pk, pv, hn);
                        }
                        // 在新数组位置上放置拷贝的值
                        setTabAt(nextTab, i, ln);
                        setTabAt(nextTab, i + n, hn);
                        // 在老数组位置上放上 ForwardingNode 节点
                        // put 时,发现是 ForwardingNode 节点,就不会再动这个节点的数据了
                        setTabAt(tab, i, fwd);
                        advance = true;
                    }
                    // 红黑树的拷贝
                    else if (f instanceof TreeBin) {
                        // ...
                    }
                }
            }
        }
    } 
}

4.4 sizeCtl

sizeCtl 有这几种情况:

  • sizeCtl > 0,容器容量, this.sizeCtl = DEFAULT_CAPACITY;
  • sizeCtl = 0,默认初始值
  • sizeCtl = -1,表示table正在初始化 initTable() 中的 U.compareAndSwapInt(this, SIZECTL, sc, -1)
  • sizeCtl < -1 容器正在扩容;高16位存储扩容版本号,低16位代表着有n-1个线程正在参与扩容。

扩容的时候 sizeCtl 比较复杂, 以 32 -> 64 为例, n = 32:

  • 第一步 int rs = resizeStamp(n); rs = 1000 0000 0001 1010
  • 低16位代表着有n-1个线程正在参与扩容 U.compareAndSwapInt(this, SIZECTL, sc, (rs << RESIZE_STAMP_SHIFT) + 2) , SIZECTL变成负数 1000 0000 0001 1010 0000 0000 0000 00010, +2不是+1, 因为转移完还要检查一遍, 多出的1就是检查这一次
  • 高16位存储扩容版本号,版本号检查用到的地方: ((sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT)(sc >>> RESIZE_STAMP_SHIFT) != rs

4.5 sizeCtl bug

具体可以看这位博主的: 传送门

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1668508.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

什么是数据平台——企业构建Data+AI的基础数据底座需要的决策参考

什么是数据平台 标准的解释是这样的 Wikipedia A data platform usually refers to a software platform used for collecting and managing data, and acting as a data delivery point for application and reporting software. 数据平台是指将各类数据进行整合、存储、处…

实现字符串比较函数(C语言)

一、N-S流程图&#xff1b; 二、运行结果&#xff1b; 三、源代码&#xff1b; # define _CRT_SECURE_NO_WARNINGS # include <stdio.h>int main() {//初始化变量值&#xff1b;int i, result;char s1[100], s2[100];//填充数组&#xff1b;printf("请输入数组s1的…

Docker 直接运行一个 Alpine 镜像

由于镜像很小&#xff0c;下载时间往往很短&#xff0c;读者可以直接使用 docker run 指令直接运行一个 Alpine 容器&#xff0c;并指定运行的 Linux 指令&#xff0c;例如&#xff1a; PS C:\Users\yhu> docker run alpine echo 123 Unable to find image alpine:latest lo…

docker八大架构之应用数据分离架构

数据分离架构 什么是数据分离架构&#xff1f; 数据分离架构是指应用服务&#xff08;应用层&#xff09;和数据库服务&#xff08;数据层&#xff09;使用不同的服务器来进行操作&#xff0c;如下边的两个图所示。当访问到应用层后&#xff0c;如果需要获取数据会进行访问另…

【Qt 学习笔记】Qt常用控件 | 布局管理器 | 水平布局Horizontal Layout

博客主页&#xff1a;Duck Bro 博客主页系列专栏&#xff1a;Qt 专栏关注博主&#xff0c;后期持续更新系列文章如果有错误感谢请大家批评指出&#xff0c;及时修改感谢大家点赞&#x1f44d;收藏⭐评论✍ Qt常用控件 | 布局管理器 | 水平布局Horizontal Layout 文章编号&…

基于STM32的风量控制器的Proteus仿真

文章目录 一、风量控制器1.题目要求2.思路3.仿真图4.仿真程序4.1 程序说明4.2 主函数4.2 OLED显示函数4.3 按键函数 三、总结 一、风量控制器 1.题目要求 设计一个可以风量控制器进行通信的控制板&#xff0c;该控制板由1块OLED显示屏和8个物理按键组成&#xff0c;其中显示屏…

落雪音乐 超好用的桌面端音乐播放器

之前一直都是充某Q音乐的会员&#xff0c;突然不想氪金了&#xff0c;终于找到一个开源的音乐播放器&#xff0c;在此先给落雪无痕大佬跪了 太爱了 简直白嫖怪的福音 话不多说&#xff0c;直接上操作&#xff1a;解压密码&#xff1a;www.1234f.com下载地址&#xff1a;极速云…

B/S模式的web通信(高并发服务器)

这里写目录标题 目标实现的目标 服务器代码&#xff08;采用epoll实现服务器&#xff09;整体框架main函数init_listen_fd函数&#xff08;负责对lfd初始化的那一系列操作&#xff09;epoll_run函数do_accept函数do_read函数内容补充&#xff1a;http中的getline函数 详解do_re…

DE2-115开发板基于verilog和nioⅡ的流水灯实现

目录 一、 内容概要二、 实现2.1 基于Nios II软核的流水灯2.1.1 准备工作2.1.2 工程搭建2.1.3 硬件代码设计Ⅰ 连接IP核Ⅱ 编写代码Ⅲ 各种配置 2.1.4 软件代码设计Ⅰ 环境构建Ⅱ 编写代码 2.1.5 代码下载Ⅰ 硬件下载Ⅱ 软件下载 2.1.6 运行结果 2.2 Verilog流水灯 三、 心得体…

LORA学习笔记2——训练集处理

前言 对于ai训练来说&#xff0c;处理训练集是模型训练的重要环节。训练集的质量对最终模型的质量影响巨大。这里以二次元角色为例&#xff0c;记录下训练集处理的流程和一些心得。 素材准备 素材准备有以下几个需要注意的点&#xff1a; 通常训练二次元角色需要30张以上的…

栈和队列(栈的详解)

目录 栈栈的实现栈的结构栈的初始化栈的销毁入栈出栈获取栈顶元素栈的判空获取栈的数据个数test.c(测试)总结 栈 栈也是线性表&#xff08;在逻辑上是顺序存储&#xff09;的一种&#xff0c;栈只允许其在固定的一端进行插入和删除&#xff0c;栈中的元素遵循后进先出&#xf…

Linux-笔记 开发板Uboot命令使用

将之前自学的知识整理了一下笔记&#xff0c;以便回忆 信息查询命令 1、help/?&#xff1a;查看所支持命令 > ? md md - memory displayUsage: md [.b, .w, .l] address [# of objects]2、bdinfo&#xff1a;查询板子信息 > bdinfo arch_number 0x00000000 boot_p…

多商户Docker Supervisor进程管理器部署

Dockerfile 根目录下没有Dockerfile的可以复制下面的命令 # 使用基础镜像 FROM leekay0218/crmeb-mer## 复制代码 ## 在本地调试注释掉&#xff0c;使用映射把文件映射进去 #ADD ./ /var/www# 设置工作目录 WORKDIR /var/www# 设置时区为上海 ENV TZAsia/Shanghai RUN ln -sn…

对数据进行标准化和归一化

数据的形式&#xff1a;保存在CSV中&#xff0c;第一列为姓名&#xff0c;第二列之后为特征。 标准化 输入文件的路径&#xff0c;设置保存转化后的文件路径 import pandas as pd from sklearn.preprocessing import StandardScaler# 读取CSV文件 data pd.read_csv(rC:\User…

开发时如何快速分析代码和生成测试方法(Baidu Comate插件帮我一键分析)

目录 前言 Baidu Comate智能编码助手简介 安装教程 使用RabbitMQ一个绑定队列方法进行演示 进行测试现有功能 使用感觉 测试结果 前言 因为在开发代码的时候&#xff0c;发现有很多都是废话也不是很想写注释 的&#xff0c;毕竟程序员最讨厌的两件事情&#xff0c;一…

Hikyuu高性能量化研究框架助力探索

Hikyuu Quant Framework 是一款基于C/Python的开源量化交易分析与研究工具&#xff0c;主要用于A股市场的交易策略分析与回测&#xff0c;目前不支持期货等&#xff0c;需要自行改造。 Hikyuu的目标 Hikyuu的最初目的是为了快速对A股全市场股票进行策略回测和验证&#xff0c…

windows窗口消息队列与消息过程处理函数

在Windows窗口应用程序中&#xff0c;消息队列和窗口过程函数是实现消息驱动机制的核心组件。 消息队列&#xff08;Message Queue&#xff09;&#xff1a; 消息队列是用于存储窗口消息的缓冲区。当用户与应用程序交互时&#xff0c;系统会将生成的消息插入到消息队列中&…

C++11:常用语法汇总

目录 &#x1f341;统一的列表初始化 { }initializer_list &#x1f341;decltype 推导表达式类型&#x1f341;可变参数模板解析可变参数包方法一方法二 &#x1f341;lambda 表达式捕捉列表的使用运用场景举例lambda表达式 与 函数对象 &#x1f341;统一的列表初始化 { } 在…

电商购物系统首页的商品分类

如上图对商品的一个分类实际上和省市区的分类十分类似 , 都是通过自关联的方法来实现 , 但是这里不同的是 , 涉及到外键来获取数据 首先让我们来看一下最后通过后端返回数据的形式是什么样子的 """{1:{channels:[{id:1 , name:手机 , url:},{}{}],sub_cats:[{…

苍穹外卖面试总结

项目介绍 我完成了一个外卖项目&#xff0c;名叫苍穹外卖&#xff0c;是跟着黑马程序员的课程来自己动手写的。 项目基本实现了外卖客户端、商家端的后端完整业务。 商家端分为员工管理、文件上传、菜品管理、分类管理、套餐管理、店铺营业状态、订单下单派送等的管理、数据…