Java并发编程:并发容器之CopyOnWriteArrayList(转载)

2023-11-14

http://www.cnblogs.com/dolphin0520/p/3938914.html

 原文链接:

  http://ifeve.com/java-copy-on-write/

  

  Copy-On-Write简称COW,是一种用于程序设计中的优化策略。其基本思路是,从一开始大家都在共享同一个内容,当某个人想要修改这个内容的时候,才会真正把内容Copy出去形成一个新的内容然后再改,这是一种延时懒惰策略。从JDK1.5开始Java并发包里提供了两个使用CopyOnWrite机制实现的并发容器,它们是CopyOnWriteArrayList和CopyOnWriteArraySet。CopyOnWrite容器非常有用,可以在非常多的并发场景中使用到。

什么是CopyOnWrite容器

  CopyOnWrite容器即写时复制的容器。通俗的理解是当我们往一个容器添加元素的时候,不直接往当前容器添加,而是先将当前容器进行Copy,复制出一个新的容器,然后新的容器里添加元素,添加完元素之后,再将原容器的引用指向新的容器。这样做的好处是我们可以对CopyOnWrite容器进行并发的读,而不需要加锁,因为当前容器不会添加任何元素。所以CopyOnWrite容器也是一种读写分离的思想,读和写不同的容器。

CopyOnWriteArrayList的实现原理

  在使用CopyOnWriteArrayList之前,我们先阅读其源码了解下它是如何实现的。以下代码是向CopyOnWriteArrayList中add方法的实现(向CopyOnWriteArrayList里添加元素),可以发现在添加的时候是需要加锁的,否则多线程写的时候会Copy出N个副本出来。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
/**
      * Appends the specified element to the end of this list.
      *
      * @param e element to be appended to this list
      * @return <tt>true</tt> (as specified by {@link Collection#add})
      */
     public  boolean  add(E e) {
     final  ReentrantLock lock =  this .lock;
     lock.lock();
     try  {
         Object[] elements = getArray();
         int  len = elements.length;
         Object[] newElements = Arrays.copyOf(elements, len +  1 );
         newElements[len] = e;
         setArray(newElements);
         return  true ;
     finally  {
         lock.unlock();
     }
     }

   读的时候不需要加锁,如果读的时候有多个线程正在向CopyOnWriteArrayList添加数据,读还是会读到旧的数据,因为写的时候不会锁住旧的CopyOnWriteArrayList。

1
2
3
public  E get( int  index) {
     return  get(getArray(), index);
}

   JDK中并没有提供CopyOnWriteMap,我们可以参考CopyOnWriteArrayList来实现一个,基本代码如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
import  java.util.Collection;
import  java.util.Map;
import  java.util.Set;
 
public  class  CopyOnWriteMap<K, V>  implements  Map<K, V>, Cloneable {
     private  volatile  Map<K, V> internalMap;
 
     public  CopyOnWriteMap() {
         internalMap =  new  HashMap<K, V>();
     }
 
     public  V put(K key, V value) {
 
         synchronized  ( this ) {
             Map<K, V> newMap =  new  HashMap<K, V>(internalMap);
             V val = newMap.put(key, value);
             internalMap = newMap;
             return  val;
         }
     }
 
     public  V get(Object key) {
         return  internalMap.get(key);
     }
 
     public  void  putAll(Map<?  extends  K, ?  extends  V> newData) {
         synchronized  ( this ) {
             Map<K, V> newMap =  new  HashMap<K, V>(internalMap);
             newMap.putAll(newData);
             internalMap = newMap;
         }
     }
}

   实现很简单,只要了解了CopyOnWrite机制,我们可以实现各种CopyOnWrite容器,并且在不同的应用场景中使用。

CopyOnWrite的应用场景

  CopyOnWrite并发容器用于读多写少的并发场景。比如白名单,黑名单,商品类目的访问和更新场景,假如我们有一个搜索网站,用户在这个网站的搜索框中,输入关键字搜索内容,但是某些关键字不允许被搜索。这些不能被搜索的关键字会被放在一个黑名单当中,黑名单每天晚上更新一次。当用户搜索时,会检查当前关键字在不在黑名单当中,如果在,则提示不能搜索。实现代码如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
package  com.ifeve.book;
 
import  java.util.Map;
 
import  com.ifeve.book.forkjoin.CopyOnWriteMap;
 
/**
  * 黑名单服务
  *
  * @author fangtengfei
  *
  */
public  class  BlackListServiceImpl {
 
     private  static  CopyOnWriteMap<String, Boolean> blackListMap =  new  CopyOnWriteMap<String, Boolean>(
             1000 );
 
     public  static  boolean  isBlackList(String id) {
         return  blackListMap.get(id) ==  null  false  true ;
     }
 
     public  static  void  addBlackList(String id) {
         blackListMap.put(id, Boolean.TRUE);
     }
 
     /**
      * 批量添加黑名单
      *
      * @param ids
      */
     public  static  void  addBlackList(Map<String,Boolean> ids) {
         blackListMap.putAll(ids);
     }
 
}

   代码很简单,但是使用CopyOnWriteMap需要注意两件事情:

  1. 减少扩容开销。根据实际需要,初始化CopyOnWriteMap的大小,避免写时CopyOnWriteMap扩容的开销。

  2. 使用批量添加。因为每次添加,容器每次都会进行复制,所以减少添加次数,可以减少容器的复制次数。如使用上面代码里的addBlackList方法。

CopyOnWrite的缺点

  CopyOnWrite容器有很多优点,但是同时也存在两个问题,即内存占用问题和数据一致性问题。所以在开发的时候需要注意一下。

  内存占用问题。因为CopyOnWrite的写时复制机制,所以在进行写操作的时候,内存里会同时驻扎两个对象的内存,旧的对象和新写入的对象(注意:在复制的时候只是复制容器里的引用,只是在写的时候会创建新对象添加到新容器里,而旧容器的对象还在使用,所以有两份对象内存)。如果这些对象占用的内存比较大,比如说200M左右,那么再写入100M数据进去,内存就会占用300M,那么这个时候很有可能造成频繁的Yong GC和Full GC。之前我们系统中使用了一个服务由于每晚使用CopyOnWrite机制更新大对象,造成了每晚15秒的Full GC,应用响应时间也随之变长。

  针对内存占用问题,可以通过压缩容器中的元素的方法来减少大对象的内存消耗,比如,如果元素全是10进制的数字,可以考虑把它压缩成36进制或64进制。或者不使用CopyOnWrite容器,而使用其他的并发容器,如ConcurrentHashMap

  数据一致性问题。CopyOnWrite容器只能保证数据的最终一致性,不能保证数据的实时一致性。所以如果你希望写入的的数据,马上能读到,请不要使用CopyOnWrite容器。



本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

Java并发编程:并发容器之CopyOnWriteArrayList(转载) 的相关文章

随机推荐

  • mysql实训总结日记_常用SQL语句总结-MySQL 学习日记

    写在前面 下面主要总结的是SQL的数据类型和DDL DML和DCL的基础用法 适合查阅 纯结构化文本读起来需要耐心 勤于练习 勤于练习 勤于练习 2018 05 30第一次修改 SQL Structured Query Language结构
  • 小程序跟服务器长连接,h5和小程序socket长连接和公共管理方案(vue+redux+websocket)...

    h5和小程序socket长连接和公共管理方案 vue redux websocket h5和小程序socket长连接和公共管理方案 vue redux websocket socket和公共状态管理连接方案 vuex redux和小程序 w
  • 【云原生之kubernetes】kubernetes集群下Secret存储对象的管理

    云原生之kubernetes kubernetes集群下Secret存储对象的管理 一 Secret存储对象介绍 1 Secret简介 2 Secret的类型 二 检查本地kubernetes集群状态 1 检查工作节点 2 检查系统pod节
  • Linux下动态链接库的使用

    1 所谓链接 也就是说编译器找到程序中所引用的函数或全局变量所存在的位置 一般来说 程序的链接分为静态链接和动态链接 静态链接就是把所有所引用到的函数或变量全部地编译到可执行文件中 动态链接则不会把函数编译到可执行文件中 而是在程序运行时动
  • 固态硬盘Ghost安装Windows 10无法引导的问题

    机器配置如下 电脑型号 技嘉 B360M POWER 台式电脑 操作系统 Windows 10 64位 DirectX 12 处理器 英特尔 Core i7 8700 3 20GHz 六核 主板 技嘉 B360M POWER 英特尔 PCI
  • 东北大学acm暑期夏令营结构体

    NEUQ ACM CAMP B011 结构体 枚举 NEUQ ACM CAMP B011 结构体 枚举 开始时间 2022 08 18 08 07 00 结束时间 2022 08 31 23 59 00 答题时长 19672分钟 答卷类型
  • 解决Windows server 2003不认U盘

    解决Windows server 2003不认U盘或移动硬盘 2009 05 18 23 08 47 标签 电脑 usb接口 移动硬盘 盘符 it 分类 电脑网络 答案一 快速解决办法 一 U盘以及移动硬盘自动装载也是一样的 WINDOWS
  • Exception in thread “main“ java.lang.ArrayIndexOutOfBoundsException: 6问题

    今天在java中出现了一个这样的问题 Exception in thread main java lang ArrayIndexOutOfBoundsException 6 at com wyt demo3 Role attack Role
  • valgrind android编译、安装

    valgrind android编译 安装 参见valgrind 3 12 0 tar bz2中的README android文件 以下步骤 遵循README android说明 注意VALGRIND LIB是程序内部环境变量 export
  • static在C和C++中的区别

    以下内容参考博客 https www cnblogs com Manual Linux p 8870038 html static在C语言中的区别 1 static修饰变量的时候 静态局部变量只被执行一次 延长了整个局部变量的生命周期 直到
  • linux下RDP客户端及服务器

    tsclient redsktop remmina gt 对ubuntu支持的非常不错 XRdp 集合vnc作为rdp服务器端使用
  • Java注释及分隔符 基础知识

    一 用于单行注释 用于多行注释 文档注释 文档注释属于多行注释的一种 二 空白符 空格 制表符 t 走页换页 f 回车 r 换行 n
  • 使用python指定个数随机生成一组混合字符集

    今天做测试想生成混合的id或者密码 思考了有很多方式 比如可以加入datetime库 然后截取一部分 或者随机生成一部分 进行替换 添加 这里采取一种简单易懂的方式 一 运行结果示范 就是这种效果 生成多少位数 18 ry3Gu aVr8V
  • STM32 基础系列教程 30 - 文件系统

    前言 学习stm32中FATFS 文件系统的基础使用 学会文件的打开及读写删除等基本操作 理解文件系统基本概念 示例详解 基于硬件平台 STM32F10C8T6最小系统板 MCU 的型号是 STM32F103c8t6 使用stm32cube
  • 学习HC-SR04超声波测距模块,代码附带卡尔曼滤波

    硬件引脚 VCC 供5V的电压 一定要是5v GND 接地 Trig HC SR04超声波测距模块上的触发引脚 用于向模块发送一个10微秒的高电平触发信号 触发模块开始进行距离测量 Echo 用于接收超声波回波信号的引脚 工作原理 使用HC
  • js根据本地文件路径上传文件(流上传)

    最近使用vue做了个项目 把本地指定url下的png图片上传 废话不多说 直接上代码 var fs require fs 需要引入nodejs中的文件操作部分 var http require http 需要引入nodejs中http请求部
  • 软件自动化测试工具/平台的挑战

    今天在微信读书偶然读到 高效自动化测试平台 设计与开发实战 作者徐德晨和茹炳晟 该书1 2章节详细讲述了软件自动化测试工具 平台的七个挑战 下面结合一站式开源持续测试平台项目MeterSphere详解这七个挑战 GitHub metersp
  • linux系统编程-1、基础知识

    前言 Linux系统编程的基础系列文章 随着不断学习会将一些知识点进行更新 前期主要是简单了解和学习 文章目录 shell bash 命令和路经补齐 历史记录 目录和文件 类Unix系统目录结构 用户目录 ls cd which pwd m
  • 请用美丽欢呼-------Day38

    周末 双休 疯了两天 敲了寥寥的代码 却没少看了相关的文章 这电子书大行于世的年代 对工具的漠然简直就是对生命的亵渎 颠簸的公交车上算是告别了YY的惬意 这生活 感觉傻了点 可真够味 原本只是想写篇 html的发展历程 的 可XHTML 2
  • Java并发编程:并发容器之CopyOnWriteArrayList(转载)

    http www cnblogs com dolphin0520 p 3938914 html 原文链接 http ifeve com java copy on write Copy On Write简称COW 是一种用于程序设计中的优化策