java.util包下面的容器集主要有两种,一种是Collection接口下面的List和Set,一种是Map, 大致结构如下:
Collection
Map
同步容器也叫线程安全容器,是通过 syncrhoized关键字 对线程不安全的操作进行加锁来保证线程安全的
其中同步容器主要包括:
1.Vector、Stack、HashTable
2.Collections 工具类中提供的同步集合类
Collections类是一个工具类,相当于Arrays类对于Array的支持,Collections类中提供了大量对集合或者容器进行排序、查找的方法。它还提供了几个静态方法来创建同步容器类:
java.util.concurrent提供了多种线程安全容器,大多数是使用系统底层技术实现的线程安全,也叫并发容器,类似native。Java8中使用CAS。
这里主要介绍一些常见的同步容器和并发容器,通过案例输出结果对比进行介绍 我大致分为了三类Map/Set,List,Queue来进行讲解,但一个Map/Set,只介绍了Map,因为在java的设计中,Set就是Map,说白了就是只有Key没有Value的Map,好了,现在开始进入正题
代码中new了三个Map,HashTable,ConcurrentHashMap,ConcurrentSkipListMap比较每个map的运行效率,起100个线程向map中存放10000条随机数,并通过门闩CountDownLatch控制运行状态,输出运行时间
/** * 并发容器 - ConcurrentMap */ package com.bernardlowe.concurrent.t06; import java.util.HashMap; import java.util.Hashtable; import java.util.Map; import java.util.Random; import java.util.concurrent.ConcurrentHashMap; import java.util.concurrent.ConcurrentSkipListMap; import java.util.concurrent.CountDownLatch; public class Test_01_ConcurrentMap { public static void main(String[] args) { final Map<String, String> map = new Hashtable<>(); // final Map<String, String> map = new ConcurrentHashMap<>(); // final Map<String, String> map = new ConcurrentSkipListMap<>(); final Random r = new Random(); Thread[] array = new Thread[100]; final CountDownLatch latch = new CountDownLatch(array.length); long begin = System.currentTimeMillis(); for(int i = 0; i < array.length; i++){ array[i] = new Thread(new Runnable() { @Override public void run() { for(int j = 0; j < 10000; j++){ map.put("key"+r.nextInt(100000000), "value"+r.nextInt(100000)); } latch.countDown(); } }); } for(Thread t : array){ t.start(); } try { latch.await(); } catch (InterruptedException e) { e.printStackTrace(); } long end = System.currentTimeMillis(); System.out.println("执行时间为 : " + (end-begin) + "毫秒!"); } } 复制代码
Hashtable结果:
ConcurrentHashMap结果:
ConcurrentSkipListMap结果:
ConcurrentHashMap的底层是哈希实现的同步Map(Set)
ConcurrentSkipListMap内部是SkipList(跳表)结构实现的非阻塞读/写/删除 的 Map,它的value是有序存储的, 而且其内部是由纵横链表组成,在JDK1.8中,ConcurrentHashMap的性能和存储空间要优于ConcurrentSkipListMap
为了让测试数据结果对比更加直观,我这里故意将生成的随机数调的比较大。这里需要注意一下,在测试的时候,如果机器性能比较好,可能结果会出现误差,因为System.currentTimeMillis(),这个方法调用了个native方法,获取的时间精度会依赖于操作系统的实现机制,具体为什么,可以看看这篇文章http://blog.sina.com.cn/s/blog_6b8bd9d80101fe8t.html。但我按照文档的办法将System.currentTimeMillis()改为System.nanoTime(),发现并没有解决这个问题,可能是因为并没有达到纳秒级别吧。
下面代码与4.1的代码类似,也是new了三个List,ArrayList,Vector,CopyOnWriteArrayList,起100个线程向map中存放1000条随机数,并通过门闩CountDownLatch控制运行状态,输出运行时间和最后list的的长度。 由于ArrayList是线程不安全,在多线程执行的时候,需要try{}catch{},否则会因为数组越界而报错,因为ArrayList底层是一个长度动态扩展的数组
/** * 并发容器 - CopyOnWriteList */ package com.bernardlowe.concurrent.t06; import java.util.ArrayList; import java.util.List; import java.util.Random; import java.util.Vector; import java.util.concurrent.CopyOnWriteArrayList; import java.util.concurrent.CountDownLatch; public class Test_02_CopyOnWriteList { public static void main(String[] args) { final List<String> list = new ArrayList<String>(); // 线程不安全 // final List<String> list = new Vector<>(); // 线程安全 // final List<String> list = new CopyOnWriteArrayList<>(); // 线程安全 final Random r = new Random(); Thread[] array = new Thread[100]; final CountDownLatch latch = new CountDownLatch(array.length); long begin = System.currentTimeMillis(); for(int i = 0; i < array.length; i++){ array[i] = new Thread(new Runnable() { @Override public void run() { for(int j = 0; j < 1000; j++){ try { list.add("value" + r.nextInt(100000)); } catch (Exception e) { } } latch.countDown(); } }); } for(Thread t : array){ t.start(); } try { latch.await(); } catch (InterruptedException e) { e.printStackTrace(); } long end = System.currentTimeMillis(); System.out.println("执行时间为 : " + (end-begin) + "毫秒!"); System.out.println("List.size() : " + list.size()); } } 复制代码
ArrayList结果: 因为ArrayList是线程不安全的,所以在多线程环境中,可能会丢失数据
Vector结果:
CopyOnWriteArrayList结果:
CopyOnWriteArrayList是读写分离的,写时复制出一个新的数组,完成插入、修改或者移除操作后将新数组赋值给array,读取时直接读取最新的数组,所以在写操作时,效率非常低(虽然写比较慢,但它在删除数组头和尾还是很快的) 从上面三个结果可以看出,CopyOnWriteArrayList虽然保证了线程安全,但它的写操作效率太低了,但相比Vector,并发安全且性能比Vector好,Vector是增删改查方法都加了synchronized,保证同步,但是每个方法执行的时候都要去获得锁,性能就会大大下降,而CopyOnWriteArrayList 只是在增删改上加锁, 但是读不加锁,在读方面的性能就好于Vector,CopyOnWriteArrayList支持读多写少的并发情况 ,所以CopyOnWriteArrayList是不会存在脏读问题的
这一节主要介绍一些并发队列的常用api
基础链表同步队列
peek() -> 查看queue中的首数据
poll() -> 获取queue中的首数据
/** * 并发容器 - ConcurrentLinkedQueue * 队列 - 链表实现的。 */ package com.bernardlowe.concurrent.t06; import java.util.Queue; import java.util.concurrent.ConcurrentLinkedQueue; public class Test_03_ConcurrentLinkedQueue { public static void main(String[] args) { Queue<String> queue = new ConcurrentLinkedQueue<>(); //向队列中增加10个数据 for(int i = 0; i < 10; i++){ queue.offer("value" + i); } System.out.println(queue); System.out.println(queue.size()); // peek() -> 查看queue中的首数据, System.out.println("首数据 " + queue.peek()); System.out.println("队列长度 "+ queue.size()); System.out.println("==================="); // poll() -> 获取queue中的首数据 System.out.println("首数据 " + queue.peek()); System.out.println("队列长度 "+ queue.size()); } } 复制代码
结果:
阻塞队列,队列容量不足自动阻塞,队列容量为0自动阻塞。
put & take - 自动阻塞
put自动阻塞, 队列容量满后,自动阻塞
take自动阻塞方法, 队列容量为0后,自动阻塞
/** * 并发容器 - LinkedBlockingQueue * 阻塞容器。 */ package com.bernardlowe.concurrent.t06; import java.util.Random; import java.util.concurrent.BlockingQueue; import java.util.concurrent.LinkedBlockingQueue; import java.util.concurrent.TimeUnit; public class Test_04_LinkedBlockingQueue { final BlockingQueue<String> queue = new LinkedBlockingQueue<>(); final Random r = new Random(); public static void main(String[] args) { final Test_04_LinkedBlockingQueue t = new Test_04_LinkedBlockingQueue(); new Thread(new Runnable() { @Override public void run() { while(true){ try { t.queue.put("value"+t.r.nextInt(1000)); TimeUnit.SECONDS.sleep(1); } catch (InterruptedException e) { e.printStackTrace(); } } } }, "producer").start(); for(int i = 0; i < 3; i++){ new Thread(new Runnable() { @Override public void run() { while(true){ try { System.out.println(Thread.currentThread().getName() + " - " + t.queue.take()); } catch (InterruptedException e) { e.printStackTrace(); } } } }, "consumer"+i).start(); } } } 复制代码
结果:
结果就是一个简单的生产者消费者
底层数组实现的有界队列,当容量不足的时候,有阻塞能力,根据调用API(add/put/offer)不同,有不同特性
这里主要介绍三个api方法add,put,offer
单参数offer方法,不阻塞。容量不足的时候,返回false。当前新增数据操作放弃。
三参数offer方法(offer(value,times,timeunit)),容量不足的时候,阻塞times时长(单位为timeunit),如果在阻塞时长内,有容量空闲,新增数据返回true。如果阻塞时长范围内,无容量空闲,放弃新增数据,返回false。
/** * 并发容器 - ArrayBlockingQueue * 有界容器。 */ package com.bernardlowe.concurrent.t06; import java.util.concurrent.ArrayBlockingQueue; import java.util.concurrent.BlockingQueue; import java.util.concurrent.TimeUnit; public class Test_05_ArrayBlockingQueue { final BlockingQueue<String> queue = new ArrayBlockingQueue<>(3); public static void main(String[] args) { final Test_05_ArrayBlockingQueue t = new Test_05_ArrayBlockingQueue(); for(int i = 0; i < 5; i++){ // 1.add method System.out.println("add method : " + t.queue.add("value"+i)); // 2.put method // try { // t.queue.put("put"+i); // } catch (InterruptedException e) { // e.printStackTrace(); // } // System.out.println("put method : " + i); // 3.offer method // System.out.println("offer method : " + t.queue.offer("value"+i)); // try { // System.out.println("offer method : " + // t.queue.offer("value"+i, 1, TimeUnit.SECONDS)); // } catch (InterruptedException e) { // e.printStackTrace(); // } } System.out.println(t.queue); } } 复制代码
add方法结果: 容量不足的时候,抛出异常
put方法结果: 容量不足的时候,阻塞等待
单/多参数offer方法结果:
单参数offer: 容量不足,直接返回结果,不阻塞
多参数offer: 容量不足,阻塞延时队列。根据比较机制,实现自定义处理顺序的队列。常用于定时任务。 如:定时关机。 具体示例代码如下
/** * 并发容器 - DelayQueue */ package com.bernardlowe.concurrent.t06; import java.util.concurrent.BlockingQueue; import java.util.concurrent.DelayQueue; import java.util.concurrent.Delayed; import java.util.concurrent.TimeUnit; public class Test_06_DelayQueue { static BlockingQueue<MyTask_06> queue = new DelayQueue<>(); public static void main(String[] args) throws InterruptedException { long value = System.currentTimeMillis(); MyTask_06 task1 = new MyTask_06(value + 2000); MyTask_06 task2 = new MyTask_06(value + 1000); MyTask_06 task3 = new MyTask_06(value + 3000); MyTask_06 task4 = new MyTask_06(value + 2500); MyTask_06 task5 = new MyTask_06(value + 1500); queue.put(task1); queue.put(task2); queue.put(task3); queue.put(task4); queue.put(task5); System.out.println(queue); System.out.println(value); for(int i = 0; i < 5; i++){ System.out.println(queue.take()); } } } class MyTask_06 implements Delayed { private long compareValue; public MyTask_06(long compareValue){ this.compareValue = compareValue; } /** * 比较大小。自动实现升序 * 建议和getDelay方法配合完成。 * 如果在DelayQueue是需要按时间完成的计划任务,必须配合getDelay方法完成。 */ @Override public int compareTo(Delayed o) { return (int)(this.getDelay(TimeUnit.MILLISECONDS) - o.getDelay(TimeUnit.MILLISECONDS)); } /** * 获取计划时长的方法。 * 根据参数TimeUnit来决定,如何返回结果值。 */ @Override public long getDelay(TimeUnit unit) { return unit.convert(compareValue - System.currentTimeMillis(), TimeUnit.MILLISECONDS); } @Override public String toString(){ return "Task compare value is : " + this.compareValue; } } 复制代码
结果:
这里主要是两个方法的区别,add和transfer
/** * 并发容器 - LinkedTransferQueue * 转移队列 */ package com.bernardlowe.concurrent.t06; import java.util.concurrent.LinkedTransferQueue; import java.util.concurrent.TimeUnit; import java.util.concurrent.TransferQueue; public class Test_07_TransferQueue { TransferQueue<String> queue = new LinkedTransferQueue<>(); public static void main(String[] args) { final Test_07_TransferQueue t = new Test_07_TransferQueue(); /*new Thread(new Runnable() { @Override public void run() { try { System.out.println(Thread.currentThread().getName() + " thread begin " ); System.out.println(Thread.currentThread().getName() + " - " + t.queue.take()); } catch (InterruptedException e) { e.printStackTrace(); } } }, "output thread").start(); try { TimeUnit.SECONDS.sleep(2); } catch (InterruptedException e) { e.printStackTrace(); } try { t.queue.transfer("test string"); } catch (InterruptedException e) { e.printStackTrace(); }*/ new Thread(new Runnable() { @Override public void run() { try { t.queue.transfer("test string"); // t.queue.add("test string"); System.out.println("add ok"); } catch (Exception e) { e.printStackTrace(); } } }).start(); try { TimeUnit.SECONDS.sleep(2); } catch (InterruptedException e) { e.printStackTrace(); } new Thread(new Runnable() { @Override public void run() { try { System.out.println(Thread.currentThread().getName() + " thread begin " ); System.out.println(Thread.currentThread().getName() + " - " + t.queue.take()); } catch (InterruptedException e) { e.printStackTrace(); } } }, "output thread").start(); } } 复制代码
这里的transfer()和take()都是阻塞方法,take先请求接收数据或者transfer先发送数据,都会进行阻塞等待。
举个例子,transfer()就相当与手机打电话,当A给B打电话,B必须接收到电话信号接听才能进行通话,否则A会一直等待 add()就相当于A给B发短信,短信已经存到了运营商那边,等待B接收,不管发短信时B是否在线
该队列一个容量为0的队列,是一个特殊的TransferQueue,它和TransferQueue很像,但这个队列必须要有消费线程才行 又两个方法add,put
add方法,无阻塞。若没有消费线程阻塞等待数据,则抛出异常。 put方法,有阻塞。若没有消费线程阻塞等待数据,则阻塞。
/** * 并发容器 - SynchronousQueue */ package com.bernardlowe.concurrent.t06; import java.util.concurrent.BlockingQueue; import java.util.concurrent.SynchronousQueue; import java.util.concurrent.TimeUnit; public class Test_08_SynchronusQueue { BlockingQueue<String> queue = new SynchronousQueue<>(); public static void main(String[] args) { final Test_08_SynchronusQueue t = new Test_08_SynchronusQueue(); new Thread(new Runnable() { @Override public void run() { try { System.out.println(Thread.currentThread().getName() + " thread begin " ); try { TimeUnit.SECONDS.sleep(2); } catch (InterruptedException e) { e.printStackTrace(); } System.out.println(Thread.currentThread().getName() + " - " + t.queue.take()); } catch (InterruptedException e) { e.printStackTrace(); } } }, "output thread").start(); /*try { TimeUnit.SECONDS.sleep(3); } catch (InterruptedException e) { e.printStackTrace(); }*/ // t.queue.add("test add"); try { t.queue.put("test put"); } catch (InterruptedException e) { e.printStackTrace(); } System.out.println(Thread.currentThread().getName() + " queue size : " + t.queue.size()); } } 复制代码
将 t.queue.add("test add");
的注释打开, t.queue.put("test put");
加上注释
add方法异常结果: 因为它是一个容量为0的队列