01.Android线程池实践基础

目录介绍

  • 01.实际开发问题
  • 02.线程池的优势
  • 03.ThreadPoolExecutor参数
  • 04.ThreadPoolExecutor使用
  • 05.线程池执行流程
  • 06.四种线程池类
  • 07.execute和submit区别
  • 08.线程池的使用技巧

01.实际开发问题

  • 在我们的开发中经常会使用到多线程。例如在Android中,由于主线程的诸多限制,像网络请求等一些耗时的操作我们必须在子线程中运行。
  • 我们往往会通过new Thread来开启一个子线程,待子线程操作完成以后通过Handler切换到主线程中运行。这么以来我们无法管理我们所创建的子线程,并且无限制的创建子线程,它们相互之间竞争,很有可能由于占用过多资源而导致死机或者OOM。所以在Java中为我们提供了线程池来管理我们所创建的线程。

02.线程池的优势

  • ①降低系统资源消耗,通过重用已存在的线程,降低线程创建和销毁造成的消耗;
  • ②提高系统响应速度,当有任务到达时,无需等待新线程的创建便能立即执行;
  • ③方便线程并发数的管控,线程若是无限制的创建,不仅会额外消耗大量系统资源,更是占用过多资源而阻塞系统或oom等状况,从而降低系统的稳定性。线程池能有效管控线程,统一分配、调优,提供资源使用率;
  • ④更强大的功能,线程池提供了定时、定期以及可控线程数等功能的线程池,使用方便简单。

03.ThreadPoolExecutor

  • 可以通过ThreadPoolExecutor来创建一个线程池。

    ExecutorService service = new ThreadPoolExecutor(....);
  • 下面我们就来看一下ThreadPoolExecutor中的一个构造方法。

     public ThreadPoolExecutor(int corePoolSize,
         int maximumPoolSize,
         long keepAliveTime,
         TimeUnit unit,
         BlockingQueue<Runnable> workQueue,
         ThreadFactory threadFactory,
         RejectedExecutionHandler handler) 
  • ThreadPoolExecutor参数含义
  • 1.corePoolSize

    • 线程池中的核心线程数,默认情况下,核心线程一直存活在线程池中,即便他们在线程池中处于闲置状态。除非我们将ThreadPoolExecutor的allowCoreThreadTimeOut属性设为true的时候,这时候处于闲置的核心线程在等待新任务到来时会有超时策略,这个超时时间由keepAliveTime来指定。一旦超过所设置的超时时间,闲置的核心线程就会被终止。
  • 2.maximumPoolSize

    • 线程池中所容纳的最大线程数,如果活动的线程达到这个数值以后,后续的新任务将会被阻塞。包含核心线程数+非核心线程数。
  • 3.keepAliveTime

    • 非核心线程闲置时的超时时长,对于非核心线程,闲置时间超过这个时间,非核心线程就会被回收。只有对ThreadPoolExecutor的allowCoreThreadTimeOut属性设为true的时候,这个超时时间才会对核心线程产生效果。
  • 4.unit

    • 用于指定keepAliveTime参数的时间单位。他是一个枚举,可以使用的单位有天(TimeUnit.DAYS),小时(TimeUnit.HOURS),分钟(TimeUnit.MINUTES),毫秒(TimeUnit.MILLISECONDS),微秒(TimeUnit.MICROSECONDS, 千分之一毫秒)和毫微秒(TimeUnit.NANOSECONDS, 千分之一微秒);
  • 5.workQueue

    • 线程池中保存等待执行的任务的阻塞队列。通过线程池中的execute方法提交的Runable对象都会存储在该队列中。我们可以选择下面几个阻塞队列。我们还能够通过实现BlockingQueue接口来自定义我们所需要的阻塞队列。

      | 阻塞队列 | 说明 |
      | ------- | -------- |
      | ArrayBlockingQueue | 基于数组实现的有界的阻塞队列,该队列按照FIFO(先进先出)原则对队列中的元素进行排序。|
      | LinkedBlockingQueue | 基于链表实现的阻塞队列,该队列按照FIFO(先进先出)原则对队列中的元素进行排序。|
      | SynchronousQueue | 内部没有任何容量的阻塞队列。在它内部没有任何的缓存空间。对于SynchronousQueue中的数据元素只有当我们试着取走的时候才可能存在。|
      | PriorityBlockingQueue | 具有优先级的无限阻塞队列。|
  • 6.threadFactory

    • 线程工厂,为线程池提供新线程的创建。ThreadFactory是一个接口,里面只有一个newThread方法。 默认为DefaultThreadFactory类。
  • 7.handler

    • 是RejectedExecutionHandler对象,而RejectedExecutionHandler是一个接口,里面只有一个rejectedExecution方法。当任务队列已满并且线程池中的活动线程已经达到所限定的最大值或者是无法成功执行任务,这时候ThreadPoolExecutor会调用RejectedExecutionHandler中的rejectedExecution方法。在ThreadPoolExecutor中有四个内部类实现了RejectedExecutionHandler接口。在线程池中它默认是AbortPolicy,在无法处理新任务时抛出RejectedExecutionException异常
    • 下面是在ThreadPoolExecutor中提供的四个可选值。
    • 我们也可以通过实现RejectedExecutionHandler接口来自定义我们自己的handler。如记录日志或持久化不能处理的任务。

      | 可选值 | 说明 |
      | ----- | ------- |
      | CallerRunsPolicy | 只用调用者所在线程来运行任务。|
      | AbortPolicy | 直接抛出RejectedExecutionException异常。|
      | DiscardPolicy | 丢弃掉该任务,不进行处理。|
      | DiscardOldestPolicy | 丢弃队列里最近的一个任务,并执行当前任务。|
  • 如下图所示

    • 01.Android线程池实践基础

04.ThreadPoolExecutor使用

  • 如下所示

    ExecutorService service = new ThreadPoolExecutor(5, 10, 10, TimeUnit.SECONDS, new LinkedBlockingQueue<>());
  • 对于ThreadPoolExecutor有多个构造方法,对于上面的构造方法中的其他参数都采用默认值。可以通过execute和submit两种方式来向线程池提交一个任务。
  • execute

    • 当我们使用execute来提交任务时,由于execute方法没有返回值,所以说我们也就无法判定任务是否被线程池执行成功。
    service.execute(new Runnable() {
        public void run() {
            System.out.println("execute方式");
        }
    });
  • submit

    • 当我们使用submit来提交任务时,它会返回一个future,我们就可以通过这个future来判断任务是否执行成功,还可以通过future的get方法来获取返回值。如果子线程任务没有完成,get方法会阻塞住直到任务完成,而使用get(long timeout, TimeUnit unit)方法则会阻塞一段时间后立即返回,这时候有可能任务并没有执行完。
    Future<Integer> future = service.submit(new Callable<Integer>() {
    
        @Override
        public Integer call() throws Exception {
            System.out.println("submit方式");
            return 2;
        }
    });
    try {
        Integer number = future.get();
    } catch (ExecutionException e) {
        e.printStackTrace();
    }
  • 线程池关闭

    • 调用线程池的shutdown()shutdownNow()方法来关闭线程池
    • shutdown原理:将线程池状态设置成SHUTDOWN状态,然后中断所有没有正在执行任务的线程。
    • shutdownNow原理:将线程池的状态设置成STOP状态,然后中断所有任务(包括正在执行的)的线程,并返回等待执行任务的列表。
    • 中断采用interrupt方法,所以无法响应中断的任务可能永远无法终止。 但调用上述的两个关闭之一,isShutdown()方法返回值为true,当所有任务都已关闭,表示线程池关闭完成,则isTerminated()方法返回值为true。当需要立刻中断所有的线程,不一定需要执行完任务,可直接调用shutdownNow()方法。

05.线程池执行流程

  • 大概的流程图如下

    • 01.Android线程池实践基础
  • 文字描述如下

    • ①如果在线程池中的线程数量没有达到核心的线程数量,这时候就回启动一个核心线程来执行任务。
    • ②如果线程池中的线程数量已经超过核心线程数,这时候任务就会被插入到任务队列中排队等待执行。
    • ③由于任务队列已满,无法将任务插入到任务队列中。这个时候如果线程池中的线程数量没有达到线程池所设定的最大值,那么这时候就会立即启动一个非核心线程来执行任务。
    • ④如果线程池中的数量达到了所规定的最大值,那么就会拒绝执行此任务,这时候就会调用RejectedExecutionHandler中的rejectedExecution方法来通知调用者。

06.四种线程池类

  • Java中四种具有不同功能常见的线程池。

    • 他们都是直接或者间接配置ThreadPoolExecutor来实现他们各自的功能。这四种线程池分别是newFixedThreadPool,newCachedThreadPool,newScheduledThreadPool和newSingleThreadExecutor。这四个线程池可以通过Executors类获取。

6.1 newFixedThreadPool

  • 通过Executors中的newFixedThreadPool方法来创建,该线程池是一种线程数量固定的线程池。

    ExecutorService service = Executors.newFixedThreadPool(4);
  • 在这个线程池中 所容纳最大的线程数就是我们设置的核心线程数。

    • 如果线程池的线程处于空闲状态的话,它们并不会被回收,除非是这个线程池被关闭。如果所有的线程都处于活动状态的话,新任务就会处于等待状态,直到有线程空闲出来。
    • 由于newFixedThreadPool只有核心线程,并且这些线程都不会被回收,也就是它能够更快速的响应外界请求
  • 从下面的newFixedThreadPool方法的实现可以看出,newFixedThreadPool只有核心线程,并且不存在超时机制,采用LinkedBlockingQueue,所以对于任务队列的大小也是没有限制的。

    public static ExecutorService newFixedThreadPool(int nThreads) {
        return new ThreadPoolExecutor(nThreads, nThreads,
            0L, TimeUnit.MILLISECONDS,
            new LinkedBlockingQueue<Runnable>());
    }

6.2 newCachedThreadPool

  • 通过Executors中的newCachedThreadPool方法来创建。

    public static ExecutorService newCachedThreadPool() {
        return new ThreadPoolExecutor(0, Integer.MAX_VALUE,
            60L, TimeUnit.SECONDS,
            new SynchronousQueue<Runnable>());
    }
  • 通过s上面的newCachedThreadPool方法在这里我们可以看出它的 核心线程数为0, 线程池的最大线程数Integer.MAX_VALUE。而Integer.MAX_VALUE是一个很大的数,也差不多可以说 这个线程池中的最大线程数可以任意大。

    • 当线程池中的线程都处于活动状态的时候,线程池就会创建一个新的线程来处理任务。该线程池中的线程超时时长为60秒,所以当线程处于闲置状态超过60秒的时候便会被回收。
    • 这也就意味着若是整个线程池的线程都处于闲置状态超过60秒以后,在newCachedThreadPool线程池中是不存在任何线程的,所以这时候它几乎不占用任何的系统资源。
    • 对于newCachedThreadPool他的任务队列采用的是SynchronousQueue,上面说到在SynchronousQueue内部没有任何容量的阻塞队列。SynchronousQueue内部相当于一个空集合,我们无法将一个任务插入到SynchronousQueue中。所以说在线程池中如果现有线程无法接收任务,将会创建新的线程来执行任务。

6.3 newScheduledThreadPool

  • 通过Executors中的newScheduledThreadPool方法来创建。

    public static ScheduledExecutorService newScheduledThreadPool(int corePoolSize) {
        return new ScheduledThreadPoolExecutor(corePoolSize);
    }
    public ScheduledThreadPoolExecutor(int corePoolSize) {
        super(corePoolSize, Integer.MAX_VALUE, 0, NANOSECONDS,
              new DelayedWorkQueue());
    }
  • 它的核心线程数是固定的,对于非核心线程几乎可以说是没有限制的,并且当非核心线程处于限制状态的时候就会立即被回收。

    • 创建一个可定时执行或周期执行任务的线程池:
    ScheduledExecutorService service = Executors.newScheduledThreadPool(4);
    service.schedule(new Runnable() {
        public void run() {
            System.out.println(Thread.currentThread().getName()+"延迟三秒执行");
        }
    }, 3, TimeUnit.SECONDS);
    service.scheduleAtFixedRate(new Runnable() {
        public void run() {
            System.out.println(Thread.currentThread().getName()+"延迟三秒后每隔2秒执行");
        }
    }, 3, 2, TimeUnit.SECONDS);
    • 输出结果:

      >pool-1-thread-2延迟三秒后每隔2秒执行
      ><br>pool-1-thread-1延迟三秒执行
      ><br>pool-1-thread-1延迟三秒后每隔2秒执行
      ><br>pool-1-thread-2延迟三秒后每隔2秒执行
      ><br>pool-1-thread-2延迟三秒后每隔2秒执行
  • 部分方法说明

    • schedule(Runnable command, long delay, TimeUnit unit):延迟一定时间后执行Runnable任务;
    • schedule(Callable callable, long delay, TimeUnit unit):延迟一定时间后执行Callable任务;
    • scheduleAtFixedRate(Runnable command, long initialDelay, long period, TimeUnit unit):延迟一定时间后,以间隔period时间的频率周期性地执行任务;
    • scheduleWithFixedDelay(Runnable command, long initialDelay, long delay,TimeUnit unit):与scheduleAtFixedRate()方法很类似,但是不同的是scheduleWithFixedDelay()方法的周期时间间隔是以上一个任务执行结束到下一个任务开始执行的间隔,而scheduleAtFixedRate()方法的周期时间间隔是以上一个任务开始执行到下一个任务开始执行的间隔,也就是这一些任务系列的触发时间都是可预知的。
  • ScheduledExecutorService功能强大,对于定时执行的任务,建议多采用该方法。

6.4 newSingleThreadExecutor

  • 通过Executors中的newSingleThreadExecutor方法来创建,在这个线程池中只有一个核心线程,对于任务队列没有大小限制,也就意味着这一个任务处于活动状态时,其他任务都会在任务队列中排队等候依次执行
  • newSingleThreadExecutor将所有的外界任务统一到一个线程中支持,所以在这个任务执行之间我们不需要处理线程同步的问题。

    public static ExecutorService newSingleThreadExecutor() {
        return new FinalizableDelegatedExecutorService
        (new ThreadPoolExecutor(1, 1,
            0L, TimeUnit.MILLISECONDS,
            new LinkedBlockingQueue<Runnable>()));
    }

07.execute和submit区别

  • 先思考一个问题

    • 为了保证项目中线程数量不会乱飙升,不好管理,我们会使用线程池,保证线程在我们的管理之下。
    • 我们也经常说:使用线程池复用线程。那么问题是:线程池中的线程是如何复用的?是执行完成后销毁,再新建几个放那;还是始终是那几个线程(针对 coreSize 线程)。
  • execute和submit

    • 调用线程池的execute方法(ExecutorService的submit方法最终也是调用execute)传进去的Runnable,并不会直接以new Thread(runnable).start()的方式来执行,而是通过一个正在运行的线程来调用我们传进去的Runnable的run方法的。
    • 那么,这个正在运行的线程,在执行完传进去的Runnable的run方法后会销毁吗?看情况。
    • 大部分场景下,我们都是通过Executors的newXXX方法来创建线程池的,就拿newCachedThreadPool来说:

      public static ExecutorService newCachedThreadPool() {
          return new ThreadPoolExecutor(0, Integer.MAX_VALUE, 60L, TimeUnit.SECONDS, new SynchronousQueue<Runnable>());
      }
      • 看第三个参数(keepAliveTime):60L,后面的单位是秒,也就是说,newCachedThreadPool方法返回的线程池,它的工作线程(也就是用来调用Runnable的run方法的线程)的空闲等待时长为60秒,如果超过了60秒没有获取到新的任务,那么这个工作线程就会结束。如果在60秒内接到了新的任务,那么它会在新任务结束后重新等待。
    • 还有另一种常用的线程池,通过newFixedThreadPool方法创建的:

      public static ExecutorService newFixedThreadPool(int nThreads) {
          return new ThreadPoolExecutor(nThreads, nThreads, 0L, TimeUnit.MILLISECONDS, new LinkedBlockingQueue<Runnable>());
      }
      • 它跟上面的newCachedThreadPool方法一样,创建的都是ThreadPoolExecutor的对象,只是参数不同而已。
        可以看到第三个参数设置成了0,这就说明,如果当前工作线程数 > corePoolSize时,并且有工作线程在执行完上一个任务后没拿到新的任务,那么这个工作线程就会立即结束。

      再看第二个参数(maximumPoolSize),它设置成了跟corePoolSize一样大,也就是说当前工作线程数 永远不会大于 corePoolSize了,这样的话,即使有工作线程是空闲的,也不会主动结束,会一直等待下一个任务的到来。

  • ThreadPoolExecutor分析

    • 来探究一下ThreadPoolExecutor是如何管理线程的,先来看精简后的execute方法:
    • 逻辑很清晰:当execute方法被调用时,如果当前工作线程 < corePoolSize(上面ThreadPoolExecutor构造方法的第一个参数)的话,就会创建新的线程,否则加入队列。加入队列后如果没有工作线程在运行,也会创建一个。
    private final BlockingQueue<Runnable> workQueue;
    
    public void execute(Runnable command) {
        int c = ctl.get();
        //当前工作线程还没满
        if (workerCountOf(c) < corePoolSize) {
            //可以创建新的工作线程来执行这个任务
            if (addWorker(command, true)){
                //添加成功直接返回
                return;
            }
        }
    
        //如果工作线程满了的话,会加入到阻塞队列中
        if (workQueue.offer(command)) {
            int recheck = ctl.get();
            //加入到队列之后,如果当前没有工作线程,那么就会创建一个工作线程
            if (workerCountOf(recheck) == 0)
                addWorker(null, false);
        }
    }
    • 接着看它是怎么创建新线程的:

      • 主要操作是再次检查,然后创建Worker对象,并且把worker对象店家到HashSet集合中,最后启动工作线程。
    private final HashSet<Worker> workers = new HashSet<>();
    
    private boolean addWorker(Runnable firstTask, boolean core) {
        //再次检查
        int wc = workerCountOf(c);
        if (wc >= CAPACITY || wc >= corePoolSize)
            return false;
    
        boolean workerStarted = false;
        Worker w = null;
        //创建Worker对象
        w = new Worker(firstTask);
        //添加到集合中
        workers.add(w);
        final Thread t = w.thread;
        //启动工作线程
        t.start();
        workerStarted = true;
    
        return workerStarted;
    }
    • 看看Worker里面是怎么样的:

      • 可以看到,这个Worker也是一个Runnable。构造方法里面还创建了一个Thread,这个Thread对象,对应了上面addWorker方法启动的那个thread。
    private final class Worker extends AbstractQueuedSynchronizer implements Runnable {
        final Thread thread;
        Runnable firstTask;
    
        Worker(Runnable firstTask) {
            this.firstTask = firstTask;
            this.thread = getThreadFactory().newThread(this);
        }
    
        public void run() {
            runWorker(this);
        }
    }
    • 再看Worker类中的run方法,它调用了runWorker,并把自己传了进去:

      • Worker里面的firstTask,就是我们通过execute方法传进去的Runnable,可以看到它会在这个方法里面被执行
      • 执行完成之后,接着就会通过getTask方法尝试从等待队列中(上面的workQueue)获取下一个任务,如果getTask方法返回null的话,那么这个工作线程就会结束
    final void runWorker(Worker w) {
        Runnable task = w.firstTask;
        w.firstTask = null;
    
        while (task != null || (task = getTask()) != null) {
            try {
                task.run();
            } finally {
                task = null;
                w.completedTasks++;
            }
        }
    }
    • 最后看看runWorker方法中的getTask方法
    private Runnable getTask() {
        boolean timedOut = false; // Did the last poll() time out?
    
        for (; ; ) {
            int c = ctl.get();
            int wc = workerCountOf(c);
    
            //如果当前工作线程数大于指定的corePoolSize的话,就要视情况结束工作线程
            boolean timed = wc > corePoolSize;
    
            //(当前工作线程数 > 指定的最大线程数 || (工作线程数 > 指定的核心线程数 && 上一次被标记超时了)) && (当前工作线程数有2个以上 || 等待队列现在是空的)
            if ((wc > maximumPoolSize || (timed && timedOut)) && (wc > 1 || workQueue.isEmpty())) {
                return null;
            }
            //如果当前工作线程数大于指定的corePoolSize,就看能不能在keepAliveTime时间内获取到新任务
            //如果线程数没有 >  corePoolSize的话,就会一直等待
            Runnable r = timed ? workQueue.poll(keepAliveTime, TimeUnit.NANOSECONDS) : workQueue.take();
            if (r != null)
                return r;
            //没能在keepAliveTime时间内获取到新任务,标记已超时
            timedOut = true;
        }
    }

08.线程池的使用技巧

  • 需要针对具体情况而具体处理,不同的任务类别应采用不同规模的线程池,任务类别可划分为CPU密集型任务、IO密集型任务和混合型任务。(N代表CPU个数)

    | 任务类别 | 说明 |
    | ------ | ----------- |
    | CPU密集型任务 | 线程池中线程个数应尽量少,如配置N+1个线程的线程池。|
    | IO密集型任务 | 由于IO操作速度远低于CPU速度,那么在运行这类任务时,CPU绝大多数时间处于空闲状态,那么线程池可以配置尽量多些的线程,以提高CPU利用率,如2*N。|
    | 混合型任务 | 可以拆分为CPU密集型任务和IO密集型任务,当这两类任务执行时间相差无几时,通过拆分再执行的吞吐率高于串行执行的吞吐率,但若这两类任务执行时间有数据级的差距,那么没有拆分的意义。 |
    

Android线程池实践库:https://github.com/yangchong211/YCThreadPool

上一篇:03.Android崩溃Crash库之ExceptionHandler分析


下一篇:Hadoop常见错误1