线程池(ThreadPoolExecutor)

2021-02-01  本文已影响0人  zc_sunny

一:Executor知识点

线程池知识点.png

二:线程池模型

1:线程池模型:生产者-消费者模式(与一般的池化资源模式不同),线程池的使用方法是生产者,线程池本身是消费者。

问题1:为什么认为"线程池的使用方法是生产者,线程池本身是消费者"呢?

因此线程池内部维护了队列,线程池的方法提交一个任务就是将其加入到队列中,对应的就是生产者,然后线程池从队列中获取任务执行来消费任务,对应的就是消费者。

三:线程池原理

线程池原理.png

1:执行原理

线程池中的核心线程数,当提交一个任务时,线程池创建一个新线程执行任务,直到当前线程数等于corePoolSize;如果当前线程数为corePoolSize,继续提交的任务被保存到阻塞队列中,等待被执行;如果阻塞队列满了,那就创建新的线程执行当前任务;直到线程池中的线程数达到maxPoolSize,这时再有任务来,只能执行RejectedExecutionHandler处理该任务。

2:核心参数

四:线程池核心API

五:线程池的作用

资源的利用性增加。

六:线程池的巧妙设计

1:AtomicInteger变量设计

​ 在线程池中,使用了一个原子类AtomicInteger的变量来表示线程池状态和线程数量,该变量在内存中会占用4个字节,也就是32bit,其中高3位用来表示线程池的状态,低29位用来表示线程的数量。线程池的状态一共有5中状态,用3bit最多可以表示8种状态,因此采用高3位来表示线程池的状态完全能满足需求。

注:用1个变量来保存2个变量状态,非常的巧妙,2个变量之间自身的耦合关系也非常好处理。

七:Executors

《阿里巴巴Java开发规范》建议:不要使用Executors来创建线程池。

原因:Executors提供的四种线程池创建策略容易造成OOM。

1:FixedThreadPool 和 SingleThreadPool:允许LinkedBlockingQueue的请求队列长度为 Integer.MAX_VALUE,可能会堆积大量的请求,从而导致 OOM。
2:CachedThreadPool 和 ScheduledThreadPool:允许的创建线程数量为 Integer.MAX_VALUE,可能会创建大量的线程,从而导致 OOM。

八:合理的设置线程池

1:理论设置

线程池的理论设置需要依据程序是CPU密集型任务还是IO密集型任务来进行设置。

CPU密集型任务:特点是要进行大量的计算,消耗CPU资源,比如计算圆周率、对视频进行高清解码等等,全靠CPU的运算能力。

IO密集型任务:涉及到网络、磁盘IO的任务都是IO密集型任务,这类任务的特点是CPU消耗很少,任务的大部分时间都在等待IO操作完成(因为IO的速度远远低于CPU和内存的速度)。因此CPU会在进行IO的时候处于空闲。

2:生产环境设置

生产环境设置需要在压测的基础上进行设置。

八:实际项目经验

1:项目中自定义线程池中线程名字

/**
 * JDK构造线程池
 *
 * @return
 */
public Executor constructExecutor() {
    return new ThreadPoolExecutor(1, 2, 1, TimeUnit.MINUTES, new LinkedBlockingQueue<>(10),
            new ThreadFactory() {

                private AtomicInteger tag = new AtomicInteger(0);

                @Override
                public Thread newThread(Runnable runnable) {
                    Thread thread = new Thread(runnable);
                    thread.setName("线程name-" + tag.getAndIncrement());
                    return thread;
                }
            }, new ThreadPoolExecutor.AbortPolicy());
}

/**
 * Spring Boot Bean构造异步线程池
 */
@Bean
public AsyncTaskExecutor asyncTaskExecutor() {
    ThreadPoolTaskExecutor asyncTaskExecutor = new ThreadPoolTaskExecutor();
    asyncTaskExecutor.setCorePoolSize(1);
    asyncTaskExecutor.setMaxPoolSize(1);
    asyncTaskExecutor.setThreadNamePrefix("线程名");
    return asyncTaskExecutor;
}

2:项目中如何定义线程池

​ 一个项目中如果多个业务需要用到线程池,是定义一个公共的线程池比较好,还是按照业务定义各自不同的线程池?如果定义一个公共的线程池那里面的线程数的理论值应该是按照老师前面章节讲的去计算吗?还是按照如果有多少个业务就分别去计算他们各自创建线程池线程数的加和?如果不同的业务各自定义不同的线程池,那线程数的理论值也是按照前面的去计算吗?

极客时间上建议:建议不同类别的业务用不同的线程池,至于线程池的数量,各自计算各自的,然后去做压测(APM做压测)。虽然你的系统有多个线程池,但是并不是所有的线程池里的线程都是忙碌的,你只需要针对有性能瓶颈的业务优化就可以了。

3:线程池监控和动态修改

项目中使用线程池时,线程池的参数主要是核心线程数最大线程数的设置需要通过压测来选取最适合业务类型的参数,因此会有线上环境动态修改线程池的需求。线上的运行环境需要监控线程池的参数来了解线程池的的运行状态。

代码示例参考:threadpool-monitor

参考:美团线程池应用线程池原理如何合理的设置线程池的大小

上一篇 下一篇

猜你喜欢

热点阅读