Java并发编程的艺术学习笔记(九)——Java中的线程池

第9章    Java中的线程池
线程池的好处:
1.降低资源消耗:减少线程创建和销毁,重复利用线程
2.提高响应速度:线程提前创建,接收到任务线程立即执行
3.提高线程的可管理性:线程池可以统一分配、调优和监控

9.1 线程池的实现原理
    当接收到一个新任务时,线程池工作流程如下:
    1.线程池判断核心线程池里的线程是否都在执行任务,如果不是,创建一个新的工作线程来执行任务,如果是,下一步;
    2.线程池判断工作队列是否已满,如果不是,则将新任务存储到工作队列,如果是,下一步;
    3.线程池判断线程池的线程是否都处于工作状态,如果不是,则创建一个新的工作线程来执行任务,如果是,交给饱和策略来处理这个任务。

    原书此处表达不准确,看execute()方法源码注释
     /*
         * Proceed in 3 steps:
         *
         * 1. If fewer than corePoolSize threads are running, try to
         * start a new thread with the given command as its first
         * task.  The call to addWorker atomically checks runState and
         * workerCount, and so prevents false alarms that would add
         * threads when it shouldn't, by returning false.
         *
         * 2. If a task can be successfully queued, then we still need
         * to double-check whether we should have added a thread
         * (because existing ones died since last checking) or that
         * the pool shut down since entry into this method. So we
         * recheck state and if necessary roll back the enqueuing if
         * stopped, or start a new thread if there are none.
         *
         * 3. If we cannot queue task, then we try to add a new
         * thread.  If it fails, we know we are shut down or saturated
         * and so reject the task.
         */

    1.如果少于核心线程池大小的线程正在运行,则开启一个新的线程,用提交的任务作为该线程的第一个任务。
    调用addWorker方法会原子地检查运行状态和工作线程数量,从而防止不应该增加线程而返回false。

    2.如果一个任务能够成功的加入队列,我们仍需要再次检查是否应该添加一个线程(因为存在自从上一次检查已经有线程消亡的情况)还是自从进入这个方法线程池已经关闭。
    所以我们重新检查状态,如果有必要,状态停止则回滚入队操作,没有线程则创建一个新的线程。

    3.如果不能将任务加入队列,那么我们尝试创建一个新的线程。如果创建失败表示线程池已关闭或者饱和,所以拒绝了任务

9.2 线程池的使用
9.2.1 线程池的创建
    看构造方法源码注释
    /**
     * Creates a new {@code ThreadPoolExecutor} with the given initial
     * parameters.
     *
     * @param corePoolSize the number of threads to keep in the pool, even
     *        if they are idle, unless {@code allowCoreThreadTimeOut} is set
     * @param maximumPoolSize the maximum number of threads to allow in the
     *        pool
     * @param keepAliveTime when the number of threads is greater than
     *        the core, this is the maximum time that excess idle threads
     *        will wait for new tasks before terminating.
     * @param unit the time unit for the {@code keepAliveTime} argument
     * @param workQueue the queue to use for holding tasks before they are
     *        executed.  This queue will hold only the {@code Runnable}
     *        tasks submitted by the {@code execute} method.
     * @param threadFactory the factory to use when the executor
     *        creates a new thread
     * @param handler the handler to use when execution is blocked
     *        because the thread bounds and queue capacities are reached
     * @throws IllegalArgumentException if one of the following holds:<br>
     *         {@code corePoolSize < 0}<br>
     *         {@code keepAliveTime < 0}<br>
     *         {@code maximumPoolSize <= 0}<br>
     *         {@code maximumPoolSize < corePoolSize}
     * @throws NullPointerException if {@code workQueue}
     *         or {@code threadFactory} or {@code handler} is null
     */
    public ThreadPoolExecutor(int corePoolSize,                            
                            int maximumPoolSize,
                            long keepAliveTime,
                            TimeUnit timeUnit,
                            BlockingQueue<Runnable> workQueue,
                            ThreadFactory threadFactory,
                            RejectionExecutionHandler handler){
                                    ...
                            }
    corePoolSize 线程池线程的保有量,即使其他线程空闲
    maximumPoolSize 线程池允许的线程数量的最大限度
    keepAliveTime 当线程数量大于核心数量,超量部分的等待新任务的空闲线程终止前的最大时间限度
    unit keepAliveTime的时间单位
    workQueue 用来持有执行前任务的队列.这个队列只会存储由execute方法提交的Runnable任务
    threadFactory executor创建一个新的线程时使用的工厂
    handler 饱和策略,当execution因为线程界限和队列容量达到而阻塞时使用


    workQueue种类:
    ArrayBlockingQueue 基于数组结构的阻塞队列
    LinkedBlockingQueue 基于链表结构的阻塞队列,吞吐量比ArrayBlockingQueue高
    SynchronousBlockingQueue 不存储元素的阻塞队列,添加操作会一直等待取出操作,吞吐量高于LinkedBlockingQueue
    PriorityBlockingQueue 具有优先级别的无限阻塞队列
9.2.2 向线程池提交任务
    execute() 提交不需要返回值的任务
    submit() 提交需要返回值的任务,返回一个Future对象,调用Future的get()方法可以获取返回结果,但会阻塞当前线程直到任务执行完成
9.2.3 关闭线程池
    通过调用shutdown和shutdownNow方法来关闭线程池,其原理是遍历线程池中的所有线程,调用线程的interrupt方法来中断线程
    shutdownNow方法会先将线程池状态置为STOP,尝试停止所有正在执行或者暂停任务的线程,并返回等待执行任务的列表
    shutdown方法会将线程池状态置为SHUTDOWN,然后中断所有没有正在执行任务的线程
9.2.4 合理配置线程池
    从以下几个角度分析
    任务性质:CPU密集型任务——配置(CPU个数+1)个线程,IO密集型任务——配置(CPU个数*2)个线程,混合型任务——分解任务看吞吐量,两个任务执行时间相差太大则没必要分解
            Runtime.getRuntime().availableProcessors() 获取当前设备的CPU个数
    任务的优先级:使用PriorityBlockingQueue队列让优先级高的任务先执行,注意:如果一直有优先级高的任务在队列里,优先级低的任务可能永远不被执行
    任务的执行时间:使用PriorityBlockingQueue让执行时间短的任务先执行
    任务的依赖性:依赖数据库连接的任务等待时间长,线程数应该设置得更大以便更好地利用CPU
    建议使用有界队列,使用无界队列如果执行任务出现问题线程阻塞,任务队列又不断被加入任务导致内存撑满,整个系统崩溃
9.2.5 线程池的监控
    taskCount 线程池需要执行的任务数量
    completedTaskCount 已完成的任务数量
    largestPoolSize 线程池曾创建过的最大线程数量
    getPoolSize 线程池的线程数量
    getActiveCount 线程池活动的线程数量

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
1 目标检测的定义 目标检测(Object Detection)的任务是找出图像所有感兴趣的目标(物体),确定它们的类别和位置,是计算机视觉领域的核心问题之一。由于各类物体有不同的外观、形状和姿态,加上成像时光照、遮挡等因素的干扰,目标检测一直是计算机视觉领域最具有挑战性的问题。 目标检测任务可分为两个关键的子任务,目标定位和目标分类。首先检测图像目标的位置(目标定位),然后给出每个目标的具体类别(目标分类)。输出结果是一个边界框(称为Bounding-box,一般形式为(x1,y1,x2,y2),表示框的左上角坐标和右下角坐标),一个置信度分数(Confidence Score),表示边界框是否包含检测对象的概率和各个类别的概率(首先得到类别概率,经过Softmax可得到类别标签)。 1.1 Two stage方法 目前主流的基于深度学习的目标检测算法主要分为两类:Two stage和One stage。Two stage方法将目标检测过程分为两个阶段。第一个阶段是 Region Proposal 生成阶段,主要用于生成潜在的目标候选框(Bounding-box proposals)。这个阶段通常使用卷积神经网络(CNN)从输入图像提取特征,然后通过一些技巧(如选择性搜索)来生成候选框。第二个阶段是分类和位置精修阶段,将第一个阶段生成的候选框输入到另一个 CNN 进行分类,并根据分类结果对候选框的位置进行微调。Two stage 方法的优点是准确度较高,缺点是速度相对较慢。 常见Tow stage目标检测算法有:R-CNN系列、SPPNet等。 1.2 One stage方法 One stage方法直接利用模型提取特征值,并利用这些特征值进行目标的分类和定位,不需要生成Region Proposal。这种方法的优点是速度快,因为省略了Region Proposal生成的过程。One stage方法的缺点是准确度相对较低,因为它没有对潜在的目标进行预先筛选。 常见的One stage目标检测算法有:YOLO系列、SSD系列和RetinaNet等。 2 常见名词解释 2.1 NMS(Non-Maximum Suppression) 目标检测模型一般会给出目标的多个预测边界框,对成百上千的预测边界框都进行调整肯定是不可行的,需要对这些结果先进行一个大体的挑选。NMS称为非极大值抑制,作用是从众多预测边界框挑选出最具代表性的结果,这样可以加快算法效率,其主要流程如下: 设定一个置信度分数阈值,将置信度分数小于阈值的直接过滤掉 将剩下框的置信度分数从大到小排序,选值最大的框 遍历其余的框,如果和当前框的重叠面积(IOU)大于设定的阈值(一般为0.7),就将框删除(超过设定阈值,认为两个框的里面的物体属于同一个类别) 从未处理的框继续选一个置信度分数最大的,重复上述过程,直至所有框处理完毕 2.2 IoU(Intersection over Union) 定义了两个边界框的重叠度,当预测边界框和真实边界框差异很小时,或重叠度很大时,表示模型产生的预测边界框很准确。边界框A、B的IOU计算公式为: 2.3 mAP(mean Average Precision) mAP即均值平均精度,是评估目标检测模型效果的最重要指标,这个值介于0到1之间,且越大越好。mAP是AP(Average Precision)的平均值,那么首先需要了解AP的概念。想要了解AP的概念,还要首先了解目标检测Precision和Recall的概念。 首先我们设置置信度阈值(Confidence Threshold)和IoU阈值(一般设置为0.5,也会衡量0.75以及0.9的mAP值): 当一个预测边界框被认为是True Positive(TP)时,需要同时满足下面三个条件: Confidence Score > Confidence Threshold 预测类别匹配真实值(Ground truth)的类别 预测边界框的IoU大于设定的IoU阈值 不满足条件2或条件3,则认为是False Positive(FP)。当对应同一个真值有多个预测结果时,只有最高置信度分数的预测结果被认为是True Positive,其余被认为是False Positive。 Precision和Recall的概念如下图所示: Precision表示TP与预测边界框数量的比值 Recall表示TP与真实边界框数量的比值 改变不同的置信度阈值,可以获得多组Precision和Recall,Recall放X轴,Precision放Y轴,可以画出一个Precision-Recall曲线,简称P-R
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值