最近做多职位简历召回时,使用多线程进行es数据召回,发现每次es召回的时间大概在1000ms,甚至导致RuntimeException。linux机器cpu核数等于8
一、分析原因
1、单线程进行es数据召回,耗时30ms左右,猜猜是由于多线程导致的
2、切回线程池多线程执行es数据召回,每条数据耗时1000ms左右,此时线程池配置如下:
private static ExecutorService THREAD_POOL = new ThreadPoolExecutor(40,40, 60, TimeUnit.SECONDS, new LinkedBlockingQueue<>(),
new ThreadFactoryBuilder().setNameFormat("es-recall-%d").build());
3、减少核心线程数,执行es数据召回,每条数据执行耗时在100ms左右,确定是由于多线程请求,导致es召回耗时变大,甚至超时,此时线程池配置如下:
private static ExecutorService THREAD_POOL = new ThreadPoolExecutor(10, 10, 60, TimeUnit.SECONDS, new LinkedBlockingQueue<>(),
new ThreadFactoryBuilder().setNameFormat("resume-nsupin-recall-%d&#