java线程池的使用

多线程的常规用法(实例)


```bash
package com.zh.jg.hive;

import com.zh.jg.es.EsUtil;
import com.zh.jg.es.HighLevelClient;
import org.elasticsearch.client.RestHighLevelClient;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;

import java.io.File;
import java.io.IOException;
import java.io.RandomAccessFile;
import java.util.HashMap;
import java.util.Map;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;
import java.util.concurrent.TimeUnit;

public class Test {
    final static String colsStr="cust_base_name,cust_base_zzhm,cust_base_zzhm_tm,cust_base_zzhm_md5,cust_base_zzlx,cust_base_sex,cust_base_phone,cust_base_phone_tm,new_org_id,old_org_id,cust_base_age,cust_base_work,cust_base_khdz,cust_base_khyx,cust_base_zcdj,cust_base_ljdj,cust_is_private_bank,cust_is_lose,cust_is_raise,cust_base_levl,cust_is_counter,cust_is_system,cust_consue_levl,prod_is_xt,prod_is_dq,prod_is_decd,prod_is_hq,prod_is_wbhk,prod_is_lc,prod_is_zg,prod_is_jj,prod_is_jjdt,prod_is_gz,prod_is_dx,prod_is_gjs,prod_is_hjdt,prod_is_dsfcg,prod_is_bhbx,prod_is_fbhbx,prod_is_tbbx,prod_is_dfgz,prod_is_dfcz,prod_is_dfsb,prod_is_dfyc,prod_is_xyk_a,prod_is_xyk_b,prod_is_xyk_n,prod_is_wyzh,prod_is_sjyh,prod_is_etc,prod_is_znt,prod_is_pos,prod_is_vip,prod_is_sbk,prod_is_jsh,prod_is_xesd,prod_is_xezd,prod_is_xend,prod_is_xewd,prod_is_qtxd,prod_is_qcdk,prod_is_zfdk,prod_is_sydk,prod_is_dyxd,prod_is_dysd,cust_is_yx,trade_mcc,trade_bal,trade_xyk_tx,trade_xyk_fq,trade_xyk_bd,cust_base_xd,cust_base_dk_bal,prod_db_dyzy,prod_db_xy,prod_db_bz,prod_sjyh_status,prod_sjyh_new,trade_sjyh_hy,trade_sjyh_zwlb,trade_sjyh_jybs,trade_sjyh_is_zwjy,trade_sjyh_is_fzwjy,trade_is_dzjy,trade_is_fdzjy,trade_fsjyh_jybs,trade_fdzjy_bal,prod_is_kjzf,prod_rjzc_3m,prod_rjzc_cx_3m,prod_rjzc_hq_3m,prod_rjzc_fjzxlc_3m,prod_rjzc_jzxlc_3m,prod_rjzc_hbxjj_3m,prod_rjzc_fhbxjj_3m,prod_rjzc_gz_3m,prod_rjzc_bx_3m,prod_kjzf_is_wx,prod_kjzf_is_zfb,prod_kjzf_is_ysf,prod_kjzf_is_jd,prod_kjzf_is_mt,prod_kjzf_is_qt,prod_kjzf_xyk,prod_kjzf_jjk,trade_kjzf_is,trade_kjzf_amt,trade_kjzf_jybs,trade_kjzf_kj_amt,trade_kjzf_kj_jybs,trade_kjzf_ylkj_amt,trade_kjzf_ylkj_jybs,trade_kjzf_zz_amt,trade_kjzf_zz_jybs,trade_kjzf_hb_amt,trade_kjzf_hb_jybs,cust_base_levl_yx,prod_yx_is_jfdh,prod_yx_is_xnsp,prod_yx_is_swsp,prod_yx_cust_levl,prod_tmsd_is_pos,trade_tmsd_is_yxsh,trade_tmsd_is_dxsh,trade_tmsd_is_hysh_a,trade_tmsd_is_hysh_b,trade_tmsd_yjpl,trade_tmsd_yjye,trade_tmsd_mcv,cust_is_qyhd,area_no";
    private static RestHighLevelClient restHighLevelClient = new HighLevelClient().getClient();
    private static EsUtil esu = new EsUtil();
    private static Logger logger = LoggerFactory.getLogger( "com.zh.jg.HiveConnectEs" );

    public static void main(String[] args) throws IOException {
        // 1.1创建固定线程池
        ExecutorService pool = Executors.newFixedThreadPool( 100 );


        String [] colsArr=colsStr.split( ",",-1 );
        String indexname = "cpd_t_cust_label1";
        String typename = "hbase_es_test1";
        // 读取文件数据
        RandomAccessFile raf = new RandomAccessFile(new File("/home/elaser/test"),"r");

        String s ;
        long startTime = System.currentTimeMillis();
        int i=0;
        // 按行读取
        while((s =raf.readLine())!=null){
            final int ii=i;
            final String ss=s;
            // 2.1创建任务并提交
            pool.submit( new Runnable() {
                @Override
                public void run() {
                    runThread();

                }

                private void runThread() {
                    // 存数据的map
                    Map<String,Object> map=new HashMap<String,Object>();
                    String[] split = ss.split( "!", -1 );
                    for(int i=0;i<colsArr.length;i++){
                        map.put( colsArr[i], split[i]);
                    }

                    try {
                        esu.add( restHighLevelClient, indexname, typename, split[0],map);
                    } catch (IOException e) {
                        logger.error( e.getMessage());
                        e.printStackTrace();
                    }
                    if(ii%10000==0){
                        logger.info( "完成:"+ii );
                    }
                }
            } );
            i++;

        }
        // 3关闭读取文件流和线程池,并优雅关闭线程池
        raf.close();
        pool.shutdown();
        try {
            pool.awaitTermination( 1, TimeUnit.DAYS);
        } catch ( Exception e) {

                e.printStackTrace();
        }
        logger.info( "结束:" );
    }
}

### 回答1: Java线程池提供了一种线程复用的机制,以及一些控制和管理线程的方法。它可以帮助我们更好地管理线程,提高应用程序的性能。 以下是使用Java线程池的步骤: 1. 创建线程池对象 可以使用Executors类提供的静态方法来创建线程池对象,如下所示: ``` ExecutorService executor = Executors.newFixedThreadPool(10); ``` 这使用了newFixedThreadPool方法来创建一个固定大小的线程池,最多可以同时执行10个任务。 2. 提交任务 将任务提交给线程池,如下所示: ``` executor.execute(new Runnable() { public void run() { // 执行任务的代码 } }); ``` 这使用了execute方法将任务提交给线程池。你可以将任务封装在Runnable接口的实现类中,并将其作为参数传递给execute方法。 3. 关闭线程池 当你的应用程序不再需要线程池时,应该关闭它,以释放资源。可以使用shutdown方法来关闭线程池,如下所示: ``` executor.shutdown(); ``` 这使用了shutdown方法来关闭线程池。调用shutdown方法后,线程池将不再接受新的任务,但会等待所有已提交的任务执行完毕,然后关闭线程池。 除了newFixedThreadPool方法Java线程池还提供了其他的线程池类型,如newCachedThreadPool、newSingleThreadExecutor等,可以根据需要选择合适的线程池类型。同时,线程池还提供了一些控制和管理线程的方法,如setCorePoolSize、setMaximumPoolSize、setKeepAliveTime等,可以根据需要进行配置。 ### 回答2: Java线程池是用来管理和利用线程的一种机制。它可以有效地将有限的资源(线程)进行分配和复用,提高程序的性能和资源利用率。 使用线程池可以带来一系列好处。首先,线程池能够控制并发的线程数量,避免过多的线程导致系统资源的浪费。其次,线程池可以重复利用已创建的线程,避免频繁地创建和销毁线程的开销。再次,线程池可以对线程进行管理,比如设置线程的优先级、超时时间等,提高了线程的效率。最后,线程池还可以提供线程的监控和统计信息,方便进行系统性能的调优。 在Java中,线程池一般会使用Executor框架来实现。常见的线程池实现类有ThreadPoolExecutor和ScheduledThreadPoolExecutor。 通过ThreadPoolExecutor类,我们可以创建一个线程池,并指定线程的初始大小、最大大小、线程空闲时的存活时间等参数。我们可以将任务提交给线程池执行,线程池会自动选择一个可用的线程来执行任务。当任务执行完毕后,线程会返回线程池继续等待下一个任务的分配。 使用线程池时,应该根据具体情况来配置线程池的参数。如果任务量较大,可以适当增加线程池的大小,以充分利用系统资源。如果任务量较小,可以适当减少线程池的大小,避免资源的浪费。同时,应该注意合理设置线程的优先级和超时时间,以保证任务的顺利执行。 总之,Java线程池使用能够提高程序的性能和资源利用率,减少线程的创建和销毁开销,对于多线程编程是非常有益的工具。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值